Articulo de referencia

Diversidad léxica

La diversidad léxica es un aspecto de la «riqueza léxica» y se refiere a la proporción de raíces de palabras únicas diferentes (tipos) con respecto al número total de palabras (...

La diversidad léxica es un aspecto de la «riqueza léxica» y se refiere a la proporción de raíces de palabras únicas diferentes (tipos) con respecto al número total de palabras ( tokens ). El término se utiliza en lingüística aplicada y se calcula cuantitativamente mediante diversas medidas, como la relación tipo-token (TTR), [ 1 ] vocd, [ 2 ] y la medida de diversidad léxica textual (MTLD). [ 3 ]

Un problema común con las medidas de diversidad léxica, especialmente TTR, es que las muestras de texto que contienen un gran número de tokens dan valores más bajos para TTR, ya que a menudo es necesario que el escritor o hablante reutilice muchas palabras. Una consecuencia de esto es que a menudo se asume que la diversidad léxica solo puede usarse para comparar textos de la misma longitud. [ 4 ] Sin embargo, muchas medidas de diversidad léxica intentan tener en cuenta la sensibilidad a la longitud del texto. Baayen [ 5 ] y, más recientemente, Bestgen [ 6 ] ofrecen estudios sobre dichas medidas.

Definiciones

En un artículo de 2013, Scott Jarvis propuso que la diversidad léxica, al igual que la diversidad en ecología, es un fenómeno perceptivo. La redundancia léxica es una contraparte positiva de la diversidad léxica, del mismo modo que la variabilidad léxica es la imagen especular de la repetición. Según el modelo de Jarvis, la diversidad léxica incluye variabilidad, volumen, uniformidad, rareza, dispersión y disparidad. [ 7 ]

Según Jarvis, las seis propiedades de la diversidad léxica deben medirse mediante los siguientes índices.

Referencias

  1. Rosillo-Rodes, Pablo; San Miguel, Maxi; Sánchez, David (14 de julio de 2025). "Entropía y relación de tipo-token en corpus de gigapalabras" . Investigación de revisión física . 7 (3). doi : 10.1103/rxxz-lk3n . ISSN 2643-1564 . 
  2. McCarthy, Phillip; Jarvis, Scott (2007). "vocd: Una evaluación teórica y empírica". Language Testing . 24 (4): 459– 488. doi : 10.1177/0265532207080767 .
  3. McCarthy, Phillip (2005). Una evaluación del alcance y la utilidad de las medidas de diversidad léxica y el potencial de la medida de diversidad léxica textual (MTLD) (Tesis doctoral).
  4. Diversidad léxica y densidad léxica en el habla y la escritura: una perspectiva del desarrollo - V. Johansson - Documentos de trabajo en lingüística, 2009
  5. Baayen, RH (2001). Springer (ed.). Distribuciones de frecuencia de palabras . Text, Speech and Language Technology. Vol. 18. doi : 10.1007/978-94-010-0844-0 . ISBN  978-1-4020-0927-3.
  6. Bestgen, Yves (2024). "Medición de la diversidad léxica en textos: el problema de la doble longitud" . Language Learning . 74 : 638–671 . doi : 10.1111/lang.12630 .
  7. Jarvis, Scott (2013). "Capturando la diversidad en la diversidad léxica" . Language Learning . 63 : 87–106 . arXiv : 2307.04626 . doi : 10.1111/j.1467-9922.2012.00739.x .