Evaluación de modelos de ngrama construidos de derecha a izquierda
Resumen:
En este trabajo se presenta la evaluación de varios modelos de ngramas en dos escenarios simétricos: en el primero, los ngramas del modelo se construyen leyendo el corpus de izquierda a derecha, y en el segundo lo hacen de derecha a izquierda. En cada caso, se estudia su rendimiento, utilizando la medida de perplejidad, considerando diferentes opciones de cut-off, reducción de vocabulario e interpolación con modelos de clases. Los resultados, aunque no concluyentes, parecen indicar que los valores de perplejidad son menores para el segundo escenario.
| 2008 | |
| Modelado de Lenguaje Natural | |
| Español | |
| Universidad de la República | |
| COLIBRI | |
| http://hdl.handle.net/20.500.12008/3563 | |
| Acceso abierto | |
| Licencia Creative Commons Atribución – No Comercial – Sin Derivadas (CC BY-NC-ND 4.0) |
| Sumario: | En este trabajo se presenta la evaluación de varios modelos de ngramas en dos escenarios simétricos: en el primero, los ngramas del modelo se construyen leyendo el corpus de izquierda a derecha, y en el segundo lo hacen de derecha a izquierda. En cada caso, se estudia su rendimiento, utilizando la medida de perplejidad, considerando diferentes opciones de cut-off, reducción de vocabulario e interpolación con modelos de clases. Los resultados, aunque no concluyentes, parecen indicar que los valores de perplejidad son menores para el segundo escenario. |
|---|
