El Test de Turing para la evaluación de resumen automático de texto

  • Alejandro Molina Villegas Laboratoire Informatique d’Avignon - UAPV
  • Juan-Manuel Torres-Moreno Laboratoire Informatique d’Avignon - UAPV

Resumo

Actualmente existen varios métodos para producir resúmenes de texto de manera automática, pero la evaluación de los mismos continua siendo un tema desafiante. En este artículo estudiamos la evaluación de la calidad de resúmenes producidos de manera automática mediante un método de compresión de frases. Abordamos la problemática que supone el uso de métricas automáticas, las cuales no toman en cuenta ni la gramática ni la validez de las oraciones. Nuestra propuesta de evaluación está basada en el test de Turing, en el cual varios jueces humanos deben identificar el origen, humano o automático, de una serie de resúmenes. También explicamos como validar las respuestas de los jueces por medio del test estadístico de Fisher.

Publicado
2015-12-30
Como Citar
Molina Villegas, A., & Torres-Moreno, J.-M. (2015). El Test de Turing para la evaluación de resumen automático de texto. Linguamática, 7(2), 45-55. Obtido de https://linguamatica.com/index.php/linguamatica/article/view/V7N2.4
Edição
Secção
Artigos de Investigação