El Test de Turing para la evaluación de resumen automático de texto
Actualmente existen varios métodos para producir resúmenes de texto de manera automática, pero la evaluación de los mismos continua siendo un tema desafiante. En este artículo estudiamos la evaluación de la calidad de resúmenes producidos de manera automática mediante un método de compresión de fras...
Main Authors: | , |
---|---|
Format: | Article |
Language: | Catalan |
Published: |
Universidade do Minho & Universidade de Vigo
2015-12-01
|
Series: | Linguamática |
Subjects: | |
Online Access: | http://linguamatica.com/index.php/linguamatica/article/view/214 |
_version_ | 1811278697174401024 |
---|---|
author | Alejandro Molina Villegas Juan-Manuel Torres-Moreno |
author_facet | Alejandro Molina Villegas Juan-Manuel Torres-Moreno |
author_sort | Alejandro Molina Villegas |
collection | DOAJ |
description | Actualmente existen varios métodos para producir resúmenes de texto de manera automática, pero la evaluación de los mismos continua siendo un tema desafiante. En este artículo estudiamos la evaluación de la calidad de resúmenes producidos de manera automática mediante un método de compresión de frases. Abordamos la problemática que supone el uso de métricas automáticas, las cuales no toman en cuenta ni la gramática ni la validez de las oraciones. Nuestra propuesta de evaluación está basada en el test de Turing, en el cual varios jueces humanos deben identificar el origen, humano o automático, de una serie de resúmenes. También explicamos como validar las respuestas de los jueces por medio del test estadístico de Fisher. |
first_indexed | 2024-04-13T00:40:30Z |
format | Article |
id | doaj.art-f3ebd12b41734c3397fd81fcb979319e |
institution | Directory Open Access Journal |
issn | 1647-0818 |
language | Catalan |
last_indexed | 2024-04-13T00:40:30Z |
publishDate | 2015-12-01 |
publisher | Universidade do Minho & Universidade de Vigo |
record_format | Article |
series | Linguamática |
spelling | doaj.art-f3ebd12b41734c3397fd81fcb979319e2022-12-22T03:10:12ZcatUniversidade do Minho & Universidade de VigoLinguamática1647-08182015-12-0172El Test de Turing para la evaluación de resumen automático de textoAlejandro Molina Villegas0Juan-Manuel Torres-Moreno1Laboratoire Informatique d’Avignon - UAPVLaboratoire Informatique d’Avignon - UAPVActualmente existen varios métodos para producir resúmenes de texto de manera automática, pero la evaluación de los mismos continua siendo un tema desafiante. En este artículo estudiamos la evaluación de la calidad de resúmenes producidos de manera automática mediante un método de compresión de frases. Abordamos la problemática que supone el uso de métricas automáticas, las cuales no toman en cuenta ni la gramática ni la validez de las oraciones. Nuestra propuesta de evaluación está basada en el test de Turing, en el cual varios jueces humanos deben identificar el origen, humano o automático, de una serie de resúmenes. También explicamos como validar las respuestas de los jueces por medio del test estadístico de Fisher.http://linguamatica.com/index.php/linguamatica/article/view/214evaluación de resumen automáticocompresión de frasestest de Turingcrowdsourcing |
spellingShingle | Alejandro Molina Villegas Juan-Manuel Torres-Moreno El Test de Turing para la evaluación de resumen automático de texto Linguamática evaluación de resumen automático compresión de frases test de Turing crowdsourcing |
title | El Test de Turing para la evaluación de resumen automático de texto |
title_full | El Test de Turing para la evaluación de resumen automático de texto |
title_fullStr | El Test de Turing para la evaluación de resumen automático de texto |
title_full_unstemmed | El Test de Turing para la evaluación de resumen automático de texto |
title_short | El Test de Turing para la evaluación de resumen automático de texto |
title_sort | el test de turing para la evaluacion de resumen automatico de texto |
topic | evaluación de resumen automático compresión de frases test de Turing crowdsourcing |
url | http://linguamatica.com/index.php/linguamatica/article/view/214 |
work_keys_str_mv | AT alejandromolinavillegas eltestdeturingparalaevaluacionderesumenautomaticodetexto AT juanmanueltorresmoreno eltestdeturingparalaevaluacionderesumenautomaticodetexto |