Representación del conocimiento textual mediante técnicas lógico ...

112 5. Evaluación del recurso lógico-conceptual para la representación formal del texto
los que se va a evaluar la validez que aporta la incorporación del recurso
son: Vinculación o Implicación Textual, Recuperación de Información
y Búsqueda de Repuestas. A continuación se matiza el porqué de la
elección de esta muestra de sistemas de PLN.
La elección de la vinculación o implicación textual en esta muestra es
debido a que, como se justifica más adelante, la vinculación textual
resume las necesidades principales de inferencia semántica de otros sistemas
del PLN como la Búsqueda de Respuestas, la Recuperación de
Información, la Extracción de Información y la Generación Automática
de Resúmenes. Estas necesidades de inferencia semántica requieren de
una representación formal del texto. Por ello y, dado este contexto, en
la evaluación de la Vinculación Textual se están evaluando también,
indirectamente, las necesidades de representación formal del texto de
todo este subconjunto de sistemas de PLN.
De un modo más complementario a lo matizado en el párrafo anterior,
la elección de la Recuperación de Información y de la Búsqueda de Respuestas
se ha efectuado porque estos dos tipos de sistemas, tanto a nivel
cuantitativo como a nivel cualitativo, han centrado uno de los mayores
esfuerzos de la última década de las investigaciones en el área de PLN,
tal y como demuestran la multitud de proyectos de investigación surgidos
en el seno de los diferentes grupos de investigación en el área de
PLN en esta última década.
Más concretamente, para la evaluación del recurso se han seleccionado
las tareas Cross-Language Speech Retrieval (CL-SR), Answer Validation
Exercise (AVE) y Multiple Language Question Answering (QA-
CLEF), todas ellas pertenecientes a las campañas de evaluación del
CLEF. Además, la tarea Recognising Textual Entailment (RTE) en el
marco de la campaña de evaluación PASCAL RTE también ha sido
considerada en el escenario de la evaluación del recurso. Por último,
también se efectúa una evaluación ad-hoc de la clasificación de preguntas
médicas según la taxonomía genérica planteada en el estudio
realizado por Ely et al. (2000).
En las siguientes secciones del capítulo, en lo que respecta a la especificación
de cada una de las tareas de evaluación efectuadas al recurso,
se especifica la relación de cada una de ellas con los diferentes matices
planteados en el capítulo. No obstante, la tabla 5.1 introduce la relación
existente entre cada una de estas tareas y cada uno de los matices.
Las siguientes secciones del capítulo especifican con detalle la aplicación
de cada una de estas tareas desarrolladas en el marco de la evaluación
del recurso presentado en el trabajo de investigación. Finalmente se