SemEval-2014: 8th International Workshop on Semantic Evaluation

Task 10: Multilingual Semantic Textual Similarity

Similitud textual

Evaluar pares de oraciones según su grado de similitud semántica. 

Procesamiento del lenguaje natural

2014

• Carmen Banea, University of Michigan, EE.UU.
• Claire Cardie, Cornell University, EE.UU.
• Rada Mihalcea, University of Michigan, EE.UU.
• Janyce Wiebe. University of Pittsburgh, EE.UU

Abierto a quien quiera participar: grupos de investigación académicos y de la industria.

Cualquiera puede participar (grupos de investigación académicos, de la industria o investigadores individuales). 

• 10/01/2007: Datos de trial disponibles
• 30/10/2013: Datos de trial disponibles
• 15/12/2013: Datos de entrenamiento disponibles
• 10/03/2014: Datos de test disponibles
• 15/03/2014: Inicio de evaluación
• 30/03/2014: Fin de la evaluación
• 15/05/2014: Envío de artículos
• 10/06/2014: Revisiones
• 30/06/2014:Envío versión final de artículos
• 23-30 /08/2014: SemEval

9

1

Español e inglés.

Distribuido como CSV.

Sólo para investigación

http://alt.qcri.org/semeval2014/task10/index.php?id=data-and-tools

Correlación de Pearson con etiquetas de referencia.

El rango final es el promedio entre los dos conjuntos de datos: 80.7%

No

Local

48

Eneko Agirre, Carmen Banea, Claire Cardie, Daniel Cer; Mona Diab, Aitor Gonzalez-Agirre, Weiwei Guo, Rada Mihalcea, German Rigau, Janyce Wieb. Task 10: Multilingual Semantic Textual Similarity. Proceedings of the 8th International Workshop on Semantic Evaluation (SemEval 2014), August 2014, pp. 81-91.

http://aclweb.org/anthology/S/S07/S07-1008.pdfhttp://aclweb.org/anthology/S/S14/S14-2010.pdf

Proceedings of the 8th International Workshop on Semantic Evaluation.

Sí

Email