TASS 2014 @ SEPLN

Task 2:Topic classification

Tarea de análisis temática

El objetivo de esta tarea es de construir un clasificador para identificar automáticamente el tema de cada mensaje en el conjunto de pruebas del corpus General. Es una reedición de la misma tarea en años anteriores. Los participantes pueden usar el dataset de entrenamiento del Cuerpo General para entrenar y validar sus modelos. 

Procesamiento del lenguaje natural

2014

• Julio Villena-Román, Daedalus, España
• Janine García-Morera, Daedalus, España
• José Carlos González-Cristóbal, Universidad Politécnica de Madrid, España
• L. Alfonso Ureña-López, Universidad de Jaén, España
• Miguel Ángel García-Cumbreras, Universidad de Jaén, España
• María-Teresa Martín-Valdivia, Universidad de Jaén, España
• Eugenio Martínez-Cámara, Universidad de Jaén, España

Abierto a quien quiera participar: grupos de investigación académicos y de la industria.

Cualquiera puede participar (grupos de investigación académicos, de la industria o investigadores individuales). 

• 05/05/2014: Publicación del corpus general
• 17/06/2014: Publicación del corpus social-tv
• 27/06/ 2014: Envío de los resultados por los participantes
• 31/07/2014: Resultados de la evaluación
• 17/08/2014: Envío de trabajos
• 16/09/2014: Taller

3

2

• General Corpus: tweets escritos por celebridades del mundo de la política, la economía, la comunicación, los medios de comunicación y la cultura.
• Social-TV Corpus: este corpus fue recolectado durante la Final de la Copa del Rey entre Real Madrid y F.C. Barcelona, que se jugó el 16 de abril de 2014 en el estadio de Mestalla en Valencia.

Español

Formato XML

Sólo para investigación

http://www.sepln.org/workshops/tass/2014/tass2014.php#corpus

Las métricas de evaluación para evaluar y comparar los diferentes sistemas son las mediciones habituales de precisión, cobertura y medida F calculadas sobre el conjunto completo de pruebas.

• F1: 0,70

Los resultados detallados de cada ejecución, los archivos de evaluación de relevancia (las etiquetas correctas para el conjunto de prueba) y un script PHP para realizar su propia evaluación se pueden encontrar aquí. 

Local

6

Julio Villena Román Janine García Morera, César de Pablo Sánchez, Miguel Ángel García Cumbreras, Eugenio Martínez Cámara, Alfonso Ureña López, María Teresa Martín Valdivia. TASS 2014 - Workshop on Sentiment Analysis at SEPLN - Overview. In Proceedings of the TASS workshop at SEPLN.

http://www.sepln.org/workshops/tass/2014/papers/1.Overview.pdf [PDF]

Julio Villena Román, Eugenio Martínez Cámara, Janine García Morera, Salud M. Jiménez Zafra. TASS 2014 - The Challenge of Aspect-based Sentiment Analysis. Procesamiento del Lenguaje Natural. N. 54 (2015), pp. 61-68.

http://journal.sepln.org/sepln/ojs/ojs/index.php/pln/article/view/5095/2976 

Procesamiento del Lenguaje Natural. N. 54 (2015). ISSN 1135-5948

Sí

Email: tass@daedalus.es