TASS 2018 - Sentiment Analysis at Tweet level

Campaña

Nombre de la campaña

TASS 2018@ SEPLN

Nombre de la tarea

Task 1: Sentiment Analysis at Tweet level

Tipo de tarea

Tarea de análisis de sentimiento

Descripción de la tarea

Esta tarea se centra en la evaluación de los sistemas de clasificación de polaridad de tweets escritos en español. Los sistemas presentados deberán enfrentar los siguientes desafíos: falta de contexto, idioma informal, variedad del lenguaje (idioma español que se habla en España, Perú y Costa Rica), generalización. 

Categoría de la tarea

Procesamiento del lenguaje natural

Fecha evento / edición

2018

Organizadores
  • Julio Villena-Román, Daedalus, España
  • Miguel Ángel García-Cumbreras, Universidad de Jaén, España
  • Eugenio Martínez-Cámara, Universidad de Jaén, España
  • Manuel Carlos Díaz-Galiano, Universidad de Jaén, España
  • Manuel García Vega, Universidad de Jaén, España
  • Arturo Montejo Ráez, Universidad de Jaén, España
Grupos destinatarios

Abierto a quien quiera participar: grupos de investigación académicos y de la industria.

Elegibilidad

Cualquiera puede participar (grupos de investigación académicos, de la industria o investigadores individuales). 

Calendario
  • 02/05/2018: Publicación corpus de entrenamiento
  • 15/06/2018: Publicación corpus de test
  • 04/07/2018: Envío y evaluación de resultados
  • 16/07/2018: Envío artículos
  • 27/07/2018: Notificación de revisión
  • 05/09/2018: Envío versión final artículos
  • 17/09/2018: Publicación
  • 18/09/2018: Taller
Número de participantes

5

Número de participantes de España

2

Dominio
  • Corpus intertass: creado en 2017, está compuesto por tweets escritos en diferentes variedades de español (España, Perú y Costa Rica).
  • General corpus: este corpus está compuesto por mensajes de Twitter, escritos por celebridades del mundo de la política, la economía, la comunicación, los medios de comunicación y la cultura.
Idiomas

Español (variedad de España, Perú y Costa Rica)

Datos

Datos de entrenamiento

Formato XML

Derecho de redistribución de datos

Sólo para investigación

Enlace a datasets

http://www.sepln.org/workshops/tass/2018/task-1/#datasets

Resultados

Métrica de evaluación

Macro-F1.

Rendimiento
  • corpus ES: 0,50
  • corpus CR: 0,50
  • corpus PE: 0,49 
Disponibilidad del código

No

Tipo de ejecución

Local

Número total de resultados enviados

48

Resultados con los rankings

Eugenio Martínez Cámara, Yudivián Almeida-Cruz, Manuel Carlos Díaz Galiano, Suilan Estévez-Velarde, Miguel Ángel García Cumbreras, Manuel García Vega, Yoan Gutiérrez, Arturo Montejo-Ráez, Andrés Montoyo, Rafael Muñoz, Alejandro Piad-Morffis, Julio Villena-Román. Overview of TASS 2018: Opinions, Health and Emotions. Proceedings of TASS 2018: Workshop on Semantic Analysis at SEPLN (TASS 2018), Vol. 2172, pp. 13-27, co-located with 34nd SEPLN Conference (SEPLN 2018), Sevilla, Spain, September 18th, 2018.

http://ceur-ws.org/Vol-2172/p0_overview_tass2018.pdf 

Volumen de publicación

vol. 2172, CEUR-WS.org

Gestión web de usuarios

Atención a participantes

Email: tass@daedalus.es