TASS 2018 - Sentiment Analysis at Tweet level

Campaña



Nombre de la campaña	TASS 2018@ SEPLN
Nombre de la tarea	Task 1: Sentiment Analysis at Tweet level
Tipo de tarea	Tarea de análisis de sentimiento.
Descripción de la tarea	Esta tarea se centra en la evaluación de los sistemas de clasificación de polaridad de tweets escritos en español. Los sistemas presentados deberán enfrentar los siguientes desafíos: falta de contexto, idioma informal, variedad del lenguaje (idioma español que se habla en España, Perú y Costa Rica), generalización.
Categoría de la tarea	Procesamiento del lenguaje natural
Fecha evento / edición	2018
Organizadores	Julio Villena-Román, Daedalus, España Miguel Ángel García-Cumbreras, Universidad de Jaén, España Eugenio Martínez-Cámara, Universidad de Jaén, España Manuel Carlos Díaz-Galiano, Universidad de Jaén, España Manuel García Vega, Universidad de Jaén, España Arturo Montejo Ráez, Universidad de Jaén, España
Grupos destinatarios	Abierto a quien quiera participar: grupos de investigación académicos y de la industria.
Elegibilidad	Cualquiera puede participar (grupos de investigación académicos, de la industria o investigadores individuales).
Calendario	02/05/2018: Publicación corpus de entrenamiento 15/06/2018: Publicación corpus de test 04/07/2018: Envío y evaluación de resultados 16/07/2018: Envío artículos 27/07/2018: Notificación de revisión 05/09/2018: Envío versión final artículos 17/09/2018: Publicación 18/09/2018: Taller
Número de participantes	5
Número de participantes de España	2
Dominio	Corpus intertass: creado en 2017, está compuesto por tweets escritos en diferentes variedades de español (España, Perú y Costa Rica). General corpus: este corpus está compuesto por mensajes de Twitter, escritos por celebridades del mundo de la política, la economía, la comunicación, los medios de comunicación y la cultura.
Idiomas	Español (variedad de España, Perú y Costa Rica)

Nombre de la campaña
- TASS 2018@ SEPLN
Nombre de la tarea
- Task 1: Sentiment Analysis at Tweet level
Tipo de tarea
- Tarea de análisis de sentimiento.
Descripción de la tarea
- Esta tarea se centra en la evaluación de los sistemas de clasificación de polaridad de tweets escritos en español. Los sistemas presentados deberán enfrentar los siguientes desafíos: falta de contexto, idioma informal, variedad del lenguaje (idioma español que se habla en España, Perú y Costa Rica), generalización.
Categoría de la tarea
- Procesamiento del lenguaje natural
Fecha evento / edición
- 2018
Organizadores
- - Julio Villena-Román, Daedalus, España
  - Miguel Ángel García-Cumbreras, Universidad de Jaén, España
  - Eugenio Martínez-Cámara, Universidad de Jaén, España
  - Manuel Carlos Díaz-Galiano, Universidad de Jaén, España
  - Manuel García Vega, Universidad de Jaén, España
  - Arturo Montejo Ráez, Universidad de Jaén, España
Grupos destinatarios
- Abierto a quien quiera participar: grupos de investigación académicos y de la industria.
Elegibilidad
- Cualquiera puede participar (grupos de investigación académicos, de la industria o investigadores individuales).
Calendario
- - 02/05/2018: Publicación corpus de entrenamiento
  - 15/06/2018: Publicación corpus de test
  - 04/07/2018: Envío y evaluación de resultados
  - 16/07/2018: Envío artículos
  - 27/07/2018: Notificación de revisión
  - 05/09/2018: Envío versión final artículos
  - 17/09/2018: Publicación
  - 18/09/2018: Taller
Número de participantes
- 5
Número de participantes de España
- 2
Dominio
- - Corpus intertass: creado en 2017, está compuesto por tweets escritos en diferentes variedades de español (España, Perú y Costa Rica).
  - General corpus: este corpus está compuesto por mensajes de Twitter, escritos por celebridades del mundo de la política, la economía, la comunicación, los medios de comunicación y la cultura.
Idiomas
- Español (variedad de España, Perú y Costa Rica)

Datos



Datos de entrenamiento	Formato XML
Derecho de redistribución de datos	Sólo para investigación
Enlace a datasets	-

Datos de entrenamiento
- Formato XML
Derecho de redistribución de datos
- Sólo para investigación
Enlace a datasets
- -

Resultados



Métrica de evaluación	Macro-F1.
Rendimiento	corpus ES: 0,50 corpus CR: 0,50 corpus PE: 0,49
Disponibilidad del código	No
Tipo de ejecución	Local
Número total de resultados enviados	48
Resultados con los rankings	Eugenio Martínez Cámara, Yudivián Almeida-Cruz, Manuel Carlos Díaz Galiano, Suilan Estévez-Velarde, Miguel Ángel García Cumbreras, Manuel García Vega, Yoan Gutiérrez, Arturo Montejo-Ráez, Andrés Montoyo, Rafael Muñoz, Alejandro Piad-Morffis, Julio Villena-Román. Overview of TASS 2018: Opinions, Health and Emotions. Proceedings of TASS 2018: Workshop on Semantic Analysis at SEPLN (TASS 2018), Vol. 2172, pp. 13-27, co-located with 34nd SEPLN Conference (SEPLN 2018), Sevilla, Spain, September 18th, 2018. http://ceur-ws.org/Vol-2172/p0_overview_tass2018.pdf
Volumen de publicación	vol. 2172, CEUR-WS.org
Gestión web de usuarios	Sí
Atención a participantes	Email: tass@daedalus.es

Métrica de evaluación
- Macro-F1.
Rendimiento
- - corpus ES: 0,50
  - corpus CR: 0,50
  - corpus PE: 0,49
Disponibilidad del código
- No
Tipo de ejecución
- Local
Número total de resultados enviados
- 48
Resultados con los rankings
- Eugenio Martínez Cámara, Yudivián Almeida-Cruz, Manuel Carlos Díaz Galiano, Suilan Estévez-Velarde, Miguel Ángel García Cumbreras, Manuel García Vega, Yoan Gutiérrez, Arturo Montejo-Ráez, Andrés Montoyo, Rafael Muñoz, Alejandro Piad-Morffis, Julio Villena-Román. Overview of TASS 2018: Opinions, Health and Emotions. Proceedings of TASS 2018: Workshop on Semantic Analysis at SEPLN (TASS 2018), Vol. 2172, pp. 13-27, co-located with 34nd SEPLN Conference (SEPLN 2018), Sevilla, Spain, September 18th, 2018.
  
  http://ceur-ws.org/Vol-2172/p0_overview_tass2018.pdf
Volumen de publicación
- vol. 2172, CEUR-WS.org
Gestión web de usuarios
- Sí
Atención a participantes
- Email: tass@daedalus.es