Logo del Gobierno de España
Plan Digital Teleco

Plan de Impulso de las Tecnologías del Lenguaje

TASS 2016 - Sentiment analysis at global level

Campaña

Nombre de la campaña

Nombre de la tarea

Task 1: Sentiment Analysis at global level

Tipo de tarea

Tarea de análisis de sentimiento

Descripción de la tarea

Esta tarea consiste en realizar un análisis automático de opiniones para determinar la polaridad global de cada mensaje en los conjuntos de pruebas proporcionados (conjunto completo y conjunto de 1k) del corpus General (ver más abajo). Esta tarea es una reedición de la tarea en los años anteriores. 

Categoría de la tarea

Procesamiento del lenguaje natural

Fecha evento / edición

2016

Organizadores
  • Julio Villena-Román, Daedalus, España
  • Miguel Ángel García-Cumbreras, Universidad de Jaén, España
  • Eugenio Martínez-Cámara, Universidad de Jaén, España
  • Manuel Carlos Díaz-Galiano, Universidad de Jaén, España
  • Janine García-Morera, Daedalus, España
  • L. Alfonso Ureña-López, Universidad de Jaén, España
  • María-Teresa Martín-Valdivia, Universidad de Jaén, España

Grupos destinatarios

Abierto a quien quiera participar: grupos de investigación académicos y de la industria.

Elegibilidad

Cualquiera puede participar (grupos de investigación académicos, de la industria o investigadores individuales). 

Calendario
  • 12/07/2016: Publicación corpus  entrenamiento y test (General y Social-TV)
  • 18/08/2016: Envío de resultados por parte de los participantes
  • 27/08/2016: Envío de artículos
  • 13/09/2016: Taller

Número de participantes

6

Número de participantes de España

4

Dominio
  • General Corpus: tweets escritos por celebridades del mundo de la política, la economía, la comunicación, los medios de comunicación y la cultura.
  • Social-TV Corpus: este corpus fue recolectado durante la Final de la Copa del Rey entre Real Madrid y F.C. Barcelona, que se jugó el 16 de abril de 2014 en el estadio de Mestalla en Valencia.
  • STOMPOL: corpus de Tweets en español para opinión de opinión a nivel de política; es un corpus de tweets en español preparados para la investigación en la difícil tarea de la minería de opinión en nivel de aspecto.

Idiomas

Español

  • Nombre de la campaña

  • Nombre de la tarea

    • Task 1: Sentiment Analysis at global level

  • Tipo de tarea

    • Tarea de análisis de sentimiento

  • Descripción de la tarea

    • Esta tarea consiste en realizar un análisis automático de opiniones para determinar la polaridad global de cada mensaje en los conjuntos de pruebas proporcionados (conjunto completo y conjunto de 1k) del corpus General (ver más abajo). Esta tarea es una reedición de la tarea en los años anteriores. 

  • Categoría de la tarea

    • Procesamiento del lenguaje natural

  • Fecha evento / edición

    • 2016

  • Organizadores

      • Julio Villena-Román, Daedalus, España
      • Miguel Ángel García-Cumbreras, Universidad de Jaén, España
      • Eugenio Martínez-Cámara, Universidad de Jaén, España
      • Manuel Carlos Díaz-Galiano, Universidad de Jaén, España
      • Janine García-Morera, Daedalus, España
      • L. Alfonso Ureña-López, Universidad de Jaén, España
      • María-Teresa Martín-Valdivia, Universidad de Jaén, España

  • Grupos destinatarios

    • Abierto a quien quiera participar: grupos de investigación académicos y de la industria.

  • Elegibilidad

    • Cualquiera puede participar (grupos de investigación académicos, de la industria o investigadores individuales). 

  • Calendario

      • 12/07/2016: Publicación corpus  entrenamiento y test (General y Social-TV)
      • 18/08/2016: Envío de resultados por parte de los participantes
      • 27/08/2016: Envío de artículos
      • 13/09/2016: Taller

  • Número de participantes

    • 6

  • Número de participantes de España

    • 4

  • Dominio

      • General Corpus: tweets escritos por celebridades del mundo de la política, la economía, la comunicación, los medios de comunicación y la cultura.
      • Social-TV Corpus: este corpus fue recolectado durante la Final de la Copa del Rey entre Real Madrid y F.C. Barcelona, que se jugó el 16 de abril de 2014 en el estadio de Mestalla en Valencia.
      • STOMPOL: corpus de Tweets en español para opinión de opinión a nivel de política; es un corpus de tweets en español preparados para la investigación en la difícil tarea de la minería de opinión en nivel de aspecto.

  • Idiomas

    • Español

Datos

Datos de entrenamiento
Formato XML

Derecho de redistribución de datos

Sólo para investigación

Enlace a datasets

Resultados

Métrica de evaluación

Macro-F1.

Rendimiento
  • 5 levels: 0,52
  • 3 levels: 0,57 

Disponibilidad del código

No

Tipo de ejecución

Local

Número total de resultados enviados

27

Resultados con los rankings

Villena-Román, Julio, García-Morera, Janine, García-Cumbreras, Miguel, Martínez-Cámara, Eugenio, Martín-Valdivia, Maria, Ureña-López, L. Alfonso. Overview of TASS 2016. Proceedings of TASS 2016: Workshop on Sentiment Analysis at SEPLN, http://ceur-ws.org, Vol. 1702, pp. 13-21, co-located with 32nd SEPLN Conference (SEPLN 2016), Salamanca, Spain, September 13th, 2016

http://ceur-ws.org/Vol-1702/tass2016_proceedings_v24.pdf

Volumen de publicación

vol. 1702, CEUR-WS.org

Gestión web de usuarios

Sí

Atención a participantes

Email: tass@daedalus.es

  • Métrica de evaluación

    • Macro-F1.

  • Rendimiento

      • 5 levels: 0,52
      • 3 levels: 0,57 

  • Disponibilidad del código

    • No

  • Tipo de ejecución

    • Local

  • Número total de resultados enviados

    • 27

  • Resultados con los rankings

    • Villena-Román, Julio, García-Morera, Janine, García-Cumbreras, Miguel, Martínez-Cámara, Eugenio, Martín-Valdivia, Maria, Ureña-López, L. Alfonso. Overview of TASS 2016. Proceedings of TASS 2016: Workshop on Sentiment Analysis at SEPLN, http://ceur-ws.org, Vol. 1702, pp. 13-21, co-located with 32nd SEPLN Conference (SEPLN 2016), Salamanca, Spain, September 13th, 2016

      http://ceur-ws.org/Vol-1702/tass2016_proceedings_v24.pdf

  • Volumen de publicación

    • vol. 1702, CEUR-WS.org

  • Gestión web de usuarios

    • Sí

  • Atención a participantes

    • Email: tass@daedalus.es