Logo del Gobierno de España
Plan Digital Teleco

Plan de Impulso de las Tecnologías del Lenguaje

Semseval 2018 - Emoji Prediction in Spanish

Campaña

Nombre de la campaña

Nombre de la tarea

Task 2: Emoji Prediction in Spanish

Tipo de tarea

Clasificación

Descripción de la tarea

Dado el texto de un tweet, la tarea consiste en predecir los emojis más probables que se utilizarán a lo largo de tales tweets. 

Categoría de la tarea

Procesamiento del lenguaje natural

Fecha evento / edición

Organizadores
  • Francesco Barbieri, Universitat Pompeu Fabra, España
  • Luis Espinoza-Anke, Universitat Pompeu Fabra, España
  • Francesco Ronzano, Universitat Pompeu Fabra, España
  • Horacio Saggion, Universitat Pompeu Fabra, España
  • Jose Camacho-Collados, Sapienza University, España
  • Valerio Basile, Sapienza University, España
  • Miguel Ballesteros, IBM Watson, EE.UU.
  • Viviana Patti, University of Torino, Italia

Grupos destinatarios

Abierto a quien quiera participar: grupos de investigación académicos y de la industria. Han participado: Cognos Business Consulting (Rumanía), Microsoft Research Asia (China), Behavioral Signal Technologies (EE.UU.), Data61 (Australia).

Elegibilidad

Cualquiera puede participar (grupos de investigación académicos, de la industria o investigadores individuales). 

Calendario
  • 21/08/2017: Datos de trail
  • 18/09/2017: Datos de entrenamiento disponibles
  • 08/01/2018: Datos de prueba. Inicio de evaluación
  • 29/01/2018: Final de evaluación
  • 05/03/2018: Envío de artículos
  • 23/03/2018: Revisiones
  • 02/04/2018: Notificaciones
  • 16/04/2018: Envío artículo final
  • 5-6/06/2018: SemEval

Número de participantes

20 (español)

Número de participantes de España

1

Dominio

Tweets generales

Idiomas

Español e inglés

  • Nombre de la campaña

  • Nombre de la tarea

    • Task 2: Emoji Prediction in Spanish

  • Tipo de tarea

    • Clasificación

  • Descripción de la tarea

    • Dado el texto de un tweet, la tarea consiste en predecir los emojis más probables que se utilizarán a lo largo de tales tweets. 

  • Categoría de la tarea

    • Procesamiento del lenguaje natural

  • Fecha evento / edición

  • Organizadores

      • Francesco Barbieri, Universitat Pompeu Fabra, España
      • Luis Espinoza-Anke, Universitat Pompeu Fabra, España
      • Francesco Ronzano, Universitat Pompeu Fabra, España
      • Horacio Saggion, Universitat Pompeu Fabra, España
      • Jose Camacho-Collados, Sapienza University, España
      • Valerio Basile, Sapienza University, España
      • Miguel Ballesteros, IBM Watson, EE.UU.
      • Viviana Patti, University of Torino, Italia

  • Grupos destinatarios

    • Abierto a quien quiera participar: grupos de investigación académicos y de la industria. Han participado: Cognos Business Consulting (Rumanía), Microsoft Research Asia (China), Behavioral Signal Technologies (EE.UU.), Data61 (Australia).

  • Elegibilidad

    • Cualquiera puede participar (grupos de investigación académicos, de la industria o investigadores individuales). 

  • Calendario

      • 21/08/2017: Datos de trail
      • 18/09/2017: Datos de entrenamiento disponibles
      • 08/01/2018: Datos de prueba. Inicio de evaluación
      • 29/01/2018: Final de evaluación
      • 05/03/2018: Envío de artículos
      • 23/03/2018: Revisiones
      • 02/04/2018: Notificaciones
      • 16/04/2018: Envío artículo final
      • 5-6/06/2018: SemEval

  • Número de participantes

    • 20 (español)

  • Número de participantes de España

    • 1

  • Dominio

    • Tweets generales

  • Idiomas

    • Español e inglés

Datos

Datos de entrenamiento

Distribuido como CSV.

Derecho de redistribución de datos

Sólo para investigación

Enlace a datasets

Resultados

Métrica de evaluación

F1 score

Rendimiento

22.36

Disponibilidad del código

No

Tipo de ejecución

Local

Número total de resultados enviados

20

Resultados con los rankings

Francesco Barbieri, Jose Camacho-Collados, Francesco Ronzano, Luis Espinosa-Anke, Miguel Ballesteros, Valerio Basile, Viviana Patti, Horacio Saggion. SemEval 2018 Task 2: Multilingual Emoji Prediction. Proceedings of the 12th International Workshop on Semantic Evaluation (SemEval-2018), June 2018, pp. 24-33, New Orleans, Louisiana, June 5–6, 2018

http://aclweb.org/anthology/S18-1003

Volumen de publicación

Proceedings of The 12th International Workshop on Semantic Evaluation. Association for Computational Linguistics.

Gestión web de usuarios

Sí

Atención a participantes

Email y Google group

  • Métrica de evaluación

    • F1 score

  • Rendimiento

    • 22.36

  • Disponibilidad del código

    • No

  • Tipo de ejecución

    • Local

  • Número total de resultados enviados

    • 20

  • Resultados con los rankings

    • Francesco Barbieri, Jose Camacho-Collados, Francesco Ronzano, Luis Espinosa-Anke, Miguel Ballesteros, Valerio Basile, Viviana Patti, Horacio Saggion. SemEval 2018 Task 2: Multilingual Emoji Prediction. Proceedings of the 12th International Workshop on Semantic Evaluation (SemEval-2018), June 2018, pp. 24-33, New Orleans, Louisiana, June 5–6, 2018

      http://aclweb.org/anthology/S18-1003

  • Volumen de publicación

    • Proceedings of The 12th International Workshop on Semantic Evaluation. Association for Computational Linguistics.

  • Gestión web de usuarios

    • Sí

  • Atención a participantes

    • Email y Google group