NEGES 2018 - Claves de Negación

Campaña



Nombre de la campaña	TASS 2018@ SEPLN
Nombre de la tarea	Tarea 2: Identificación de claves de negación
Tipo de tarea	Tarea de identificación de claves de negación en el área del análisis de opiniones.
Descripción de la tarea	El objetivo de la tarea 2 es el desarrollo y la evaluación de los sistemas de identificación de claves de negación en español en el área del análisis de opiniones.
Categoría de la tarea	Procesamiento del lenguaje natural
Fecha evento / edición	2018
Organizadores	Salud María Jiménez Zafra, Universidad de Jaén, España Noa Cruz Díaz, Savana Médica, Madrid, España Roser Morante, VU Amsterdam, Holanda Maite Martín Valdivia, Universidad de Jaén, España
Grupos destinatarios	Abierto a quien quiera participar: grupos de investigación académicos y de la industria.
Elegibilidad	Cualquiera puede participar (grupos de investigación académicos, de la industria o investigadores individuales). Hay un control de calidad en los working notes presentados (peer review)
Calendario	20/04/2018: Inscripción abierta 14/05/2018: Training set publicado 13/06/2018: Test set publicado 06/07/2018: Envío del sistema 09/07/2018: Resultados publicados 16/07/2018: Envío de artículos 20/07/ 2018: Notificación de aceptación 27/07/ 2018: Envío de camera read 18/09/2018: Taller NEGES
Número de participantes	2
Número de participantes de España	2
Dominio	Corpus: SFU ReviewSP-NEG. Dominio: Opiniones de productos.
Idiomas	Español

Nombre de la campaña
- TASS 2018@ SEPLN
Nombre de la tarea
- Tarea 2: Identificación de claves de negación
Tipo de tarea
- Tarea de identificación de claves de negación en el área del análisis de opiniones.
Descripción de la tarea
- El objetivo de la tarea 2 es el desarrollo y la evaluación de los sistemas de identificación de claves de negación en español en el área del análisis de opiniones.
Categoría de la tarea
- Procesamiento del lenguaje natural
Fecha evento / edición
- 2018
Organizadores
- - Salud María Jiménez Zafra, Universidad de Jaén, España
  - Noa Cruz Díaz, Savana Médica, Madrid, España
  - Roser Morante, VU Amsterdam, Holanda
  - Maite Martín Valdivia, Universidad de Jaén, España
Grupos destinatarios
- Abierto a quien quiera participar: grupos de investigación académicos y de la industria.
Elegibilidad
- Cualquiera puede participar (grupos de investigación académicos, de la industria o investigadores individuales). Hay un control de calidad en los working notes presentados (peer review)
Calendario
- - 20/04/2018: Inscripción abierta
  - 14/05/2018: Training set publicado
  - 13/06/2018: Test set publicado
  - 06/07/2018: Envío del sistema
  - 09/07/2018: Resultados publicados
  - 16/07/2018: Envío de artículos
  - 20/07/ 2018: Notificación de aceptación
  - 27/07/ 2018: Envío de camera read
  - 18/09/2018: Taller NEGES
Número de participantes
- 2
Número de participantes de España
- 2
Dominio
- - Corpus: SFU ReviewSP-NEG. Dominio: Opiniones de productos.
Idiomas
- Español

Datos



Datos de entrenamiento	En formato CoNLL (destribuido en TXT)
Derecho de redistribución de datos	Sólo para investigación
Enlace a datasets	Datos obtenidos con el registro a la tarea.

Datos de entrenamiento
- En formato CoNLL (destribuido en TXT)
Derecho de redistribución de datos
- Sólo para investigación
Enlace a datasets
- Datos obtenidos con el registro a la tarea.

Resultados



Métrica de evaluación	Medidad F1
Rendimiento	Dominios: Coches: 0,90 Hoteles: 0,86 Lavadoras: 0,86 Libros: 0,84 Móviles: 0,83 Música: 0,83 Oredenadores: 0,91 Películas: 0.87
Disponibilidad del código	No
Tipo de ejecución	Local
Número total de resultados enviados	2
Resultados con los rankings	Salud María Jiménez-Zafra, Noa P. Cruz Díaz, Roser Morante, María Teresa Martín Valdivia. Tarea 1 del Taller NEGES 2018: Guías de Anotación (NEGES 2018 Task 1: Annotation Guidelines). Proceedings of NEGES 2018: Workshop on Negation in Spanish, http://ceur-ws.org/ Vol. 2174, pp. 15-21, co-located with the 34th SEPLN Conference (SEPLN 2018), Seville, Spain, September 18th, 2018. http://ceur-ws.org/Vol-2174/paper4.pdf
Volumen de publicación	vol. 2174, CEUR-WS.org
Gestión web de usuarios	Sí
Atención a participantes	Email

Métrica de evaluación
- Medidad F1
Rendimiento
- Dominios:
  - Coches: 0,90
  - Hoteles: 0,86
  - Lavadoras: 0,86
  - Libros: 0,84
  - Móviles: 0,83
  - Música: 0,83
  - Oredenadores: 0,91
  - Películas: 0.87
Disponibilidad del código
- No
Tipo de ejecución
- Local
Número total de resultados enviados
- 2
Resultados con los rankings
- Salud María Jiménez-Zafra, Noa P. Cruz Díaz, Roser Morante, María Teresa Martín Valdivia. Tarea 1 del Taller NEGES 2018: Guías de Anotación (NEGES 2018 Task 1: Annotation Guidelines). Proceedings of NEGES 2018: Workshop on Negation in Spanish, http://ceur-ws.org/ Vol. 2174, pp. 15-21, co-located with the 34th SEPLN Conference (SEPLN 2018), Seville, Spain, September 18th, 2018.
  
  http://ceur-ws.org/Vol-2174/paper4.pdf
Volumen de publicación
- vol. 2174, CEUR-WS.org
Gestión web de usuarios
- Sí
Atención a participantes
- Email