Logo del Gobierno de España
Plan Digital Teleco

Plan de Impulso de las Tecnologías del Lenguaje

Ibereval 2017 - Multilingual Web Person Name Disambiguation (M-WePNaD)

Campaña

Nombre de la campaña

Nombre de la tarea

Multilingual Web Person Name Disambiguation (M-WePNaD)

Tipo de tarea

Clustering

Descripción de la tarea

Distinguir los diferentes individuos que están contenidos en los resultados de búsqueda para una consulta de nombre de persona. 

Categoría de la tarea

Procesamiento del lenguaje natural

Fecha evento / edición

Organizadores
  • Soto Montalvo, Universidad Rey Juan Carlos, España
  • Raquel Martínez, UNED, España
  • Víctor Fresno, UNED, España
  • Agustín D. Delgado, UNED, España
  • Arkaitz Zubiaga, University of Warwick, Reino Unido
  • Richard Berendsen, Luminis Ámsterdam, Holanda

Grupos destinatarios

Abierto a quien quiera participar: grupos de investigación académicos y de la industria. Han participado: VASS Consultora de Sistemas y Salenda Software Factory (España), así como la Junta de Andalucia.

Elegibilidad

Cualquiera puede participar (grupos de investigación académicos, de la industria o investigadores individuales). 

Calendario
  • 13/03/2017: Training set
  • 12/05/2017: Test set
  • 18/05/2017: Envío de resultados
  • 23/05/2017: Notificación ranking
  • 15/06/2017: Envío working notes
  • 22/06/2017: Envío reviews
  • 01/07/2017: Envío camera ready working notes
  • 19/09/2017: IberEval en la SEPLN

Número de participantes

4

Número de participantes de España

4

Dominio
Páginas web para nombres de personas

Idiomas

Español

  • Nombre de la campaña

  • Nombre de la tarea

    • Multilingual Web Person Name Disambiguation (M-WePNaD)

  • Tipo de tarea

    • Clustering

  • Descripción de la tarea

    • Distinguir los diferentes individuos que están contenidos en los resultados de búsqueda para una consulta de nombre de persona. 

  • Categoría de la tarea

    • Procesamiento del lenguaje natural

  • Fecha evento / edición

  • Organizadores

      • Soto Montalvo, Universidad Rey Juan Carlos, España
      • Raquel Martínez, UNED, España
      • Víctor Fresno, UNED, España
      • Agustín D. Delgado, UNED, España
      • Arkaitz Zubiaga, University of Warwick, Reino Unido
      • Richard Berendsen, Luminis Ámsterdam, Holanda

  • Grupos destinatarios

    • Abierto a quien quiera participar: grupos de investigación académicos y de la industria. Han participado: VASS Consultora de Sistemas y Salenda Software Factory (España), así como la Junta de Andalucia.

  • Elegibilidad

    • Cualquiera puede participar (grupos de investigación académicos, de la industria o investigadores individuales). 

  • Calendario

      • 13/03/2017: Training set
      • 12/05/2017: Test set
      • 18/05/2017: Envío de resultados
      • 23/05/2017: Notificación ranking
      • 15/06/2017: Envío working notes
      • 22/06/2017: Envío reviews
      • 01/07/2017: Envío camera ready working notes
      • 19/09/2017: IberEval en la SEPLN

  • Número de participantes

    • 4

  • Número de participantes de España

    • 4

  • Dominio

    • Páginas web para nombres de personas

  • Idiomas

    • Español

Datos

Datos de entrenamiento

Formato XML

Derecho de redistribución de datos

Sólo para investigación

Enlace a datasets

Resultados

Métrica de evaluación

Fiabilidad, sensibilidad y su media armónica.

Rendimiento

0.80, 0.84, 0.81

Disponibilidad del código

No

Tipo de ejecución

Local

Número total de resultados enviados

18

Resultados con los rankings

Soto Montalvo, Raquel Martínez, Víctor Fresno, Agustín Daniel Delgado, Arkaitz Zubiaga, Richard Berendsen. Overview of the M-WePNaD Task: Multilingual Web Person Name Disambiguation at IberEval 2017. Proceedings of the Second Workshop on Evaluation of Human Language Technologies for Iberian Languages (IberEval 2017), Raquel Martínez, Julio Gonzalo, Paolo Rosso, Soto Montalvo, Jorge Carrillo-de-Albornoz (Eds), Vol. 1881, ceur-ws.org, pp. 113-127, co-located with 33th Conference of the Spanish Society for Natural Language Processing (SEPLN 2017), Murcia, Spain, September 19, 2017.

http://ceur-ws.org/Vol-1881/Overview4.pdf [PDF]

Volumen de publicación

Vol. 1881, ceur-ws.org

Gestión web de usuarios

Sí

Atención a participantes

Email

  • Métrica de evaluación

    • Fiabilidad, sensibilidad y su media armónica.

  • Rendimiento

    • 0.80, 0.84, 0.81

  • Disponibilidad del código

    • No

  • Tipo de ejecución

    • Local

  • Número total de resultados enviados

    • 18

  • Resultados con los rankings

    • Soto Montalvo, Raquel Martínez, Víctor Fresno, Agustín Daniel Delgado, Arkaitz Zubiaga, Richard Berendsen. Overview of the M-WePNaD Task: Multilingual Web Person Name Disambiguation at IberEval 2017. Proceedings of the Second Workshop on Evaluation of Human Language Technologies for Iberian Languages (IberEval 2017), Raquel Martínez, Julio Gonzalo, Paolo Rosso, Soto Montalvo, Jorge Carrillo-de-Albornoz (Eds), Vol. 1881, ceur-ws.org, pp. 113-127, co-located with 33th Conference of the Spanish Society for Natural Language Processing (SEPLN 2017), Murcia, Spain, September 19, 2017.

      http://ceur-ws.org/Vol-1881/Overview4.pdf [PDF]

  • Volumen de publicación

    • Vol. 1881, ceur-ws.org

  • Gestión web de usuarios

    • Sí

  • Atención a participantes

    • Email