Logo del Gobierno de España
Plan Digital Teleco

Plan de Impulso de las Tecnologías del Lenguaje

CoNLL 2009

Campaña

Nombre de la campaña

Nombre de la tarea

Syntactic and Semantic Dependencies in Multiple Languages

Tipo de tarea

Clasificación

Descripción de la tarea

Extracción de dependencias sintácticas y semánticas.

Categoría de la tarea

Procesamiento del lenguaje natural

Fecha evento / edición

Organizadores
  • Jan Hajič (chair), Charles University, República Checa
  • Massimiliano Ciaramita, Google Inc., Suiza
  • Richard Johansson, Lund University, Suecia
  • Daisuke Kawahara, NICT, Japón
  • Maria Antonia Martí, University of Barcelona, España
  • Lluís Màrquez, Universitat Politècnica de Catalunya, España
  • Adam Meyers, New York University, EE.UU.
  • Joakim Nivre, Uppsala University, Suecia
  • Jan Štěpánek, Charles University, República Checa
  • Sebastian Padó, Stanford University, EE.UU.
  • Pavel Straňák, Charles University, República Checa
  • Mihai Surdeanu, Stanford University, EE.UU.
  • Nianwen (Bert) Xue, University of Colorado, EE.UU.
  • Yi Zhang, Saarland University, Saarbrücken, Alemania

Grupos destinatarios

Abierto a quien quiera participar: grupos de investigación académicos y de la industria. Han participado: Swedish Institute of Computer Science (Suecia), International Computer Science Institute (EE.UU.), Database Center for Life Science (Japón). 

Elegibilidad

Cualquiera puede participar (grupos de investigación académicos, de la industria o investigadores individuales).

Calendario
  • 05/01/2009: Inscripción de participantes
  • 05/01/2009: Pequeño conjunto de datos de trial disponible
  • 19/01/2009: Datos de entrenamiento y desarrollo disponibles
  • 11/03/2009: Publicación de datos de test
  • 20/03/2009: Envío de resultados
  • 31/03/2009: Presentación de artículos
  • 08/04/2009: Notificación de aceptación
  • 15/04/2009: Envío artículos final
  • 04-05/06/2009: CoNLL-2009 @ NAACL

Número de participantes

20

Número de participantes de España

1        

Dominio

Noticias (agencias EFE, ACN; corpus Lexesp, El Periódico)

Idiomas

Español, catalán y otros idiomas (inglés, alemán, checo, chino, japonés)

  • Nombre de la campaña

  • Nombre de la tarea

    • Syntactic and Semantic Dependencies in Multiple Languages

  • Tipo de tarea

    • Clasificación

  • Descripción de la tarea

    • Extracción de dependencias sintácticas y semánticas.

  • Categoría de la tarea

    • Procesamiento del lenguaje natural

  • Fecha evento / edición

  • Organizadores

      • Jan Hajič (chair), Charles University, República Checa
      • Massimiliano Ciaramita, Google Inc., Suiza
      • Richard Johansson, Lund University, Suecia
      • Daisuke Kawahara, NICT, Japón
      • Maria Antonia Martí, University of Barcelona, España
      • Lluís Màrquez, Universitat Politècnica de Catalunya, España
      • Adam Meyers, New York University, EE.UU.
      • Joakim Nivre, Uppsala University, Suecia
      • Jan Štěpánek, Charles University, República Checa
      • Sebastian Padó, Stanford University, EE.UU.
      • Pavel Straňák, Charles University, República Checa
      • Mihai Surdeanu, Stanford University, EE.UU.
      • Nianwen (Bert) Xue, University of Colorado, EE.UU.
      • Yi Zhang, Saarland University, Saarbrücken, Alemania

  • Grupos destinatarios

    • Abierto a quien quiera participar: grupos de investigación académicos y de la industria. Han participado: Swedish Institute of Computer Science (Suecia), International Computer Science Institute (EE.UU.), Database Center for Life Science (Japón). 

  • Elegibilidad

    • Cualquiera puede participar (grupos de investigación académicos, de la industria o investigadores individuales).

  • Calendario

      • 05/01/2009: Inscripción de participantes
      • 05/01/2009: Pequeño conjunto de datos de trial disponible
      • 19/01/2009: Datos de entrenamiento y desarrollo disponibles
      • 11/03/2009: Publicación de datos de test
      • 20/03/2009: Envío de resultados
      • 31/03/2009: Presentación de artículos
      • 08/04/2009: Notificación de aceptación
      • 15/04/2009: Envío artículos final
      • 04-05/06/2009: CoNLL-2009 @ NAACL

  • Número de participantes

    • 20

  • Número de participantes de España

    • 1        

  • Dominio

    • Noticias (agencias EFE, ACN; corpus Lexesp, El Periódico)

  • Idiomas

    • Español, catalán y otros idiomas (inglés, alemán, checo, chino, japonés)

Datos

Datos de entrenamiento

Distribuido como CSV.

Derecho de redistribución de datos

Sólo para investigación

Enlace a datasets

Resultados

Métrica de evaluación

F1 score

Rendimiento

Catalán: 83,01

Español: 83,31

Disponibilidad del código

No

Tipo de ejecución

Local

Número total de resultados enviados

33

Resultados con los rankings

Jan Hajic, Massimiliano Ciaramita, Richard Johansson, Daisuke Kawahara, Maria Antonia Martì, Lluíıs Màrquez, Adam Meyers, Joakim Nivre, Sebastian Padó, Jan Stepanek, Pavel Stranak, Mihai Surdeanu, Nianwen Xue, Yi Zhang. The CoNLL-2009 Shared Task: Syntactic and Semantic Dependencies in Multiple Languages. Proceedings of the Thirteenth Conference on Computational Natural Language Learning (CoNLL 2009), colocated with NAACL HLT 2009, June 4-5, 2009, Boulder, CO, USA

http://www.aclweb.org/anthology/W09-1201

Volumen de publicación

Proceedings of the Thirteenth Conference on Computational Natural Language Learning (CoNLL 2009): Shared Task. Association for Computational Linguistics

Gestión web de usuarios

Sí

Atención a participantes

Email

  • Métrica de evaluación

    • F1 score

  • Rendimiento

    • Catalán: 83,01

      Español: 83,31

  • Disponibilidad del código

    • No

  • Tipo de ejecución

    • Local

  • Número total de resultados enviados

    • 33

  • Resultados con los rankings

    • Jan Hajic, Massimiliano Ciaramita, Richard Johansson, Daisuke Kawahara, Maria Antonia Martì, Lluíıs Màrquez, Adam Meyers, Joakim Nivre, Sebastian Padó, Jan Stepanek, Pavel Stranak, Mihai Surdeanu, Nianwen Xue, Yi Zhang. The CoNLL-2009 Shared Task: Syntactic and Semantic Dependencies in Multiple Languages. Proceedings of the Thirteenth Conference on Computational Natural Language Learning (CoNLL 2009), colocated with NAACL HLT 2009, June 4-5, 2009, Boulder, CO, USA

      http://www.aclweb.org/anthology/W09-1201

  • Volumen de publicación

    • Proceedings of the Thirteenth Conference on Computational Natural Language Learning (CoNLL 2009): Shared Task. Association for Computational Linguistics

  • Gestión web de usuarios

    • Sí

  • Atención a participantes

    • Email