Workshop IberLEF 2025
Fechas importantes
22 de diciembre de 2024
Fecha límite para enviar propuestas de tareas
24 de enero de 2025
Notificación de aceptación
Fecha límite para enviar la aceptación de artículos a los participantes de las tareas
3 de julio de 2025
Envío de versiones finales
23 septiembre de 2025
Taller IberLEF
IberLEF (Iberian Language Evaluation Forum) es una campaña de evaluación compartida de sistemas de Procesamiento del Lenguaje Natural en español y otras lenguas ibéricas, cuya edición de 2025 se celebrará como parte de la 41ª Conferencia Internacional de la Sociedad Española para el Procesamiento del Lenguaje Natural (SEPLN). La edición de 2025 de la conferencia SEPLN tendrá lugar en Zaragoza, España.
El objetivo de IberLEF es animar a la comunidad investigadora a organizar tareas competitivas de procesamiento, comprensión y generación de texto, con el propósito de definir nuevos desafíos de investigación y avanzar en el estado del arte en desafíos de Procesamiento del Lenguaje Natural que involucren al menos uno de los siguientes idiomas ibéricos: español, portugués, catalán, euskera o gallego. Investigadores y profesionales de todas las áreas del Procesamiento del Lenguaje Natural y comunidades relacionadas están invitados a enviar propuestas de tareas que se alineen con los objetivos de IberLEF antes del 22 de diciembre de 2024.
Las propuestas deben enviarse (en formato PDF) al correo iberlef@googlegroups.com e incluir los siguientes campos:
- Título de la tarea.
- Descripción de la tarea, destacando:
- Relevancia y novedad de la tarea, y los desafíos involucrados.
- Medidas de evaluación y otros aspectos metodológicos relevantes.
- Comunidad objetivo esperada y posible aplicación industrial.
- Actividades de evaluación relacionadas, si las hay.
- Ediciones anteriores de la tarea, si las hubiera. En caso de haber sido organizada previamente, cuál es la hoja de ruta y cuáles son las novedades para 2024.
- Recursos lingüísticos que se recopilarán, crearán y/o reutilizarán. Por favor, incluya todos los detalles posibles sobre los procedimientos de recopilación, selección y anotación de datos: fuentes y representatividad, tamaños de entrenamiento/validación/pruebas, procedimientos de obtención, perfil de los anotadores (expertos, lingüistas, trabajadores por encargo, etc.), política de anotación múltiple, cuestiones de derechos de propiedad intelectual (IPR), líneas base, etc.
- Cronograma tentativo (tenga en cuenta que las versiones finales de los trabajos deben estar listas para el 3 de julio de 2025).
- Comité organizador: nombres completos y afiliación de los organizadores, con una breve descripción de sus intereses de investigación, áreas de especialización y experiencia organizando eventos similares.
- Financiación, si está disponible.
- Persona de contacto.
- Otros aspectos relevantes.
Los organizadores de tareas aceptadas deberán:
- Configurar el ejercicio de evaluación según la propuesta presentada.
- Promover la tarea dentro de la comunidad investigadora objetivo.
- Gestionar la recepción y evaluación científica de los artículos que describan los sistemas presentados por los participantes. Los artículos aceptados se publicarán en las actas de IberLEF.
- Preparar y enviar una visión general del ejercicio de evaluación.
- Presentar los resultados de la tarea en IberLEF 2025.
El Congreso durará tres días en los que se presentarán artículos científicos, resúmenes de proyectos de investigación y demostraciones de productos o prototipos relacionados con temas del Congreso. Además, el 23 de septiembre tendrá lugar el día de talleres de trabajo, donde destaca entre todos el taller IberLEF 2025.
Cada propuesta recibida será revisada por miembros del comité directivo y del comité de programa de IberLEF. Las decisiones se comunicarán a los organizadores de las tareas antes del 24 de enero de 2025.
Las actas de IberLEF 2025, incluyendo la descripción de los sistemas participantes, se publicarán en CEUR-WS.org. Los resúmenes de las tareas se publicarán en la revista SEPLN (http://www.sepln.org/en/journal, indexada en Clarivate ESCI (JCI: 0.21), CiteScore (Scopus): 2.9 y SJR: 0.421) en su número de septiembre de 2025. Los organizadores de tareas deberán notificar a los participantes la aceptación de sus trabajos antes del 20 de junio de 2025 y enviar las versiones finales de los artículos de descripción de tareas y sistemas antes del 3 de julio de 2025.
- Salud María Jiménez Zafra, SINAI, Universidad de Jaén (España)
- Luis Chiruzzo, Universidad de la República (Uruguay)
- José Ángel González Barba, Symanto Research (España)
Sitio web: https://sites.google.com/view/iberlef-2025
Correo de contacto: iberlef@googlegroups.com