Reto #HackathonSomosNLP 2025: Validador de Estereotipos

Cómo participar en este reto y ayudar a mitigar estereotipos en modelos de lenguaje


Comparte y evalúa estereotipos para ayudar a mitigar sesgos de los LLMs.

9 de abril - 21 de mayo (EXTENDIDA) | máx 1 pto

¡Participa ya!

🌎 Generasoloestereotipos desde el punto de vista del país o países con los que tengas un vínculo lo suficientemente fuerte como para conocer la cultura local.

✨ Incentivos:

  • Cada 10 estereotipos validados por equipo = 0.1 ptos (máx 1 pto)
  • Tendréis acceso a los datos recolectados para alinear vuestro LLM

Guía

Este instructivo explica cómo utilizar elValidador de Estereotiposde la plataforma EDIA. Este instructivo contiene una descripción básica del uso de la interfaz,para una mejor comprensión del uso de la herramienta, se recomienda fuertemente ver elvideo explicativodisponible.

1. Datos personales y consentimiento informado

Al ingresar al validador, lo primero que encontrarás es un formulario en el que se deben completar los datos personales y aceptar el consentimiento informado para poder continuar con la actividad.

Los pasos son los siguientes:

  • Seleccionar el idioma de la interfaz, es decir, el idioma en el que se mostrará la página y las instrucciones generales.
  • Marcar los idiomas que comprendes (lectura y escritura). Puedes seleccionar varios, teniendo en cuenta que los datos de la actividad pueden aparecer en cualquiera de los idiomas que selecciones.
  • Ingresar tu dirección de correo electrónico.
  • Seleccionar una o más nacionalidades que representen tu identidad cultural, personal o nacional. También puedes opcionalmente elegir una o más regiones específicas o escribirlas manualmente si no aparecen en la lista.
  • Finalmente, leer elconsentimiento informadosobre uso de datos de la herramienta EDIA y si estás de acuerdo, aceptarlo para continuar.

2. Uso del Validador de Estereotipos

Una vez completada la primera parte, se habilita el acceso a la actividad principal.

Esta herramienta está diseñada para explorar cómo se perciben los estereotipos en distintas regiones del mundo. Cada vez que envíes una respuesta, recibirás un nuevo dato.

En cada ronda se mostrará una nacionalidad y un atributo. Tu tarea es:

  1. Indicar el grado de asociación entre la nacionalidad y el atributo en tu región, usando una escala del 1 al 5:

    • 1: Totalmente en desacuerdo.
    • 5: Totalmente de acuerdo.
  2. (Opcional) Puedes escribir otro atributo que relaciones con la nacionalidad dada. Este atributo puede estar en cualquiera de los idiomas que seleccionaste al inicio. Se alienta a escribir en diferentes idiomas si es posible.

  1. (Opcional) También puedes agregar otras nacionalidades o regiones que, en tu opinión, estén asociadas con el atributo presentado.

Cuando completes los campos que consideres necesarios, haz clic en el botónEnviarpara recibir un nuevo par nacionalidad–atributo, posiblemente en alguno de los idiomas que marcaste como conocidos.

Si no entiendes el par que aparece, detectas un error en los datos o no te sientes cómodo anotando sobre ese par en particular, puedes usar el botónSaltarpara pasar al siguiente.


Organización

Muchas gracias al equipo: Luciana Benotti, Marcos Javier Gómez, Guido Ivetta, Sofía Martinelli, Nair Carolina Mazzeo, Beatriz Busaniche, Emilia Echeveste y Pietro Palombini. El equipo preparó este reto para el Hackathon SomosNLP 2025 con una versión mejorada del taller que dictaron en KHIPU 2025. El taller original fue elaborado con la colaboración de Sunipa Dev, Vinodkumar Prabhakaran y Fundación Vía Libre.