Comparte y evalúa estereotipos para ayudar a mitigar sesgos de los LLMs.
9 de abril - 7 de mayo | máx 1 pto
Incentivos:
- Cada 10 estereotipos validados por equipo = 0.1 ptos
- Tendréis acceso a los datos recolectados para alinear vuestro LLM
Guía
Este instructivo explica cómo utilizar el Validador de Estereotipos de la plataforma EDIA. Este instructivo contiene una descripción básica del uso de la interfaz, para una mejor comprensión del uso de la herramienta, se recomienda fuertemente ver el video explicativo disponible.
1. Datos personales y consentimiento informado
Al ingresar al validador, lo primero que encontrarás es un formulario en el que se deben completar los datos personales y aceptar el consentimiento informado para poder continuar con la actividad.
Los pasos son los siguientes:
- Seleccionar el idioma de la interfaz, es decir, el idioma en el que se mostrará la página y las instrucciones generales.
- Marcar los idiomas que comprendes (lectura y escritura). Puedes seleccionar varios, teniendo en cuenta que los datos de la actividad pueden aparecer en cualquiera de los idiomas que selecciones.
- Ingresar tu dirección de correo electrónico.
- Seleccionar una o más nacionalidades que representen tu identidad cultural, personal o nacional. También puedes opcionalmente elegir una o más regiones específicas o escribirlas manualmente si no aparecen en la lista.
- Finalmente, leer el consentimiento informado sobre uso de datos de la herramienta EDIA y si estás de acuerdo, aceptarlo para continuar.
2. Uso del Validador de Estereotipos
Una vez completada la primera parte, se habilita el acceso a la actividad principal.
Esta herramienta está diseñada para explorar cómo se perciben los estereotipos en distintas regiones del mundo. Cada vez que envíes una respuesta, recibirás un nuevo dato.
En cada ronda se mostrará una nacionalidad y un atributo. Tu tarea es:
Indicar el grado de asociación entre la nacionalidad y el atributo en tu región, usando una escala del 1 al 5:
- 1: Totalmente en desacuerdo.
- 5: Totalmente de acuerdo.
(Opcional) Puedes escribir otro atributo que relaciones con la nacionalidad dada. Este atributo puede estar en cualquiera de los idiomas que seleccionaste al inicio. Se alienta a escribir en diferentes idiomas si es posible.
- (Opcional) También puedes agregar otras nacionalidades o regiones que, en tu opinión, estén asociadas con el atributo presentado.
Cuando completes los campos que consideres necesarios, haz clic en el botón Enviar para recibir un nuevo par nacionalidad–atributo, posiblemente en alguno de los idiomas que marcaste como conocidos.
Si no entiendes el par que aparece, detectas un error en los datos o no te sientes cómodo anotando sobre ese par en particular, puedes usar el botón Saltar para pasar al siguiente.
Organización
Muchas gracias al equipo: Luciana Benotti, Marcos Javier Gómez, Guido Ivetta, Sofía Martinelli, Nair Carolina Mazzeo, Beatriz Busaniche, Emilia Echeveste y Pietro Palombini. El equipo preparó este reto para el Hackathon SomosNLP 2025 con una versión mejorada del taller que dictaron en KHIPU 2025. El taller original fue elaborado con la colaboración de Sunipa Dev, Vinodkumar Prabhakaran y Fundación Vía Libre.