Compartilhe e avalie estereótipos para ajudar a mitigar vieses dos LLMs.
9 de abril - 21 de maio (PRORROGADO) | máx 1 ponto
🌎 Gere apenas estereótipos do ponto de vista do país ou países com os quais você tenha um vínculo forte o suficiente para conhecer a cultura local.
✨ Incentivos:
- Cada 10 estereótipos validados por equipe = 0,1 pontos (máx 1 ponto)
- Você terá acesso aos dados coletados para alinhar seu LLM
Guia
Este guia explica como utilizar o Validador de Estereótipos da plataforma EDIA. Este guia contém uma descrição básica do uso da interface, para uma melhor compreensão do uso da ferramenta, recomenda-se fortemente assistir ao vídeo explicativo disponível.
1. Dados pessoais e consentimento informado
Ao entrar no validador, a primeira coisa que você encontrará é um formulário onde deve preencher seus dados pessoais e aceitar o consentimento informado para poder continuar com a atividade.
Os passos são os seguintes:
- Selecionar o idioma da interface, ou seja, o idioma em que a página e as instruções gerais serão exibidas.
- Marcar os idiomas que você compreende (leitura e escrita). Você pode selecionar vários, tendo em mente que os dados da atividade podem aparecer em qualquer um dos idiomas que você selecionar.
- Inserir seu endereço de e-mail.
- Selecionar uma ou mais nacionalidades que representem sua identidade cultural, pessoal ou nacional. Você também pode opcionalmente escolher uma ou mais regiões específicas ou escrevê-las manualmente se não aparecerem na lista.
- Finalmente, ler o consentimento informado sobre uso de dados da ferramenta EDIA e, se você concordar, aceitá-lo para continuar.
2. Uso do Validador de Estereótipos
Uma vez completada a primeira parte, o acesso à atividade principal é habilitado.
Esta ferramenta foi projetada para explorar como os estereótipos são percebidos em diferentes regiões do mundo. Cada vez que você enviar uma resposta, receberá um novo dado.
Em cada rodada, será mostrada uma nacionalidade e um atributo. Sua tarefa é:
Indicar o grau de associação entre a nacionalidade e o atributo em sua região, usando uma escala de 1 a 5:
- 1: Totalmente em desacordo.
- 5: Totalmente de acordo.
(Opcional) Você pode escrever outro atributo que relacione com a nacionalidade dada. Este atributo pode estar em qualquer um dos idiomas que você selecionou no início. Incentiva-se escrever em diferentes idiomas, se possível.
- (Opcional) Você também pode adicionar outras nacionalidades ou regiões que, em sua opinião, estejam associadas ao atributo apresentado.
Quando completar os campos que considerar necessários, clique no botão Enviar para receber um novo par nacionalidade-atributo, possivelmente em algum dos idiomas que você marcou como conhecidos.
Se você não entender o par que aparece, detectar um erro nos dados ou não se sentir confortável anotando sobre esse par em particular, você pode usar o botão Pular para passar ao próximo.
Organização
Muito obrigado à equipe: Luciana Benotti, Marcos Javier Gómez, Guido Ivetta, Sofía Martinelli, Nair Carolina Mazzeo, Beatriz Busaniche, Emilia Echeveste e Pietro Palombini. A equipe preparou este desafio para o Hackathon SomosNLP 2025 com uma versão melhorada do workshop que ministraram no KHIPU 2025. O workshop original foi elaborado com a colaboração de Sunipa Dev, Vinodkumar Prabhakaran e Fundación Vía Libre.