En esta charla aprenderás cómo entrenar LLMs del Estado del Arte con las técnicas más recientes y avanzadas en hardware limitado. Se cubrirá desde la adaptación a idioma / dominio hasta el alineamiento de estos modelos con las preferencias del usuario, pasando por el aprendizaje de instrucciones conversacional. Además, podrás preguntarle a Alejandro tooodas tus dudas sobre entrenamiento de LLMs.
¿Qué vas a aprender al asistir a esta charla?
- Cómo entrenar LLMs con técnicas del estado del arte en hardware limitado.
- Los trucos más importantes para obtener un buen rendimiento en un modelo de instrucciones / conversacional.
- Cómo alinear LLMs en base a las preferencias del usuario con las técnicas más recientes de alineamiento: más allá de RLHF.
- Cómo ahorrar en recursos en el entrenamiento de estos LLMs.
- Cómo usar una librería que facilita los puntos 1-4 para hacer más fácil y accesible la puesta a punto de LLMs para casos de uso concretos.