La Tercera Escuela CICADA titulada «Tokenpalooza: modelos de lenguaje y sus aplicaciones », explorará los modelos de lenguaje (LLMs), profundizando en sus fundamentos, arquitecturas y aplicación a diferentes dominios. Actualmente estas herramientas están transformando de manera transversal múltiples disciplinas, desde la biología y la psicología cognitiva hasta la matemática o la computación.
La escuela está dirigida a estudiantes (tanto de grado como de posgrado) y jóvenes investigadores de diferentes áreas.
Se llevará a cabo entre el 1 y el 6 de noviembre en el Hotel del Lago de Punta del Este, y reúne a docentes de CICADA y profesores invitados expertos del área, con formación y vocación interdisciplinaria.
El formato intensivo busca combinar una introducción sólida a los fundamentos teóricos (incluyendo aspectos de modelado, entrenamiento y limitaciones) con instancias prácticas orientadas a problemas reales de cada dominio.
Este es un evento organizado por el Centro Interdisciplinario en Ciencia de Datos y Aprendizaje Automático (CICADA) y Khipu.
Fechas clave:
13/07 – Apertura de inscripciones.
15/08 – Cierre de inscripciones.
11/09 – Comunicación de resultados del proceso de selección.
Inscripciones disponibles aquí.
Contenidos:
▪️ Fundamentos de los modelos de lenguaje y las representaciones distribuidas. De los embeddings clásicos a los modelos contextualizados.
▪️ Arquitectura Transformer: atención, encoders y decoders.
▪️ Modelos abiertos y cerrados.
▪️ Adaptación y evaluación de modelos de lenguaje.
▪️ Uso de LLMs como herramientas de investigación.
▪️ Aplicaciones en biología (secuencias genómicas, datos ecológicos, etc.), psicología (análisis del discurso), matemática, computación y otras áreas.
▪️Interpretabilidad, sesgos, limitaciones y aspectos éticos.
Actividades:
▪️Clases y charlas introductorias.
▪️Talleres prácticos con modelos y datos reales.
▪️Desarrollo de un pequeño proyecto en equipos interdisciplinarios.
▪️Presentaciones breves y discusión de proyectos.
Costo:
El costo total de la escuela es de $ 30.000 (pesos uruguayos), con pensión completa.
Quienes necesiten, pueden solicitar una beca parcial (50%) o completa. La solicitud se hace en el mismo formulario de inscripción y no tendrá ningún impacto en el proceso de selección de las y los estudiantes.
Por consultas, escribir a: cicada [at] ei.udelar.edu.uy (cicada[at]ei[dot]udelar[dot]edu[dot]uy)
Más información: Tercera Escuela CICADA: Tokenpalooza
