Experimenta - Mostrar registro

Listado
Nombre del proyecto: Grandes Modelos del Lenguaje y modelado cognitivo. El caso de la composicionalidad.
Profesor responsable: Guillermo de Jorge Botana
Correo electrónico de contacto: guijorge@ucm.es
Breve descripción del proyecto:

Este proyecto tiene como interés reflexionar sobre los mecanismos desplegados para entrenar los Grandes Modelos del Lenguaje (LLMs) y su plausibilidad algorítmica y computacional. Se manipulará parte de esos mecanismos en algunas de las redes neuronales profundas, en concreto, las RNN-LSTM y los Transformers, y se estudiarán ciertos aspectos relacionados con la producción y comprensión humana, como es el caso de la composicionalidad sistemática. También caben otros temas relacionados con la clínica del lenguaje, la morfología, etc. 

Número de alumnos y perfil:

Dos alumnos interesados en redes neuronales y aspectos de la psicología con ganas de aprender tecnologías y con ganas también de razonar sobre aspectos sutiles de los fenómenos lingüísticos. Preferiblemente de último curso.

Tareas a desempeñar y compensación:
  • Lectura y discusión de textos específicos.
  • Manejo y comprensión de modelos de red neuronal.
  • Generación de corpus controlados.
  • Manejo de servidores.
  • Ejecución de las simulaciones.
  • Interpretación de salidas. 

Aprendiendo este tipo de tecnologías se estará en disposición de encontrar mejores trabajos.

Información adicional:

Se requieren ganas de introducirse en temas de redes neuronales más allá del uso aplicado.