Ventura Labs Ep. 50 - Steffen Cruz y Félix Quinque Felix Quinque, líder de IA, y Steffen Cruz (@macrocrux), CTO y cofundador de Macrocosmos (@MacrocosmosAI) Marcas de tiempo: 1:24 - Introducción 2:12 - Transición de la subred 9 a IOTA 2:47 - El problema: entrenamiento de modelos de lenguaje grandes 4:51 - Descripción general de los grupos de capas 5:02 - Definición de una capa en un LLM 6:07 - Partición de capas frente a conjuntos de datos 7:21 - Distribución de datos entre mineros 10:08 - Introducción al paralelismo de canalización 11:18 - Orquestador: Programación y coordinación 15:44 – Validación: Auditorías en la sombra 19:39 – Futuro del proceso de validación 24:51 - Importancia de la compresión de activación 31:30 - Explicación de Butterfly All-Reduce 36:43 - Logros más orgullosos de la subred 9 39:33 - Definición del éxito para la subred IOTA 46:21 - Consejos para equipos de cero a uno 52:16 - Conclusión y agradecimientos