#distributed-training Repositorios
147 repositorios en total
Un modelo de predicción de la estructura biomolecular totalmente de código abierto basado en AlphaFold3
Una base de código flexible y eficiente para entrenar modelos de lenguaje visualmente condicionados (VLM)
Halo es un marco de código abierto desarrollado por White Circle para entrenar modelos de lenguaje de gran tamaño y modelos multimodales
SERL: Una suite de software para el aprendizaje por refuerzo robótico eficiente en muestras
Deep Learning para principiantes. Todos los detalles prácticos y utilidades útiles que se incluyen al trabajar con modelos reales.
Extender OpenRLHF para admitir el entrenamiento LMM RL para la reproducción de DeepSeek-R1 en tareas multimodales.
Escalado de investigación profunda mediante aprendizaje por refuerzo en entornos del mundo real.
Ejercicios y material complementario para el curso de operaciones de aprendizaje automático (Machine Learning Operations) en DTU.
DataComp: En busca de la próxima generación de conjuntos de datos multimodales
Modelos Fundacionales Legibles, Escalables y Reproducibles con Tensores Nombrados y Jax
[ICLR 2025 Oral] Sobre la escalada del entrenamiento de 3D Gaussian Splatting
[ICML 2024 Mejor Artículo] Modelado de difusión discreta estimando las proporciones de la distribución de datos (https://arxiv.org/abs/2310.16834)
Un motor de aprendizaje por refuerzo asíncrono para post-entrenamiento omnimodal a gran escala
🌾 OAT: Un framework amigable para la investigación de alineación en línea de LLM, incluyendo aprendizaje por refuerzo, aprendizaje por preferencia, etc.
Sistema de conversación a gran escala basado en conocimiento de dominio abierto basado en PaddlePaddle
[CVPR 2024] OneLLM: Un Framework para Alinear Todas las Modalidades con el Lenguaje
Una lista de lectura seleccionada de investigaciones en Mixture-of-Experts (MoE).
Mejores prácticas y guías sobre cómo escribir código de entrenamiento de PyTorch distribuido
Entrenamiento eficiente (incluido preentrenamiento y ajuste fino) para modelos grandes
Un Proyecto de Aprendizaje por Refuerzo a Gran Escala de Código Abierto para Agentes de Búsqueda
OpenDiLoCo: Un marco de código abierto para entrenamiento distribuido globalmente con baja comunicación
Para la investigación y el desarrollo de algoritmos de optimización.
Un repositorio para la investigación sobre modelos de lenguaje de tamaño mediano.
[NeurIPS 2025] Un marco LLM basado en grafos para tareas de SE del mundo real