#distributed-training Репозитории
Всего репозиториев: 147
Полностью открытая модель предсказания биомолекулярной структуры на основе AlphaFold3
Гибкая и эффективная кодовая база для обучения визуально-обусловленных языковых моделей (VLM)
Halo — это фреймворк с открытым исходным кодом, разработанный White Circle для обучения больших языковых и мультимодальных моделей
SERL: Программный пакет для эффективного сбора образцов в робототехническом обучении с подкреплением
Глубокое обучение для чайников. Все практические детали и полезные утилиты, необходимые для работы с реальными моделями.
Расширить OpenRLHF для поддержки обучения LMM RL с целью воспроизведения DeepSeek-R1 в мультимодальных задачах.
Масштабирование глубоких исследований с помощью обучения с подкреплением в реальных средах.
Упражнения и дополнительные материалы для курса по эксплуатации систем машинного обучения (Machine Learning Operations) в DTU.
Читаемые, масштабируемые, воспроизводимые базовые модели с именованными тензорами и Jax
[ICML 2024 Лучшая статья] Дискретное диффузионное моделирование путем оценки соотношений распределения данных (https://arxiv.org/abs/2310.16834)
Асинхронный движок обучения с подкреплением для полномодального пост-обучения в больших масштабах
🌾 OAT: Исследовательская платформа для онлайн-согласования LLM, включая обучение с подкреплением, обучение предпочтениям и т. д.
Крупномасштабная диалоговая система с открытым доменом, основанная на знаниях и PaddlePaddle
Подборка исследовательских работ по теме Mixture-of-Experts (MoE).
Руководство по тонкой настройке моделей Llama/Mistral/CodeLlama и других
Лучшие практики и руководства по написанию распределенного обучающего кода PyTorch
Эффективное обучение (включая предварительное обучение и тонкую настройку) для больших моделей
Проект крупномасштабного обучения с подкреплением с открытым исходным кодом для поисковых агентов
OpenDiLoCo: Исходная структура с открытым исходным кодом для глобальных распределенных низкокоммуникационных тренировок