Git Stars Git Stars

#distributed-training 仓库

147
仓库总数
615,835
总星标数
4,189
平均每个仓库星标数

共 147 个仓库

101
aqlaboratory/openfold-3

基于 AlphaFold3 的完全开源生物分子结构预测模型

aqlaboratory
⭐ 925 Python 👤 aqlaboratory Organization 🕐 已更新 2026-11-21 📅 创建时间 2025-10-21
102
bytedance/fedlearner

多方协作机器学习框架

bytedance
⭐ 898 Python 👤 bytedance Organization 🕐 已更新 2026-07-06 📅 创建时间 2020-01-21
103
TRI-ML/prismatic-vlms

用于训练视觉条件语言模型 (VLM) 的灵活高效的代码库

TRI-ML
⭐ 894 Python 👤 TRI-ML Organization 🕐 已更新 2024-07-04 📅 创建时间 2024-02-13
104
whitecircle/halo

Halo 是由 White Circle 构建的用于训练大型语言模型和多模态模型的开源框架

whitecircle
⭐ 868 Python 👤 whitecircle Organization 🕐 已更新 2026-11-21 📅 创建时间 2026-08-26
105
rail-berkeley/serl

SERL:用于样本高效机器人强化学习的软件套件

rail-berkeley
⭐ 864 Python 👤 rail-berkeley Organization 🕐 已更新 2025-10-27 📅 创建时间 2023-12-08
106
EleutherAI/cookbook

菜鸟的深度学习。所有用于处理真实模型的实用细节和有用的工具。

EleutherAI
⭐ 858 Python 👤 EleutherAI Organization 🕐 已更新 2026-10-27 📅 创建时间 2023-12-20
107
TideDra/lmm-r1

将OpenRLHF扩展到支持LMM RL训练,以在多模态任务上复现DeepSeek-R1。

TideDra
⭐ 843 Python 👤 TideDra User 🕐 已更新 2025-05-14 📅 创建时间 2025-02-13
108
LambdaLabsML/examples

深度学习示例

LambdaLabsML
⭐ 828 Jupyter Notebook 👤 LambdaLabsML Organization 🕐 已更新 2024-10-18 📅 创建时间 2022-07-07
109
dhcode-cpp/X-R1

0.5B R1-Zero 训练的最低成本

dhcode-cpp
⭐ 815 Python 👤 dhcode-cpp User 🕐 已更新 2025-05-14 📅 创建时间 2025-02-11
110
GAIR-NLP/DeepResearcher

通过强化学习在真实环境中扩展深度研究。

GAIR-NLP
⭐ 808 Python 👤 GAIR-NLP Organization 🕐 已更新 2026-11-04 📅 创建时间 2025-04-02
111
NVlabs/edm2

EDM2 和 Autoguidance -- 官方 PyTorch 实现

NVlabs
⭐ 807 Python 👤 NVlabs Organization 🕐 已更新 2024-12-09 📅 创建时间 2024-03-11
112
SkafteNicki/dtu_mlops

DTU机器学习运维课程的练习和补充材料。

SkafteNicki
⭐ 807 Python 👤 SkafteNicki User 🕐 已更新 2026-11-21 📅 创建时间 2021-04-07
113
inworld-ai/tts

Inworld TTS

inworld-ai
⭐ 782 Python 👤 inworld-ai Organization 🕐 已更新 2026-11-17 📅 创建时间 2025-05-02
114
mlfoundations/datacomp

DataComp:寻找下一代多模态数据集

mlfoundations
⭐ 780 Python 👤 mlfoundations Organization 🕐 已更新 2025-04-28 📅 创建时间 2023-04-28
115
EleutherAI/sparsify

使用SAE和转码器稀疏化Transformer

EleutherAI
⭐ 744 Python 👤 EleutherAI Organization 🕐 已更新 2026-11-16 📅 创建时间 2024-05-24
116
marin-community/levanter

具有命名张量和Jax的可读、可扩展、可复现的基础模型

marin-community
⭐ 720 Python 👤 marin-community Organization 🕐 已更新 2026-01-26 📅 创建时间 2022-05-24
117
meta-pytorch/torchforge

原生于 PyTorch 的大规模后训练

meta-pytorch
⭐ 706 Python 👤 meta-pytorch Organization 🕐 已更新 2026-09-09 📅 创建时间 2025-06-24
118
facebookresearch/nwm

CVPR 2025 论文“Navigation World Models”的官方代码。

facebookresearch
⭐ 706 Python 👤 facebookresearch Organization 🕐 已更新 2025-11-24 📅 创建时间 2025-03-12
119
nyu-systems/Grendel-GS

[ICLR 2025 口头报告] 关于扩大3D高斯溅射训练规模

nyu-systems
⭐ 686 Python 👤 nyu-systems Organization 🕐 已更新 2025-09-24 📅 创建时间 2023-12-07
120
louaaron/Score-Entropy-Discrete-Diffusion

[ICML 2024 最佳论文] 通过估计数据分布比率进行离散扩散建模 (https://arxiv.org/abs/2310.16834)

louaaron
⭐ 681 Python 👤 louaaron User 🕐 已更新 2024-02-29 📅 创建时间 2024-02-21
121
redai-studio/Relax

用于大规模全模态后训练的异步强化学习引擎

redai-studio
⭐ 678 Python 👤 redai-studio Organization 🕐 已更新 2026-11-21 📅 创建时间 2026-04-13
122
sail-sg/oat

🌾 OAT:一个研究友好型的 LLM 在线对齐框架,包括强化学习、偏好学习等。

sail-sg
⭐ 678 Python 👤 sail-sg Organization 🕐 已更新 2026-01-29 📅 创建时间 2024-10-15
124
PaddlePaddle/Knover

基于PaddlePaddle的大规模开放域知识驱动对话系统

PaddlePaddle
⭐ 672 Python 👤 PaddlePaddle Organization 🕐 已更新 2024-03-06 📅 创建时间 2020-07-03
125
csuhan/OneLLM

[CVPR 2024] OneLLM:一个统一框架,实现所有模态与语言的对齐

csuhan
⭐ 666 Python 👤 csuhan User 🕐 已更新 2024-10-22 📅 创建时间 2023-11-27
126
codecaution/Awesome-Mixture-of-Experts-Papers

精选的关于专家混合(MoE)的研究阅读列表。

codecaution
⭐ 654 👤 codecaution User 🕐 已更新 2024-10-30 📅 创建时间 2022-02-24
127
modal-labs/llm-finetuning

Llama/Mistral/CodeLlama 等模型微调指南

modal-labs
⭐ 650 Python 👤 modal-labs Organization 🕐 已更新 2025-10-15 📅 创建时间 2023-09-14
128
LambdaLabsML/distributed-training-guide

关于如何编写分布式 PyTorch 训练代码的最佳实践和指南

LambdaLabsML
⭐ 633 Python 👤 LambdaLabsML Organization 🕐 已更新 2025-10-22 📅 创建时间 2024-07-31
129
Snowdar/asv-subtools

面向说话人识别的开源工具

Snowdar
⭐ 633 Python 👤 Snowdar User 🕐 已更新 2024-08-05 📅 创建时间 2020-03-02
130
OpenBMB/BMTrain

大型模型的高效训练(包括预训练和微调)

OpenBMB
⭐ 626 Python 👤 OpenBMB Organization 🕐 已更新 2026-07-07 📅 创建时间 2021-12-01
132
inclusionAI/ASearcher

一个面向搜索代理的开源大规模强化学习项目

inclusionAI
⭐ 617 Python 👤 inclusionAI Organization 🕐 已更新 2025-11-26 📅 创建时间 2025-08-05
133
mlfoundations/evalchemy

LLM的自动评估

mlfoundations
⭐ 617 HTML 👤 mlfoundations Organization 🕐 已更新 2026-11-12 📅 创建时间 2024-11-15
134
perplexityai/pplx-kernels

困惑度 GPU 核函数

perplexityai
⭐ 614 C++ 👤 perplexityai Organization 🕐 已更新 2025-11-07 📅 创建时间 2025-03-24
135
damo-cv/RealisDance

RealisDance的官方实现

damo-cv
⭐ 611 Python 👤 damo-cv Organization 🕐 已更新 2025-06-20 📅 创建时间 2024-09-10
136
PrimeIntellect-ai/OpenDiloco

OpenDiLoCo:一个用于全局分布式低通信训练的开源框架

PrimeIntellect-ai
⭐ 610 Python 👤 PrimeIntellect-ai Organization 🕐 已更新 2026-07-17 📅 创建时间 2024-07-10
137
sail-sg/MDT

Masked Diffusion Transformer 是图像生成的 SOTA(ICCV 2023)

sail-sg
⭐ 591 Python 👤 sail-sg Organization 🕐 已更新 2024-04-23 📅 创建时间 2023-03-17
138
Shawn-IEITSystems/Yuan-1.0

Yuan 1.0 Large 预训练LM

Shawn-IEITSystems
⭐ 590 Python 👤 Shawn-IEITSystems User 🕐 已更新 2024-12-03 📅 创建时间 2021-09-27
139
epfLLM/Megatron-LLM

LLM 的分布式训练器

epfLLM
⭐ 587 Python 👤 epfLLM Organization 🕐 已更新 2024-05-20 📅 创建时间 2023-07-28
140
lumalabs/imm

Inductive Moment Matching 的官方实现

lumalabs
⭐ 585 Python 👤 lumalabs Organization 🕐 已更新 2025-07-11 📅 创建时间 2025-03-11
141
facebookresearch/optimizers

为优化算法的研究与开发。

facebookresearch
⭐ 585 Python 👤 facebookresearch Organization 🕐 已更新 2026-10-23 📅 创建时间 2022-04-04
143
mlfoundations/open_lm

关于中等规模语言模型的研究的仓库。

mlfoundations
⭐ 536 Python 👤 mlfoundations Organization 🕐 已更新 2025-06-06 📅 创建时间 2023-08-23
144
codefuse-ai/CodeFuse-CGM

[NeurIPS 2025] 面向现实世界SE任务的基于图的大型语言模型框架

codefuse-ai
⭐ 534 Python 👤 codefuse-ai Organization 🕐 已更新 2025-09-19 📅 创建时间 2024-12-23
145
DachengLi1/LongChat

LongChat 和 LongEval 官方仓库

DachengLi1
⭐ 533 Python 👤 DachengLi1 User 🕐 已更新 2024-05-24 📅 创建时间 2023-04-21
146
XuezheMax/megalodon

Megalodon 7B 模型参考实现

XuezheMax
⭐ 525 Cuda 👤 XuezheMax User 🕐 已更新 2025-05-17 📅 创建时间 2024-04-01