Git Stars Git Stars

#transformer-architecture 仓库

探索 147 个标记为 #transformer-architecture 的活跃开源 GitHub 仓库,它们累计获得 594,368 个 Star(平均每个项目 4,043 个)。该主题的领先项目是 karpathy/nanoGPT,拥有 64,617 个 Star。

147
仓库总数
594,368
总星标数
4,043
平均每个仓库星标数

共 147 个仓库

1
karpathy/nanoGPT

用于训练/微调中型 GPT 最简单、最快的存储库。

karpathy
⭐ 64,617 Python 👤 karpathy User 🕐 已更新 2025-11-12 📅 创建时间 2022-12-28
2
shiyu-coder/Kronos

Kronos:金融市场语言的基础模型

shiyu-coder
⭐ 48,042 Python 👤 shiyu-coder User 🕐 已更新 2026-04-13 📅 创建时间 2025-07-01
3
google-research/timesfm

TimesFM (Time Series Foundation Model) 是 Google Research 开发的用于时间序列预测的预训练时间序列基础模型。

google-research
⭐ 35,653 Python 👤 google-research Organization 🕐 已更新 2026-11-13 📅 创建时间 2024-04-29
4
Hannibal046/Awesome-LLM

Awesome-LLM: 精选的大型语言模型列表

Hannibal046
⭐ 27,212 👤 Hannibal046 User 🕐 已更新 2025-07-31 📅 创建时间 2023-02-17
5
Dao-AILab/flash-attention

快速且内存高效的精确注意力

Dao-AILab
⭐ 25,330 Python 👤 Dao-AILab Organization 🕐 已更新 2026-11-21 📅 创建时间 2022-05-19
6
facebookresearch/sam2

该存储库提供了运行 Meta Segment Anything Model 2 (SAM 2) 的推理代码、下载训练好的模型检查点的链接,以及展示如何使用该模型的示例笔记本。

facebookresearch
⭐ 20,204 Jupyter Notebook 👤 facebookresearch Organization 🕐 已更新 2026-05-30 📅 创建时间 2024-07-29
7
ZJU-LLMs/Foundations-of-LLMs

一本学习大型语言模型基础知识的书籍

ZJU-LLMs
⭐ 18,631 👤 ZJU-LLMs User 🕐 已更新 2025-12-12 📅 创建时间 2024-06-30
8
Stability-AI/StableLM

StableLM: Stability AI 语言模型

Stability-AI
⭐ 15,784 Jupyter Notebook 👤 Stability-AI Organization 🕐 已更新 2024-04-08 📅 创建时间 2023-04-19
9
naklecha/llama3-from-scratch

Llama3 实现:一次一个矩阵乘法

naklecha
⭐ 15,215 Jupyter Notebook 👤 naklecha User 🕐 已更新 2024-05-23 📅 创建时间 2024-05-19
10
facebookresearch/vggt

[CVPR 2025 最佳论文奖] VGGT: Visual Geometry Grounded Transformer

facebookresearch
⭐ 14,654 Python 👤 facebookresearch Organization 🕐 已更新 2026-05-19 📅 创建时间 2025-02-18
12
facebookresearch/sam3

该存储库提供了用于使用 Meta Segment Anything Model 3 (SAM 3) 运行推理和微调的代码、下载训练模型检查点的链接,以及展示如何使用模型的示例笔记本。

facebookresearch
⭐ 12,369 Python 👤 facebookresearch Organization 🕐 已更新 2026-11-17 📅 创建时间 2025-07-17
13
PKU-YuanGroup/Open-Sora-Plan

本项目旨在复现 Sora (Open AI T2V 模型),我们希望开源社区为该项目做出贡献。

PKU-YuanGroup
⭐ 12,201 Python 👤 PKU-YuanGroup Organization 🕐 已更新 2026-11-18 📅 创建时间 2024-02-20
14
MoonshotAI/Kimi-K2

Kimi K2 是由 Moonshot AI 团队开发的系列大语言模型。

MoonshotAI
⭐ 11,121 👤 MoonshotAI Organization 🕐 已更新 2026-01-21 📅 创建时间 2025-07-03
15
dair-ai/ML-Papers-Explained

机器学习中的关键概念说明

dair-ai
⭐ 8,575 👤 dair-ai Organization 🕐 已更新 2025-06-30 📅 创建时间 2023-01-12
16
QwenLM/Qwen-Image

Qwen-Image 是一个强大的图像生成基础模型,能够进行复杂的文本渲染和精确的图像编辑。

QwenLM
⭐ 8,489 Python 👤 QwenLM Organization 🕐 已更新 2026-02-10 📅 创建时间 2025-08-03
17
datawhalechina/so-large-lm

大模型基础: 一文了解大模型基础知识

datawhalechina
⭐ 7,791 👤 datawhalechina Organization 🕐 已更新 2026-06-22 📅 创建时间 2023-07-17
18
LargeWorldModel/LWM

大型世界模型 -- 使用数百万上下文进行文本和视频建模

LargeWorldModel
⭐ 7,391 Python 👤 LargeWorldModel Organization 🕐 已更新 2024-10-19 📅 创建时间 2024-02-08
19
mit-han-lab/streaming-llm

[ICLR 2024] 具备注意力汇聚点的流式高效语言模型

mit-han-lab
⭐ 7,165 Python 👤 mit-han-lab Organization 🕐 已更新 2024-07-11 📅 创建时间 2023-09-29
20
karminski/one-small-step

这是一个简单的技术科普教程项目,主要聚焦于解释一些有趣的,前沿的技术概念和原理。每篇文章都力求在 5 分钟内阅读完成。

karminski
⭐ 7,006 Python 👤 karminski User 🕐 已更新 2026-03-08 📅 创建时间 2025-01-16
⭐ 6,721 Python 👤 ByteDance-Seed Organization 🕐 已更新 2026-07-27 📅 创建时间 2025-11-12
22
deepseek-ai/DeepSeek-LLM

DeepSeek LLM: 答案诞生

deepseek-ai
⭐ 6,688 Makefile 👤 deepseek-ai Organization 🕐 已更新 2024-02-04 📅 创建时间 2023-11-29
23
meta-pytorch/gpt-fast

python < 1000 LOC 内实现简单高效的 Pytorch 原生 Transformer 文本生成。

meta-pytorch
⭐ 6,244 Python 👤 meta-pytorch Organization 🕐 已更新 2025-08-22 📅 创建时间 2023-10-17
25
OpenGVLab/LLaMA-Adapter

[ICLR 2024] 1小时内、使用120万参数对LLaMA进行微调以遵循指令

OpenGVLab
⭐ 5,931 Python 👤 OpenGVLab Organization 🕐 已更新 2024-03-14 📅 创建时间 2023-03-19
26
bbycroft/llm-viz

GPT风格LLM的3D可视化

bbycroft
⭐ 5,599 TypeScript 👤 bbycroft User 🕐 已更新 2026-08-10 📅 创建时间 2023-03-01
27
bojone/bert4keras

人类友好的 Transformers 的 Keras 实现

bojone
⭐ 5,422 Python 👤 bojone User 🕐 已更新 2024-11-11 📅 创建时间 2019-08-26
28
deepseek-ai/DeepSeek-V2

DeepSeek-V2:一个强大、经济且高效的专家混合语言模型

deepseek-ai
⭐ 4,988 👤 deepseek-ai Organization 🕐 已更新 2024-09-25 📅 创建时间 2024-04-22
29
cmhungsteve/Awesome-Transformer-Attention

Vision Transformer/Attention 的一个最终全面论文列表,包括论文、代码和相关网站

cmhungsteve
⭐ 4,987 👤 cmhungsteve User 🕐 已更新 2024-07-30 📅 创建时间 2021-09-15
30
facebookresearch/vjepa2

用于VJEPA2视频自监督学习的PyTorch代码和模型。

facebookresearch
⭐ 4,911 Python 👤 facebookresearch Organization 🕐 已更新 2026-10-29 📅 创建时间 2025-04-25
31
karpathy/build-nanogpt

从零开始构建nanoGPT的视频+代码讲座

karpathy
⭐ 4,640 Python 👤 karpathy User 🕐 已更新 2024-08-13 📅 创建时间 2024-06-09
33
649453932/Bert-Chinese-Text-Classification-Pytorch

使用Bert,ERNIE,进行中文文本分类

649453932
⭐ 4,366 Python 👤 649453932 User 🕐 已更新 2024-06-28 📅 创建时间 2019-07-15
34
skindhu/Build-A-Large-Language-Model-CN

《Build a Large Language Model (From Scratch)》是一本深入探讨大语言模型原理与实现的电子书,适合希望深入了解 GPT 等大模型架构、训练过程及应用开发的学习者。为了让更多中文读者能够接触到这本极具价值的教材,我决定将其翻译成中文,并通过 GitHub 进行开源共享。

skindhu
⭐ 4,188 HTML 👤 skindhu User 🕐 已更新 2026-08-10 📅 创建时间 2024-10-23
35
ML-GSAI/LLaDA

"Large Language Diffusion Models" 的官方 PyTorch 实现

ML-GSAI
⭐ 4,020 Python 👤 ML-GSAI Organization 🕐 已更新 2026-07-15 📅 创建时间 2025-02-13
36
genmoai/mochi

Genmo 创建的最佳开源视频生成模型

genmoai
⭐ 3,766 Python 👤 genmoai Organization 🕐 已更新 2026-10-22 📅 创建时间 2024-09-11
37
tekaratzas/RustGPT

一个基于 Transformer 的 LLM。完全用 Rust 编写

tekaratzas
⭐ 3,187 Rust 👤 tekaratzas User 🕐 已更新 2025-10-10 📅 创建时间 2025-09-13
39
MLNLP-World/LLMs-from-scratch-CN

LLMs-from-scratch项目中文翻译

MLNLP-World
⭐ 3,100 Jupyter Notebook 👤 MLNLP-World Organization 🕐 已更新 2026-04-19 📅 创建时间 2025-01-20
40
Saiyan-World/goku

[CVPR2025 Highlight] 视频生成基础模型:https://saiyan-world.github.io/goku/

Saiyan-World
⭐ 2,909 Python 👤 Saiyan-World Organization 🕐 已更新 2025-02-19 📅 创建时间 2025-02-10
41
kzl/decision-transformer

Decision Transformer 的官方代码库:通过序列建模进行强化学习。

kzl
⭐ 2,738 Python 👤 kzl User 🕐 已更新 2024-04-29 📅 创建时间 2021-06-02
42
km1994/LLMs_interview_notes

该仓库主要记录 大模型(LLMs) 算法工程师相关的面试题

km1994
⭐ 2,670 👤 km1994 User 🕐 已更新 2026-10-11 📅 创建时间 2023-09-16
44
yuqinie98/PatchTST

PatchTST的官方实现:“A Time Series is Worth 64 Words: Long-term Forecasting with Transformers.” (ICLR 2023) https://arxiv.org/abs/2211.14730

yuqinie98
⭐ 2,353 Python 👤 yuqinie98 User 🕐 已更新 2024-08-12 📅 创建时间 2022-10-25
45
MineDojo/NitroGen

面向通用游戏代理的基础模型

MineDojo
⭐ 2,251 Python 👤 MineDojo Organization 🕐 已更新 2026-01-25 📅 创建时间 2025-12-17
46
aburkov/theLMbook

这是 Andriy Burkov 的《百页语言模型书》的官方代码库

aburkov
⭐ 2,194 Jupyter Notebook 👤 aburkov User 🕐 已更新 2026-02-08 📅 创建时间 2024-06-28
47
dabochen/spreadsheet-is-all-you-need

打包在电子表格中的 nanoGPT 管道

dabochen
⭐ 2,142 👤 dabochen User 🕐 已更新 2024-06-17 📅 创建时间 2024-06-08
48
tairov/llama2.mojo

纯粹的🔥单文件Llama 2推理

tairov
⭐ 2,126 Mojo 👤 tairov User 🕐 已更新 2026-09-30 📅 创建时间 2023-09-10
49
facebookresearch/blt

BLT研究论文代码

facebookresearch
⭐ 2,070 Python 👤 facebookresearch Organization 🕐 已更新 2025-11-03 📅 创建时间 2024-12-09
50
haykgrigo3/TimeCapsuleLLM

一个仅在特定时期数据上训练的 LLM,以减少的现代偏见

haykgrigo3
⭐ 2,014 Python 👤 haykgrigo3 User 🕐 已更新 2026-11-16 📅 创建时间 2025-07-02

常见问题解答

1

GitHub 上最受欢迎的 #transformer-architecture 仓库是什么?

GitHub 上排名第一的开源 #transformer-architecture 项目是 karpathy/nanoGPT,拥有 64,617 个 Star。用于训练/微调中型 GPT 最简单、最快的存储库。

2

#transformer-architecture 仓库中最常使用的编程语言有哪些?

在 GitHub 上排名靠前的 #transformer-architecture 项目中,最常见的编程语言是 Python, Jupyter Notebook, Makefile, TypeScript。

3

#transformer-architecture 仓库的排名是如何计算的?

我们跟踪了 147 个标记为 #transformer-architecture 且拥有 500+ 个 Star 的活跃开源仓库,共计获得 594,368 个 Star,平均每个仓库拥有 4,043 个 Star。排名每日根据 GitHub API 更新。