Git Stars Git Stars

#transformer-architecture 저장소

147
총 리포지토리
594,368
총 별점
4,043
리포지토리당 평균 스타 수

저장소 총 147개

51
PixArt-alpha/PixArt-sigma

PixArt-Σ: 4K 텍스트-이미지 생성을 위한 디퓨전 트랜스포머의 약-강 학습

PixArt-alpha
⭐ 1,884 Python 👤 PixArt-alpha Organization 🕐 업데이트됨 2024-10-31 📅 생성됨 2024-02-29
52
QwenLM/Qwen-Audio

Alibaba Cloud에서 제안한 Qwen-Audio (通义千问-Audio) 채팅 및 사전 훈련된 대형 오디오 언어 모델의 공식 저장소입니다.

QwenLM
⭐ 1,857 Python 👤 QwenLM Organization 🕐 업데이트됨 2024-07-05 📅 생성됨 2023-11-07
53
nlpodyssey/spago

Go로 작성된 독립형 기계 학습 및 자연어 처리 라이브러리

nlpodyssey
⭐ 1,850 Go 👤 nlpodyssey Organization 🕐 업데이트됨 2025-04-01 📅 생성됨 2020-01-05
54
DGoettlich/history-llms

가능한 가장 큰 역사적 LLM을 훈련하는 우리 프로젝트를 위한 정보 허브.

DGoettlich
⭐ 1,808 👤 DGoettlich User 🕐 업데이트됨 2025-12-22 📅 생성됨 2025-12-14
55
llmgenai/LLMInterviewQuestions

이 리포지토리에는 Google, Nvidia, Meta, Microsoft 및 Fortune 500대 기업과 같은 최고 기업에서 묻는 LLM(대규모 언어 모델) 인터뷰 질문이 포함되어 있습니다.

llmgenai
⭐ 1,781 👤 llmgenai User 🕐 업데이트됨 2025-02-12 📅 생성됨 2024-12-26
59
baaivision/Emu3.5

네이티브 멀티모달 모델은 세계 학습자입니다

baaivision
⭐ 1,567 Python 👤 baaivision Organization 🕐 업데이트됨 2025-12-30 📅 생성됨 2025-10-29
60
ZeyueT/AudioX

[ICLR 2026] AudioX 저장소

ZeyueT
⭐ 1,559 Python 👤 ZeyueT User 🕐 업데이트됨 2026-03-10 📅 생성됨 2025-03-13
⭐ 1,503 Python 👤 Stability-AI Organization 🕐 업데이트됨 2025-01-08 📅 생성됨 2024-10-09
63
facebookresearch/MobileLLM

MobileLLM 기기 내 사용 사례를 위한 10억 개 미만 매개변수 언어 모델 최적화. ICML 2024.

facebookresearch
⭐ 1,471 Python 👤 facebookresearch Organization 🕐 업데이트됨 2026-04-30 📅 생성됨 2024-07-09
64
FireRedTeam/FireRedTTS2

다중 화자 대화 생성을 위한 장문 스트리밍 TTS 시스템

FireRedTeam
⭐ 1,433 Python 👤 FireRedTeam Organization 🕐 업데이트됨 2025-10-26 📅 생성됨 2025-09-02
65
bigscience-workshop/Megatron-DeepSpeed

BERT 및 GPT-2를 포함하여 대규모 트랜스포머 언어 모델을 훈련하는 지속적인 연구

bigscience-workshop
⭐ 1,426 Python 👤 bigscience-workshop Organization 🕐 업데이트됨 2024-03-20 📅 생성됨 2021-07-02
67
thunlp/ERNIE

ACL 2019 논문 "ERNIE: Informative Entities를 활용한 향상된 언어 표현"의 소스 코드 및 데이터셋

thunlp
⭐ 1,418 Python 👤 thunlp Organization 🕐 업데이트됨 2024-01-10 📅 생성됨 2019-05-17
68
tianweiy/CausVid

(CVPR 2025) 느린 양방향에서 빠른 자기회귀 비디오 확산 모델로

tianweiy
⭐ 1,414 Python 👤 tianweiy User 🕐 업데이트됨 2025-08-07 📅 생성됨 2025-03-14
69
PKU-VCL-3DV/SLAM3R

[CVPR 2025 Highlight] SLAM3R을 활용한 실시간 밀집 장면 재구성

PKU-VCL-3DV
⭐ 1,378 Python 👤 PKU-VCL-3DV Organization 🕐 업데이트됨 2025-10-18 📅 생성됨 2024-12-11
70
tanishqkumar/beyond-nanogpt

현대 딥러닝 연구의 핵심 아이디어에 대한 미니멀하고 주석이 달린 구현.

tanishqkumar
⭐ 1,361 Python 👤 tanishqkumar User 🕐 업데이트됨 2026-01-29 📅 생성됨 2025-04-16
71
wzzheng/TPVFormer

[CVPR 2023] 자율 주행을 위한 Tesla의 점유 네트워크에 대한 학술적 대안.

wzzheng
⭐ 1,314 Python 👤 wzzheng User 🕐 업데이트됨 2024-09-07 📅 생성됨 2022-11-19
72
agemagician/ProtTrans

ProtTrans는 단백질을 위한 최첨단 사전 훈련 언어 모델을 제공합니다. ProtTrans는 Transformers 모델을 사용하여 Summit의 수천 개의 GPU와 수백 개의 Google TPU에서 훈련되었습니다.

agemagician
⭐ 1,310 Jupyter Notebook 👤 agemagician User 🕐 업데이트됨 2025-05-22 📅 생성됨 2020-05-11
73
hemingkx/SpeculativeDecodingPapers

📰 Speculative Decoding에 대한 필수 논문 및 블로그 ⚡️

hemingkx
⭐ 1,309 👤 hemingkx User 🕐 업데이트됨 2026-06-27 📅 생성됨 2023-09-20
74
glouppe/info8010-deep-learning

INFO8010 딥러닝, ULiège 강의

glouppe
⭐ 1,294 Jupyter Notebook 👤 glouppe User 🕐 업데이트됨 2026-07-13 📅 생성됨 2018-03-14
75
Ma-Lab-Berkeley/CRATE

CRATE (Coding RAte reduction TransformEr) 코드.

Ma-Lab-Berkeley
⭐ 1,261 Python 👤 Ma-Lab-Berkeley Organization 🕐 업데이트됨 2024-10-23 📅 생성됨 2023-05-29
76
ga642381/speech-trident

훌륭한 음성/오디오 LLM, 표현 학습 및 코덱 모델

ga642381
⭐ 1,249 👤 ga642381 User 🕐 업데이트됨 2026-07-10 📅 생성됨 2024-04-08
77
willisma/SiT

"SiT: 확장 가능한 보간 트랜스포머를 사용한 흐름 및 확산 기반 생성 모델 탐색"에 대한 공식 PyTorch 구현

willisma
⭐ 1,228 Python 👤 willisma User 🕐 업데이트됨 2025-12-22 📅 생성됨 2023-11-28
78
awslabs/sockeye

PyTorch를 기반으로 한 신경 기계 번역에 중점을 둔 시퀀스-투-시퀀스 프레임워크

awslabs
⭐ 1,217 Python 👤 awslabs Organization 🕐 업데이트됨 2024-10-24 📅 생성됨 2017-06-08
80
gpu-mode/awesomeMLSys

ML 시스템 온보딩 목록

gpu-mode
⭐ 1,154 👤 gpu-mode Organization 🕐 업데이트됨 2026-02-19 📅 생성됨 2024-05-06
82
HITsz-TMG/Uni-MoE

Uni-MoE: Lychee의 대규모 멀티모달 모델 제품군.

HITsz-TMG
⭐ 1,120 Python 👤 HITsz-TMG Organization 🕐 업데이트됨 2026-08-06 📅 생성됨 2024-03-04
83
XiaomiMiMo/MiMo-Audio

MiMo-Audio: 오디오 언어 모델은 Few-Shot 학습자입니다

XiaomiMiMo
⭐ 1,095 Python 👤 XiaomiMiMo Organization 🕐 업데이트됨 2026-10-29 📅 생성됨 2025-09-19
84
chaytonmin/Awesome-BEV-Perception-Multi-Cameras

DETR3D, BEVDet, BEVFormer, BEVDepth, UniAD와 같은 조감도에서의 다중 카메라 3D 객체 감지 및 분할에 대한 훌륭한 논문

chaytonmin
⭐ 1,088 👤 chaytonmin User 🕐 업데이트됨 2024-04-26 📅 생성됨 2022-04-24
85
Alpha-VLLM/Lumina-mGPT-2.0

Lumina-mGPT 2.0: 독립형 자기회귀 이미지 모델링

Alpha-VLLM
⭐ 1,081 Python 👤 Alpha-VLLM Organization 🕐 업데이트됨 2025-11-03 📅 생성됨 2025-04-03
86
dzyim/ilya-sutskever-recommended-reading

Ilya Sutskever가 John Carmack에게 딥러닝에 관한 약 30편의 연구 논문 목록을 주었다고 합니다.

dzyim
⭐ 1,080 👤 dzyim User 🕐 업데이트됨 2024-06-04 📅 생성됨 2024-05-14
87
gangweix/pixel-perfect-depth

[TPAMI 2026 및 NeurIPS 2025] 픽셀 단위의 정밀한 깊이

gangweix
⭐ 1,076 Python 👤 gangweix User 🕐 업데이트됨 2026-02-13 📅 생성됨 2025-05-26
88
hans0809/MiniMind-in-Depth

경량 대규모 언어 모델 MiniMind의 소스 코드 분석, 토크나이저, RoPE, MoE, KV Cache, 사전 학습, SFT, LoRA, DPO 등 전체 프로세스 포함.

hans0809
⭐ 1,072 👤 hans0809 User 🕐 업데이트됨 2025-06-16 📅 생성됨 2025-06-16
89
OpenGVLab/SAM-Med2D

SAM-Med2D의 공식 구현

OpenGVLab
⭐ 1,071 Jupyter Notebook 👤 OpenGVLab Organization 🕐 업데이트됨 2024-06-18 📅 생성됨 2023-08-26
90
abertsch72/unlimiformer

NeurIPS 2023 논문 "Unlimiformer: 긴 입력 길이를 가진 장거리 트랜스포머" 공개 저장소

abertsch72
⭐ 1,063 Python 👤 abertsch72 User 🕐 업데이트됨 2024-03-07 📅 생성됨 2023-05-03
91
tspeterkim/flash-attention-minimal

CUDA 약 100줄의 Flash Attention (순방향 전달만)

tspeterkim
⭐ 1,036 Cuda 👤 tspeterkim User 🕐 업데이트됨 2024-12-30 📅 생성됨 2024-03-07
92
fla-org/native-sparse-attention

🐳 "Native Sparse Attention: Hardware-Aligned and Natively Trainable Sparse Attention"에 대한 효율적인 Triton 구현

fla-org
⭐ 1,030 Python 👤 fla-org Organization 🕐 업데이트됨 2026-02-05 📅 생성됨 2025-02-21
93
Ligo-Biosciences/AlphaFold3

AlphaFold3 오픈 소스 구현

Ligo-Biosciences
⭐ 1,024 Python 👤 Ligo-Biosciences Organization 🕐 업데이트됨 2024-10-07 📅 생성됨 2023-11-11
94
qiuzh20/gated_attention

[NeurIPS2025 Oral] 대규모 언어 모델을 위한 게이티드 어텐션: 비선형성, 희소성, 그리고 어텐션 싱크 프리(Attention-Sink-Free) 공식 구현

qiuzh20
⭐ 994 Jupyter Notebook 👤 qiuzh20 User 🕐 업데이트됨 2025-12-20 📅 생성됨 2025-05-09
95
likejazz/llama3.np

llama3.np는 Llama 3 모델을 위한 순수 NumPy 구현입니다.

likejazz
⭐ 991 Python 👤 likejazz User 🕐 업데이트됨 2025-04-27 📅 생성됨 2024-05-13
96
wzzheng/StreamVGGT

[ICLR 2026] 4D 시각 지오메트리 트랜스포머 스트리밍

wzzheng
⭐ 988 Python 👤 wzzheng User 🕐 업데이트됨 2025-10-27 📅 생성됨 2025-07-14
97
myshell-ai/JetMoE

0.1M 달러로 LLaMA2 성능 달성

myshell-ai
⭐ 988 Python 👤 myshell-ai Organization 🕐 업데이트됨 2024-07-23 📅 생성됨 2024-04-02
98
kebijuelun/Awesome-LLM-Learning

대규모 언어 모델(LLM) 학습 (대규모 언어 모델 학습)

kebijuelun
⭐ 984 TypeScript 👤 kebijuelun User 🕐 업데이트됨 2026-01-05 📅 생성됨 2023-08-06
99
nathanrs/tiny-diffusion

Tiny Shakespeare에서 훈련된 문자 수준 언어 확산 모델

nathanrs
⭐ 935 Python 👤 nathanrs User 🕐 업데이트됨 2026-01-16 📅 생성됨 2025-10-21
100
facebookresearch/spiritlm

논문 "Spirit-LM Interleaved Spoken and Written Language Model"에 대한 추론 코드입니다.

facebookresearch
⭐ 926 Python 👤 facebookresearch Organization 🕐 업데이트됨 2024-10-28 📅 생성됨 2024-09-06