Git Stars Git Stars

#attention 저장소

#attention 태그가 지정된 GitHub의 활성 오픈 소스 저장소 29개를 확인해 보세요. 총 203,649개의 스타를 획득했으며 프로젝트당 평균 7,022개입니다. 이 주제를 이끄는 저장소는 67,780개의 스타를 받은 labmlai/annotated_deep_learning_paper_implementations입니다.

29
총 리포지토리
203,649
총 별점
7,022
리포지토리당 평균 스타 수

저장소 총 29개

1
labmlai/annotated_deep_learning_paper_implementations

🧑‍🏫 60+ 딥러닝 논문 구현/튜토리얼과 함께 제공되는 노트 📝; 트랜스포머(원본, xl, switch, feedback, vit, ...), 옵티마이저(adam, adabelief, sophia, ...), gan(cyclegan, stylegan2, ...), 🎮 강화학습(ppo, dqn), 캡넷, 증류 등 🧠

labmlai
⭐ 67,780 Python 👤 labmlai Organization 🕐 업데이트됨 2026-11-02 📅 생성됨 2020-08-25
2
sgl-project/sglang

SGLang은 대규모 언어 모델 및 멀티모달 모델을 위한 고성능 서빙 프레임워크입니다.

sgl-project
⭐ 38,899 Python 👤 sgl-project Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2024-01-08
3
kyegomez/OpenMythos

사용 가능한 연구 문헌을 사용하여 기본 원리부터 구축된 Claude Mythos 아키텍처의 이론적 재구성.

kyegomez
⭐ 14,932 Python 👤 kyegomez User 🕐 업데이트됨 2026-05-23 📅 생성됨 2026-04-18
4
graykode/nlp-tutorial

딥러닝 연구자를 위한 자연어 처리 튜토리얼

graykode
⭐ 14,826 Jupyter Notebook 👤 graykode User 🕐 업데이트됨 2024-02-21 📅 생성됨 2019-01-09
5
xmu-xiaoma666/External-Attention-pytorch

🍀 다양한 어텐션 메커니즘, MLP, 재매개변수화, 컨볼루션의 Pytorch 구현으로 논문을 더 깊이 이해하는 데 도움이 됩니다.⭐⭐⭐

xmu-xiaoma666
⭐ 12,182 Python 👤 xmu-xiaoma666 User 🕐 업데이트됨 2026-03-16 📅 생성됨 2021-05-08
6
jadore801120/attention-is-all-you-need-pytorch

"Attention is All You Need" 논문의 Transformer 모델을 PyTorch로 구현한 버전.

jadore801120
⭐ 9,576 Python 👤 jadore801120 User 🕐 업데이트됨 2024-04-16 📅 생성됨 2017-06-14
7
flashinfer-ai/flashinfer

FlashInfer: LLM 서빙을 위한 커널 라이브러리

flashinfer-ai
⭐ 6,982 Cuda 👤 flashinfer-ai Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2023-07-22
8
bentrevett/pytorch-seq2seq

PyTorch와 TorchText를 사용한 몇 가지 sequence-to-sequence (seq2seq) 모델 구현 튜토리얼.

bentrevett
⭐ 5,664 Jupyter Notebook 👤 bentrevett User 🕐 업데이트됨 2024-01-20 📅 생성됨 2018-07-17
9
hyunwoongko/transformer

Transformer: "Attention Is All You Need"의 PyTorch 구현

hyunwoongko
⭐ 4,609 Python 👤 hyunwoongko User 🕐 업데이트됨 2025-07-15 📅 생성됨 2019-10-15
10
km1994/nlp_paper_study

이 저장소에는 주로 NLP 알고리즘 엔지니어와 관련된 주요 학회 논문을 읽고 정리한 노트가 담겨 있습니다.

km1994
⭐ 4,035 C++ 👤 km1994 User 🕐 업데이트됨 2026-10-11 📅 생성됨 2019-05-18
11
thu-ml/SageAttention

[ICLR2025, ICML2025, NeurIPS2025 Spotlight] Quantized Attention은 FlashAttention에 비해 2~5배의 속도 향상을 달성했으며, 언어, 이미지, 비디오 모델 전반에 걸쳐 엔드 투 엔드(end-to-end) 지표 손실이 없습니다.

thu-ml
⭐ 4,017 Cuda 👤 thu-ml Organization 🕐 업데이트됨 2026-01-17 📅 생성됨 2024-10-03
12
google-research/scenic

Scenic: 컴퓨터 비전 연구 및 그 이상을 위한 Jax 라이브러리

google-research
⭐ 3,848 Python 👤 google-research Organization 🕐 업데이트됨 2026-10-31 📅 생성됨 2021-07-12
13
kyegomez/awesome-multi-agent-papers

최고의 멀티 에이전트 논문 모음

kyegomez
⭐ 1,720 TeX 👤 kyegomez User 🕐 업데이트됨 2026-11-20 📅 생성됨 2024-02-21
14
argusswift/YOLOv4-pytorch

PASCAL VOC 및 COCO와 함께 YOLOv4, attentive YOLOv4 및 mobilenet YOLOv4의 Pytorch 저장소입니다.

argusswift
⭐ 1,673 Python 👤 argusswift User 🕐 업데이트됨 2024-05-03 📅 생성됨 2020-07-19
15
lucidrains/transfusion-pytorch

MetaAI의 "하나의 멀티모달 모델로 다음 토큰 예측 및 이미지 확산"에 대한 Pytorch 구현

lucidrains
⭐ 1,412 Python 👤 lucidrains User 🕐 업데이트됨 2026-09-04 📅 생성됨 2024-08-23
16
thu-ml/SpargeAttn

[ICML2025] SpargeAttention: 모든 모델 추론을 가속하는 훈련 없는 희소 어텐션.

thu-ml
⭐ 1,269 Cuda 👤 thu-ml Organization 🕐 업데이트됨 2026-02-25 📅 생성됨 2025-02-25
17
pprp/SimpleCVReproduction

attention, classification, detection, keypoint detection 등을 포함한 간단한 CV 프로젝트의 복제

pprp
⭐ 1,261 Jupyter Notebook 👤 pprp User 🕐 업데이트됨 2025-08-14 📅 생성됨 2019-12-11
18
jmaczan/tiny-vllm

C++와 CUDA로 나만의 고성능 LLM 추론 엔진 구축하기 - vLLM의 소형 버전

jmaczan
⭐ 1,207 C++ 👤 jmaczan User 🕐 업데이트됨 2026-11-15 📅 생성됨 2026-02-09
19
NVIDIA/cudnn-frontend

cuDNN Frontend는 cuDNN 라이브러리에 대한 NVIDIA의 현대적인 오픈 소스 진입점이자 고성능 오픈 소스 커널의 증가하는 컬렉션입니다.

NVIDIA
⭐ 1,008 Cuda 👤 NVIDIA Organization 🕐 업데이트됨 2026-11-21 📅 생성됨 2021-01-22
20
ai4co/rl4co

조합 최적화(CO)를 위한 모든 강화 학습(RL) 관련 PyTorch 라이브러리

ai4co
⭐ 924 Python 👤 ai4co Organization 🕐 업데이트됨 2026-09-14 📅 생성됨 2023-02-23
21
lucidrains/native-sparse-attention-pytorch

Deepseek 팀의 "Native Sparse Attention" 논문에서 제안한 희소 어텐션 패턴 구현

lucidrains
⭐ 811 Python 👤 lucidrains User 🕐 업데이트됨 2025-08-15 📅 생성됨 2025-02-19
22
hellonlp/classifier-multi-label

다중 레이블 텍스트 분류, 다중 레이블 분류, 텍스트 분류, multi-label, classifier, text classification, BERT, seq2seq, attention, multi-label-classification

hellonlp
⭐ 800 Python 👤 hellonlp User 🕐 업데이트됨 2024-12-11 📅 생성됨 2020-07-13
23
kyegomez/LongNet

"LongNet: Scaling Transformers to 1,000,000,000 Tokens"의 플러그인 및 플레이 어텐션 구현

kyegomez
⭐ 715 Python 👤 kyegomez User 🕐 업데이트됨 2024-01-07 📅 생성됨 2023-07-06
24
eeyhsong/EEG-Conformer

EEG Transformer 2.0. i. EEG 디코딩을 위한 컨볼루션 트랜스포머. ii. 새로운 시각화 - 클래스 활성화 지형도.

eeyhsong
⭐ 674 Python 👤 eeyhsong User 🕐 업데이트됨 2024-07-24 📅 생성됨 2022-07-26
25
therealoliver/Deepdive-llama3-from-scratch

llama3 추론 단계를 단계별로 달성하고 핵심 개념을 파악하며 프로세스 유도를 마스터하고 코드를 구현합니다.

therealoliver
⭐ 629 Jupyter Notebook 👤 therealoliver User 🕐 업데이트됨 2025-02-24 📅 생성됨 2025-02-19
26
leondgarse/keras_cv_attention_models

Keras beit,caformer,CMT,CoAtNet,convnext,davit,dino,efficientdet,edgenext,efficientformer,efficientnet,eva,fasternet,fastervit,fastvit,flexivit,gcvit,ghostnet,gpvit,hornet,hiera,iformer,inceptionnext,lcnet,levit,maxvit,mobilevit,moganet,nat,nfnets,pvt,swin,tinynet,tinyvit,uniformer,volo,vanillanet,yolor,yolov7,yolov8,yolox,gpt2,llama2, alias kecam

leondgarse
⭐ 624 Python 👤 leondgarse User 🕐 업데이트됨 2026-02-15 📅 생성됨 2021-08-02
27
chengchingwen/Transformers.jl

Julia를 이용한 Transformer 모델 구현

chengchingwen
⭐ 574 Julia 👤 chengchingwen User 🕐 업데이트됨 2026-10-24 📅 생성됨 2018-12-27
28
WenjieDu/SAITS

논문 "SAITS: Self-Attention 기반 시간 시계열 보간"의 공식 PyTorch 구현. 빠르고 최첨단(SOTA) 딥러닝 신경망 모델로, 효율적인 시간 시계열 보간(NaN 누락 데이터/값을 포함한 다변량 불완전 시간 시계열을 머신러닝으로 보간)에 사용됩니다. https://arxiv.org/abs/2202.08516

WenjieDu
⭐ 521 Python 👤 WenjieDu User 🕐 업데이트됨 2026-08-25 📅 생성됨 2021-12-07
29
MuLabPKU/TransArch

하드웨어 친화적인 모델 아키텍처를 설계하고 성능 저하를 최소화하여 기존 LLM을 마이그레이션하세요

MuLabPKU
⭐ 520 Python 👤 MuLabPKU Organization 🕐 업데이트됨 2026-11-11 📅 생성됨 2025-01-02

자주 묻는 질문

1

GitHub에서 가장 인기 있는 #attention 저장소는 무엇인가요?

GitHub에서 가장 높은 순위의 오픈 소스 #attention 프로젝트는 67,780개의 스타를 받은 labmlai/annotated_deep_learning_paper_implementations입니다. 🧑‍🏫 60+ 딥러닝 논문 구현/튜토리얼과 함께 제공되는 노트 📝; 트랜스포머(원본, xl, switch, feedback, vit, ...), 옵티마이저(adam, adabelief, sophia, ...), gan(cyclegan, stylegan2, ...), 🎮 강화학습(ppo, dqn), 캡넷, 증류 등 🧠

2

#attention 저장소에서 가장 많이 사용되는 프로그래밍 언어는 무엇인가요?

GitHub에서 순위가 가장 높은 #attention 프로젝트 중 가장 일반적으로 사용되는 프로그래밍 언어는 Python, Jupyter Notebook, Cuda, C++입니다.

3

#attention 저장소 순위는 어떻게 계산되나요?

#attention 태그가 지정된 활성 오픈 소스 저장소(29개, 스타 500개 이상)를 추적하고 있습니다. 총 스타 수는 203,649개이며 저장소당 평균 7,022개입니다. 순위는 GitHub API를 통해 매일 업데이트됩니다.