Git Stars Git Stars

#attention リポジトリ

#attentionのタグが付いた、GitHub上の29件のアクティブなオープンソースリポジトリをご覧ください。合計スター数は203,649個で、プロジェクトあたりの平均は7,022個です。このトピックをリードしているのは、67,780個のスターを獲得しているlabmlai/annotated_deep_learning_paper_implementationsです。

29
リポジトリ総数
203,649
合計スター数
7,022
リポジトリあたりの平均スター数

リポジトリ合計29件

1
labmlai/annotated_deep_learning_paper_implementations

🧑‍🏫 60以上のディープラーニング論文の実装/チュートリアルと並記されたノート 📝;トランスフォーマー(オリジナル、xl、switch、feedback、vit、...)、オプティマイザー(adam、adabelief、sophia、...)、gan(cyclegan、stylegan2、...)、🎮強化学習(ppo、dqn)、capsnet、蒸留など 🧠

labmlai
⭐ 67,780 Python 👤 labmlai Organization 🕐 更新日時 2026-11-02 📅 作成日 2020-08-25
2
sgl-project/sglang

SGLangは、大規模言語モデルおよびマルチモーダルモデルのための高性能サービングフレームワークです。

sgl-project
⭐ 38,899 Python 👤 sgl-project Organization 🕐 更新日時 2026-11-21 📅 作成日 2024-01-08
3
kyegomez/OpenMythos

クロード・ミソス・アーキテクチャの理論的再構築。利用可能な研究文献を用いて第一原理から構築されたもの。

kyegomez
⭐ 14,932 Python 👤 kyegomez User 🕐 更新日時 2026-05-23 📅 作成日 2026-04-18
4
graykode/nlp-tutorial

深層学習研究者向け自然言語処理チュートリアル

graykode
⭐ 14,826 Jupyter Notebook 👤 graykode User 🕐 更新日時 2024-02-21 📅 作成日 2019-01-09
5
xmu-xiaoma666/External-Attention-pytorch

🍀 様々なアテンションメカニズム、MLP、再パラメータ化、畳み込みのPytorch実装。論文のさらなる理解に役立ちます。⭐⭐⭐

xmu-xiaoma666
⭐ 12,182 Python 👤 xmu-xiaoma666 User 🕐 更新日時 2026-03-16 📅 作成日 2021-05-08
6
jadore801120/attention-is-all-you-need-pytorch

「Attention is All You Need」のTransformerモデルのPyTorch実装。

jadore801120
⭐ 9,576 Python 👤 jadore801120 User 🕐 更新日時 2024-04-16 📅 作成日 2017-06-14
7
flashinfer-ai/flashinfer

FlashInfer: LLMサービング用カーネルライブラリ

flashinfer-ai
⭐ 6,982 Cuda 👤 flashinfer-ai Organization 🕐 更新日時 2026-11-21 📅 作成日 2023-07-22
8
bentrevett/pytorch-seq2seq

PyTorch と TorchText を使用した、いくつかのシーケンストゥシーケンス (seq2seq) モデルの実装に関するチュートリアル。

bentrevett
⭐ 5,664 Jupyter Notebook 👤 bentrevett User 🕐 更新日時 2024-01-20 📅 作成日 2018-07-17
9
hyunwoongko/transformer

Transformer: 「Attention Is All You Need」の PyTorch 実装

hyunwoongko
⭐ 4,609 Python 👤 hyunwoongko User 🕐 更新日時 2025-07-15 📅 作成日 2019-10-15
10
km1994/nlp_paper_study

このリポジトリには主に、NLPアルゴリズムエンジニアに関連する主要国際会議の論文を読んだ際のノートがまとめられています。

km1994
⭐ 4,035 C++ 👤 km1994 User 🕐 更新日時 2026-10-11 📅 作成日 2019-05-18
11
thu-ml/SageAttention

[ICLR2025, ICML2025, NeurIPS2025 Spotlight] Quantized Attention は、FlashAttention と比較して 2~5 倍の高速化を達成し、言語、画像、動画モデル全体の評価指標(エンドツーエンドメトリクス)を損なうことはありません。

thu-ml
⭐ 4,017 Cuda 👤 thu-ml Organization 🕐 更新日時 2026-01-17 📅 作成日 2024-10-03
12
google-research/scenic

Scenic:コンピュータビジョン研究とその先のJaxライブラリ

google-research
⭐ 3,848 Python 👤 google-research Organization 🕐 更新日時 2026-10-31 📅 作成日 2021-07-12
13
kyegomez/awesome-multi-agent-papers

最高のマルチエージェント論文集

kyegomez
⭐ 1,720 TeX 👤 kyegomez User 🕐 更新日時 2026-11-20 📅 作成日 2024-02-21
14
argusswift/YOLOv4-pytorch

PASCAL VOCおよびCOCOを備えたYOLOv4、attentive YOLOv4、mobilenet YOLOv4のPytorchリポジトリです。

argusswift
⭐ 1,673 Python 👤 argusswift User 🕐 更新日時 2024-05-03 📅 作成日 2020-07-19
15
lucidrains/transfusion-pytorch

MetaAIによる「1つのマルチモーダルモデルで次トークンを予測し画像を拡散する」TransfusionのPytorch実装

lucidrains
⭐ 1,412 Python 👤 lucidrains User 🕐 更新日時 2026-09-04 📅 作成日 2024-08-23
16
thu-ml/SpargeAttn

[ICML2025] SpargeAttention: トレーニング不要なスパースアテンションにより、あらゆるモデルの推論を高速化します。

thu-ml
⭐ 1,269 Cuda 👤 thu-ml Organization 🕐 更新日時 2026-02-25 📅 作成日 2025-02-25
17
pprp/SimpleCVReproduction

attention、分類、検出、キーポイント検出などを含む簡単なCVプロジェクトの複製

pprp
⭐ 1,261 Jupyter Notebook 👤 pprp User 🕐 更新日時 2025-08-14 📅 作成日 2019-12-11
18
jmaczan/tiny-vllm

C++とCUDAで独自の高性能LLM推論エンジンを構築 - vLLMの小型版

jmaczan
⭐ 1,207 C++ 👤 jmaczan User 🕐 更新日時 2026-11-15 📅 作成日 2026-02-09
19
NVIDIA/cudnn-frontend

cuDNN Frontendは、cuDNNライブラリへのNVIDIAのモダンなオープンソース・エントリーポイントであり、高性能なオープンソース・カーネルの成長を続けるコレクションです。

NVIDIA
⭐ 1,008 Cuda 👤 NVIDIA Organization 🕐 更新日時 2026-11-21 📅 作成日 2021-01-22
20
ai4co/rl4co

組み合わせ最適化(CO)のためのすべての関連事項に対応するPyTorchライブラリ(RL)

ai4co
⭐ 924 Python 👤 ai4co Organization 🕐 更新日時 2026-09-14 📅 作成日 2023-02-23
21
lucidrains/native-sparse-attention-pytorch

Deepseekチームの「Native Sparse Attention」論文で提案されたスパースアテンションパターンの実装

lucidrains
⭐ 811 Python 👤 lucidrains User 🕐 更新日時 2025-08-15 📅 作成日 2025-02-19
22
hellonlp/classifier-multi-label

マルチラベルテキスト分類、マルチラベル分類、テキスト分類、multi-label、classifier、text classification、BERT、seq2seq、attention、multi-label-classification

hellonlp
⭐ 800 Python 👤 hellonlp User 🕐 更新日時 2024-12-11 📅 作成日 2020-07-13
23
kyegomez/LongNet

「LongNet: Scaling Transformers to 1,000,000,000 Tokens」からのプラグイン・アンド・プレイ・アテンションの実装

kyegomez
⭐ 715 Python 👤 kyegomez User 🕐 更新日時 2024-01-07 📅 作成日 2023-07-06
24
eeyhsong/EEG-Conformer

EEG Transformer 2.0. i. EEGデコーディングのための畳み込みトランスフォーマー。 ii. 新しい可視化 - クラス活性化トポグラフィー。

eeyhsong
⭐ 674 Python 👤 eeyhsong User 🕐 更新日時 2024-07-24 📅 作成日 2022-07-26
25
therealoliver/Deepdive-llama3-from-scratch

llama3 の推論ステップを段階的に実行し、コアコンセプトを把握し、プロセス導出をマスターし、コードを実装します。

therealoliver
⭐ 629 Jupyter Notebook 👤 therealoliver User 🕐 更新日時 2025-02-24 📅 作成日 2025-02-19
26
leondgarse/keras_cv_attention_models

Keras beit,caformer,CMT,CoAtNet,convnext,davit,dino,efficientdet,edgenext,efficientformer,efficientnet,eva,fasternet,fastervit,fastvit,flexivit,gcvit,ghostnet,gpvit,hornet,hiera,iformer,inceptionnext,lcnet,levit,maxvit,mobilevit,moganet,nat,nfnets,pvt,swin,tinynet,tinyvit,uniformer,volo,vanillanet,yolor,yolov7,yolov8,yolox,gpt2,llama2, alias kecam

leondgarse
⭐ 624 Python 👤 leondgarse User 🕐 更新日時 2026-02-15 📅 作成日 2021-08-02
27
chengchingwen/Transformers.jl

JuliaによるTransformerモデルの実装

chengchingwen
⭐ 574 Julia 👤 chengchingwen User 🕐 更新日時 2026-10-24 📅 作成日 2018-12-27
28
WenjieDu/SAITS

論文「SAITS: 時系列のための自己注意機構ベースの補完」の公式PyTorch実装。高速かつ最先端(SOTA)の深層学習ニューラルネットワークモデルで、効率的な時系列補完用(NaN欠損データ/値を伴う多変量不完全時系列を機械学習で補完)。https://arxiv.org/abs/2202.08516

WenjieDu
⭐ 521 Python 👤 WenjieDu User 🕐 更新日時 2026-08-25 📅 作成日 2021-12-07
29
MuLabPKU/TransArch

ハードウェアに適したモデルアーキテクチャを設計し、既存のLLMを性能低下を最小限に抑えて移行する

MuLabPKU
⭐ 520 Python 👤 MuLabPKU Organization 🕐 更新日時 2026-11-11 📅 作成日 2025-01-02

よくある質問

1

GitHubで最も人気のある#attentionリポジトリは何ですか?

GitHubで最も上位にランクインしているオープンソースの#attentionプロジェクトは、67,780個のスターを獲得しているlabmlai/annotated_deep_learning_paper_implementationsです。🧑‍🏫 60以上のディープラーニング論文の実装/チュートリアルと並記されたノート 📝;トランスフォーマー(オリジナル、xl、switch、feedback、vit、...)、オプティマイザー(adam、adabelief、sophia、...)、gan(cyclegan、stylegan2、...)、🎮強化学習(ppo、dqn)、capsnet、蒸留など 🧠

2

#attentionリポジトリで最もよく使われているプログラミング言語は何ですか?

GitHubで上位にランクインしている#attentionプロジェクトでは、Python, Jupyter Notebook, Cuda, C++が最も一般的なプログラミング言語です。

3

#attentionリポジトリのランキングはどのように算出されていますか?

#attentionのタグが付いた29件のアクティブなオープンソースリポジトリ(スター500個以上)を追跡しています。合計スター数は203,649個で、リポジトリあたりの平均は7,022個です。ランキングはGitHub APIからのデータに基づいて毎日更新されます。