Git Stars Git Stars

#flash-attention リポジトリ

#flash-attentionのタグが付いた、GitHub上の48件のアクティブなオープンソースリポジトリをご覧ください。合計スター数は156,291個で、プロジェクトあたりの平均は3,256個です。このトピックをリードしているのは、24,180個のスターを獲得しているdeepseek-ai/DeepSeek-OCRです。

48
リポジトリ総数
156,291
合計スター数
3,256
リポジトリあたりの平均スター数

リポジトリ合計48件

1
deepseek-ai/DeepSeek-OCR

光学圧縮コンテキスト

deepseek-ai
⭐ 24,180 Python 👤 deepseek-ai Organization 🕐 更新日時 2026-01-27 📅 作成日 2025-10-17
2
QwenLM/Qwen

Alibaba Cloudが提案するQwen(通义千问)チャット&事前学習済み大規模言語モデルの公式リポジトリ。

QwenLM
⭐ 22,063 Python 👤 QwenLM Organization 🕐 更新日時 2026-03-05 📅 作成日 2023-08-03
3
xlite-dev/LeetCUDA

初心者向けの最新 CUDA 学習ノートをまとめたオープンソースの書籍 — BF16/FP8/FP4、HGEMM、CuTe、Flash-Attention など。

xlite-dev
⭐ 12,208 TeX 👤 xlite-dev Organization 🕐 更新日時 2026-11-20 📅 作成日 2022-12-17
5
InternLM/InternLM

InternLMシリーズ(InternLM、InternLM2、InternLM2.5、InternLM3)の公式リリース。

InternLM
⭐ 7,280 Python 👤 InternLM Organization 🕐 更新日時 2025-10-30 📅 作成日 2023-07-06
6
ymcui/Chinese-LLaMA-Alpaca-2

中国語LLaMA-2 & Alpaca-2大規模言語モデルフェーズII + 64K超長コンテキストモデル (Chinese LLaMA-2 & Alpaca-2 LLMs with 64K long context models)

ymcui
⭐ 7,098 Python 👤 ymcui User 🕐 更新日時 2026-04-19 📅 作成日 2023-07-18
7
karminski/one-small-step

これは、興味深く最先端の技術的概念と原則を説明することに主​​に焦点を当てた、簡単な技術科普チュートリアルプロジェクトです。各記事は5分以内に読了できるように努めています。

karminski
⭐ 7,006 Python 👤 karminski User 🕐 更新日時 2026-03-08 📅 作成日 2025-01-16
9
xlite-dev/Awesome-LLM-Inference

📚Awesome LLM/VLM推論論文&コードの厳選リスト:Flash-Attention、Paged-Attention、WINT8/4、並列化など。🎉

xlite-dev
⭐ 5,565 Python 👤 xlite-dev Organization 🕐 更新日時 2026-10-20 📅 作成日 2023-08-27
10
turboderp-org/exllamav2

最新のコンシューマ向けGPUでLLMをローカル実行するための高速推論ライブラリ

turboderp-org
⭐ 4,653 Python 👤 turboderp-org Organization 🕐 更新日時 2026-03-04 📅 作成日 2023-08-30
11
QwenLM/Qwen3-ASR

Qwen3-ASRは、Alibaba Cloud の Qwen チームが開発したオープンソースの ASR モデルシリーズであり、安定した多言語音声/音楽/歌の認識、言語検出、タイムスタンプ予測をサポートします。

QwenLM
⭐ 3,933 Python 👤 QwenLM Organization 🕐 更新日時 2026-06-26 📅 作成日 2026-01-28
12
HazyResearch/ThunderKittens

高速カーネル用のタイルプリミティブ

HazyResearch
⭐ 3,805 Cuda 👤 HazyResearch Organization 🕐 更新日時 2026-09-12 📅 作成日 2024-03-04
13
guandeh17/Self-Forcing

「Self Forcing: Bridging Training and Inference in Autoregressive Video Diffusion」(NeurIPS 2025 Spotlight)の公式コードベース

guandeh17
⭐ 3,511 Python 👤 guandeh17 User 🕐 更新日時 2025-09-12 📅 作成日 2025-06-09
14
ikawrakow/ik_llama.cpp

追加のSOTAクォントとパフォーマンス改善を備えたllama.cppフォーク

ikawrakow
⭐ 3,411 C++ 👤 ikawrakow User 🕐 更新日時 2026-11-21 📅 作成日 2024-06-27
16
MoonshotAI/MoBA

MoBA: 長文脈LLMのためのブロックアテンションの混合

MoonshotAI
⭐ 2,122 Python 👤 MoonshotAI Organization 🕐 更新日時 2025-04-03 📅 作成日 2025-02-17
17
Ucas-HaoranWei/Vary

[ECCV 2024] Vary: 大規模ビジョン言語モデルのビジョン語彙を拡張する公式コード実装。

Ucas-HaoranWei
⭐ 1,888 Python 👤 Ucas-HaoranWei User 🕐 更新日時 2024-12-30 📅 作成日 2023-12-07
19
allenai/Olmo-core

OLMoエコシステムのためのPyTorchビルディングブロック

allenai
⭐ 1,810 Python 👤 allenai Organization 🕐 更新日時 2026-11-21 📅 作成日 2024-03-23
20
mjun0812/flash-attention-prebuild-wheels

GitHub Actionsを使用してLinuxおよびWindowsでプレビルドされたflash-attention 2および3のパッケージホイールを提供する

mjun0812
⭐ 1,798 Python 👤 mjun0812 User 🕐 更新日時 2026-11-21 📅 作成日 2024-10-26
21
Soul-AILab/SoulX-FlashTalk

SoulX-FlashTalk は、8xH800 ノードで 32 FPS のリアルタイムスループットを維持しつつ、1秒未満の起動遅延(0.87s)を達成した初の 14B モデルです。

Soul-AILab
⭐ 1,572 Python 👤 Soul-AILab Organization 🕐 更新日時 2026-07-30 📅 作成日 2025-12-25
23
X-Square-Robot/wall-x

具現化された基礎モデルに基づく汎用ロボットの構築

X-Square-Robot
⭐ 1,337 Python 👤 X-Square-Robot Organization 🕐 更新日時 2026-09-18 📅 作成日 2025-09-04
24
weiruihhh/cs336_note_and_hw

cs336で学習しているときのノートと課題を記録する

weiruihhh
⭐ 1,305 Python 👤 weiruihhh User 🕐 更新日時 2026-10-10 📅 作成日 2025-06-01
25
zhuzilin/ring-flash-attention

フラッシュアテンションによるリングアテンションの実装

zhuzilin
⭐ 1,054 Python 👤 zhuzilin User 🕐 更新日時 2025-09-10 📅 作成日 2024-02-21
26
tspeterkim/flash-attention-minimal

CUDA約100行のFlash Attention(フォワードパスのみ)

tspeterkim
⭐ 1,036 Cuda 👤 tspeterkim User 🕐 更新日時 2024-12-30 📅 作成日 2024-03-07
27
NVIDIA/cudnn-frontend

cuDNN Frontendは、cuDNNライブラリへのNVIDIAのモダンなオープンソース・エントリーポイントであり、高性能なオープンソース・カーネルの成長を続けるコレクションです。

NVIDIA
⭐ 1,008 Cuda 👤 NVIDIA Organization 🕐 更新日時 2026-11-21 📅 作成日 2021-01-22
28
SandAI-org/MagiAttention

超長コンテキスト、異種データトレーニングのための線形スケーラビリティに向けた分散アテンション

SandAI-org
⭐ 975 Python 👤 SandAI-org Organization 🕐 更新日時 2026-11-21 📅 作成日 2025-04-20
29
Alpha-VLLM/Lumina-Image-2.0

Lumina-Image 2.0:統一的で効率的な画像生成フレームワーク

Alpha-VLLM
⭐ 904 Python 👤 Alpha-VLLM Organization 🕐 更新日時 2026-05-22 📅 作成日 2025-01-25
30
TRI-ML/prismatic-vlms

視覚条件付き言語モデル(VLM)のトレーニングのための柔軟で効率的なコードベース

TRI-ML
⭐ 894 Python 👤 TRI-ML Organization 🕐 更新日時 2024-07-04 📅 作成日 2024-02-13
31
RUCAIBox/LLMBox

統一されたトレーニングパイプラインと包括的なモデル評価を含む、LLM実装のための包括的なライブラリ。

RUCAIBox
⭐ 849 Python 👤 RUCAIBox Organization 🕐 更新日時 2025-06-16 📅 作成日 2023-10-25
32
NVlabs/rcm

rCM & Causal-rCM: 大規模な双方向/自己回帰ビデオ拡散蒸留のための先駆的かつ統合されたアルゴリズム/インフラストラクチャ

NVlabs
⭐ 832 Python 👤 NVlabs Organization 🕐 更新日時 2026-06-25 📅 作成日 2025-10-09
35
exiawsh/StreamPETR

[ICCV 2023] StreamPETR: 効率的なマルチビュー3Dオブジェクト検出のためのオブジェクト中心の時間モデリングの探求

exiawsh
⭐ 754 Python 👤 exiawsh User 🕐 更新日時 2024-06-26 📅 作成日 2023-03-21
37
jzhang38/EasyContext

最小限のハードウェアで、言語モデルのコンテキスト長を100万トークンに外挿するためのメモリ最適化とトレーニングレシピ。

jzhang38
⭐ 751 Python 👤 jzhang38 User 🕐 更新日時 2024-09-27 📅 作成日 2024-04-05
38
HKUSTDial/flash-sparse-attention

学習可能で高速、メモリ効率の良いスパースアテンション

HKUSTDial
⭐ 750 Python 👤 HKUSTDial Organization 🕐 更新日時 2026-11-20 📅 作成日 2025-05-12
40
yihao-meng/HoloCine

[CVPR 2026 ハイライト] 論文の公式実装 - HoloCine: 映画的なマルチショット長動画ナラティブの全体生成

yihao-meng
⭐ 707 Python 👤 yihao-meng User 🕐 更新日時 2025-11-26 📅 作成日 2025-10-22
41
penghao-wu/vstar

「V* : Guided Visual Search as a Core Mechanism in Multimodal LLMs」のPyTorch実装

penghao-wu
⭐ 684 Python 👤 penghao-wu User 🕐 更新日時 2024-01-07 📅 作成日 2023-12-15
42
louaaron/Score-Entropy-Discrete-Diffusion

[ICML 2024 Best Paper] データ分布の比率を推定することによる離散拡散モデリング (https://arxiv.org/abs/2310.16834)

louaaron
⭐ 681 Python 👤 louaaron User 🕐 更新日時 2024-02-29 📅 作成日 2024-02-21
43
Tencent/WeDLM

WeDLM: 標準的な因果的注意機構とネイティブなKVキャッシュ互換性を備えた最速の拡散言語モデルであり、vLLMで最適化されたベースラインと比較して真の高速化を実現します。

Tencent
⭐ 659 Python 👤 Tencent Organization 🕐 更新日時 2026-03-03 📅 作成日 2025-12-24
44
zengxiao-he/tessera

教師からタイルへ — ゼロから構築したLLM蒸留&サービングエンジン:カスタムTriton/CUDAカーネル、FSDP蒸留、ページングKV連続バッチ処理、投機的デコード、Rustゲートウェイ、JAXオラクル、解釈可能性ツール。

zengxiao-he
⭐ 556 Python 👤 zengxiao-he User 🕐 更新日時 2026-10-09 📅 作成日 2026-06-05
46
mit-han-lab/duo-attention

[ICLR 2025] DuoAttention: 検索およびストリーミングヘッドによる効率的な長コンテキストLLM推論

mit-han-lab
⭐ 541 Python 👤 mit-han-lab Organization 🕐 更新日時 2025-02-10 📅 作成日 2024-10-15
47
DachengLi1/LongChat

LongChatおよびLongEvalの公式リポジトリ

DachengLi1
⭐ 533 Python 👤 DachengLi1 User 🕐 更新日時 2024-05-24 📅 作成日 2023-04-21
48
bofenghuang/vigogne

フランス語の指示追従およびチャットモデル

bofenghuang
⭐ 506 Jupyter Notebook 👤 bofenghuang User 🕐 更新日時 2024-12-05 📅 作成日 2023-03-24

よくある質問

1

GitHubで最も人気のある#flash-attentionリポジトリは何ですか?

GitHubで最も上位にランクインしているオープンソースの#flash-attentionプロジェクトは、24,180個のスターを獲得しているdeepseek-ai/DeepSeek-OCRです。光学圧縮コンテキスト

2

#flash-attentionリポジトリで最もよく使われているプログラミング言語は何ですか?

GitHubで上位にランクインしている#flash-attentionプロジェクトでは、Python, Cuda, TeX, C++が最も一般的なプログラミング言語です。

3

#flash-attentionリポジトリのランキングはどのように算出されていますか?

#flash-attentionのタグが付いた48件のアクティブなオープンソースリポジトリ(スター500個以上)を追跡しています。合計スター数は156,291個で、リポジトリあたりの平均は3,256個です。ランキングはGitHub APIからのデータに基づいて毎日更新されます。