Git Stars Git Stars

#pretraining Repository

Scopri 22 repository GitHub open source attivi contrassegnati con #pretraining, che raccolgono un totale di 150,107 stelle (con una media di 6,823 stelle per progetto). Il progetto leader di questo argomento è rasbt/LLMs-from-scratch, con 108,745 stelle.

22
Totale Repository
150,107
Totale stelle
6,823
Media Stelle/Repo
Linguaggi di programmazione: Python Jupyter Notebook

22 repository in totale

1
rasbt/LLMs-from-scratch

Implementa un LLM simile a ChatGPT in PyTorch da zero, passo dopo passo

rasbt
⭐ 108,745 Jupyter Notebook 👤 rasbt User 🕐 Aggiornato 2026-11-20 📅 Creato 2023-07-23
2
LlamaChinese/Llama-Chinese

Community cinese Llama, raccoglie in tempo reale gli ultimi materiali di apprendimento su Llama, costruisce il miglior ecosistema open source di modelli di grandi dimensioni Llama in cinese, completamente open source e disponibile per uso commerciale

LlamaChinese
⭐ 14,712 Python 👤 LlamaChinese Organization 🕐 Aggiornato 2025-04-06 📅 Creato 2023-07-19
3
microsoft/LMOps

Tecnologia generale per abilitare funzionalità AI con LLM e MLLM

microsoft
⭐ 4,484 Python 👤 microsoft Organization 🕐 Aggiornato 2026-09-15 📅 Creato 2022-12-13
4
OFA-Sys/OFA

Repository ufficiale di OFA (ICML 2022). Paper: OFA: Unifying Architectures, Tasks, and Modalities Through a Simple Sequence-to-Sequence Learning Framework

OFA-Sys
⭐ 2,550 Python 👤 OFA-Sys Organization 🕐 Aggiornato 2024-04-24 📅 Creato 2022-01-29
5
X-PLUG/mPLUG-Owl

mPLUG-Owl: La potente famiglia di modelli linguistici di grandi dimensioni multimodali

X-PLUG
⭐ 2,541 Python 👤 X-PLUG Organization 🕐 Aggiornato 2025-04-02 📅 Creato 2023-04-25
6
sapientinc/HRM-Text

HRM-Text è un modello di generazione di testo da 1 miliardo di parametri basato sull'architettura HRM, potenziato dal completamento di attività e dal ragionamento nello spazio latente.

sapientinc
⭐ 2,341 Python 👤 sapientinc Organization 🕐 Aggiornato 2026-09-21 📅 Creato 2026-05-18
7
ChandlerBang/awesome-self-supervised-gnn

Articoli sul pre-allenamento e sull'apprendimento auto-supervisionato su reti neurali a grafo (GNN).

ChandlerBang
⭐ 1,704 Python 👤 ChandlerBang User 🕐 Aggiornato 2024-02-02 📅 Creato 2020-05-27
8
keyu-tian/SparK

[ICLR'23 Spotlight🔥] Il primo pre-training di successo in stile BERT/MAE su qualsiasi rete convoluzionale; Impl. Pytorch di "Designing BERT for Convolutional Networks: Sparse and Hierarchical Masked Modeling"

keyu-tian
⭐ 1,363 Python 👤 keyu-tian User 🕐 Aggiornato 2024-01-23 📅 Creato 2023-01-05
9
InternScience/GraphGen

GraphGen: Miglioramento del Fine-Tuning Supervisionato per LLM con Generazione di Dati Sintetici Guidata dalla Conoscenza

InternScience
⭐ 1,236 Python 👤 InternScience Organization 🕐 Aggiornato 2026-11-08 📅 Creato 2025-01-08
10
OpenWAM-Official/OpenWAM

Repository ufficiale di «OpenWAM: Un’esplorazione aperta e modulare verso il preaddestramento sistematico di modelli del mondo e dell’azione».

OpenWAM-Official
⭐ 1,210 Python 👤 OpenWAM-Official Organization 🕐 Aggiornato 2026-11-12 📅 Creato 2026-09-06
11
deepmodeling/Uni-Mol

Repository Ufficiale per i Metodi della Serie Uni-Mol

deepmodeling
⭐ 1,112 Python 👤 deepmodeling Organization 🕐 Aggiornato 2025-05-29 📅 Creato 2022-05-22
12
seal-rg/recurrent-pretraining

Codice di pre-addestramento e inferenza per un modello linguistico profondamente ricorrente su larga scala

seal-rg
⭐ 993 Python 👤 seal-rg Organization 🕐 Aggiornato 2025-12-29 📅 Creato 2025-02-07
13
baidu-baige/LoongForge

Un framework ad alte prestazioni per l’addestramento di LLM, VLM, modelli di diffusione e modelli embodied su GPU NVIDIA e XPU Kunlun. Supporta Pi0.5, GR00T-N1.7, FastWAM, Cosmos3, DreamZero, DeepSeek-V4, GLM-5.3, Kimi-K3 e altri.

baidu-baige
⭐ 881 Python 👤 baidu-baige Organization 🕐 Aggiornato 2026-11-20 📅 Creato 2026-04-23
14
PKU-YuanGroup/LanguageBind

【ICLR 2024🔥】 Estensione del pre-addestramento video-linguaggio a N-modalità tramite allineamento semantico basato sul linguaggio

PKU-YuanGroup
⭐ 856 Python 👤 PKU-YuanGroup Organization 🕐 Aggiornato 2024-03-25 📅 Creato 2023-10-02
15
zubair-irshad/Awesome-Robotics-3D

Un elenco curato di articoli sulla visione 3D relativi al dominio della robotica nell'era dei grandi modelli, ovvero LLM/VLM, ispirato da awesome-computer-vision, inclusi articoli, codici e siti Web correlati

zubair-irshad
⭐ 824 👤 zubair-irshad User 🕐 Aggiornato 2025-12-17 📅 Creato 2024-08-12
16
zcablii/SARDet_100K

[NeurIPS 2024 spotlight] Implementazione ufficiale di MSFA e rilascio del dataset SARDet_100K per il rilevamento di oggetti su larga scala con radar ad apertura sintetica (SAR)

zcablii
⭐ 743 Python 👤 zcablii User 🕐 Aggiornato 2025-05-06 📅 Creato 2024-02-20
17
AGI-Arena/MARS

L'implementazione ufficiale di MARS: Sfruttare la potenza della riduzione della varianza per l'addestramento di modelli di grandi dimensioni

AGI-Arena
⭐ 725 Python 👤 AGI-Arena Organization 🕐 Aggiornato 2026-03-26 📅 Creato 2024-11-17
18
Coobiw/MPP-LLaVA

Progetto Personale: MPP-Qwen14B & MPP-Qwen-Next (Multimodal Pipeline Parallelism basato su Qwen-LM). Supporta [video/image/multi-image] {sft/conversations}. Non lasciare che la povertà limiti la tua immaginazione! Addestra il tuo MLLM in stile LLaVA-training da 8B/14B su RTX3090/4090 24GB.

Coobiw
⭐ 678 Jupyter Notebook 👤 Coobiw User 🕐 Aggiornato 2025-03-10 📅 Creato 2023-10-24
19
m-bain/webvid

Dataset di testo-video su larga scala. 10 milioni di brevi video con didascalie.

m-bain
⭐ 670 Python 👤 m-bain User 🕐 Aggiornato 2024-08-14 📅 Creato 2021-06-07
20
cxcscmu/Craw4LLM

Repository ufficiale per "Craw4LLM: Web Crawling efficiente per il pre-addestramento LLM"

cxcscmu
⭐ 654 Python 👤 cxcscmu Organization 🕐 Aggiornato 2025-02-24 📅 Creato 2025-02-17
21
westlake-repl/SaProt

Saprot: Modello linguistico proteico con alfabeto strutturale (AA+3Di)

westlake-repl
⭐ 646 Python 👤 westlake-repl Organization 🕐 Aggiornato 2026-03-08 📅 Creato 2023-10-02
22
PITI-Synthesis/PITI

PITI: Il pre-addestramento è tutto ciò di cui hai bisogno per la traduzione da immagine a immagine

PITI-Synthesis
⭐ 501 Python 👤 PITI-Synthesis User 🕐 Aggiornato 2024-06-02 📅 Creato 2022-05-27

Domande frequenti

1

Qual è il repository #pretraining più popolare su GitHub?

Il progetto open source #pretraining più alto in classifica su GitHub è rasbt/LLMs-from-scratch, con 108,745 stelle. Implementa un LLM simile a ChatGPT in PyTorch da zero, passo dopo passo

2

Quali linguaggi di programmazione sono più utilizzati nei repository #pretraining?

Tra i progetti #pretraining più alti in classifica su GitHub, i linguaggi di programmazione più comuni sono Python, Jupyter Notebook.

3

Come viene calcolata la classifica dei repository #pretraining?

Monitoriamo 22 repository open source attivi contrassegnati con #pretraining (500+ stelle), per un totale di 150,107 stelle e una media di 6,823 stelle per repository. Le classifiche vengono aggiornate quotidianamente tramite l’API di GitHub.