#distributed-training Repository
147 repository in totale
๐น Un framework piรน flessibile in grado di generare video a qualsiasi risoluzione e creare video da immagini.
Elenco di articoli sui sistemi di modelli linguistici di grandi dimensioni (LLM)
VeOmni: Scalare l'addestramento di modelli di qualsiasi modalitร con una libreria distribuita di ricette incentrata sul modello
Codice, laboratori e risorse per O'Reilly AI Systems Performance Engineering: ottimizzazione GPU, addestramento distribuito, scalabilitร dell'inferenza e ottimizzazione full-stack.
ใLLMs Nove Livelli Torre DemoneใCondivisione di esperienze pratiche e conoscenze su LLMs in campi come l'elaborazione del linguaggio naturale (ChatGLM, Chinese-LLaMA-Alpaca, Xiaoyangtuo Vicuna, LLaMA, GPT4ALL, ecc.), recupero delle informazioni (langchain), sintesi vocale, riconoscimento vocale, multimodale (Stable Diffusion, MiniGPT-4, VisualGLM-6B, Ziya-Visual, ecc.).
Domande di colloquio per posizioni di algoritmi di grandi modelli (con risposte): domande frequenti e analisi dei concetti "Domande di colloquio su grandi modelli", "Colloquio per posizioni di algoritmi", "Domande frequenti ai colloqui", "Colloquio su algoritmi di grandi modelli", "Basi delle applicazioni di grandi modelli"
Scoperta automatica di strategie di parallelizzazione veloci per l'addestramento distribuito di reti neurali profonde
Addestramento di modelli linguistici di grandi dimensioni per ragionare in uno spazio latente continuo
Un framework completamente open source per la creazione di sciami di addestramento RL su Internet.
Una guida di avvio rapido e benchmark per il training distribuito di PyTorch.
Il repository ufficiale di Pai-Megatron-Patch per l'addestramento su larga scala di LLM e VLM sviluppato da Alibaba Cloud.
Un fork per aggiungere l'addestramento di modelli multimodali a open-r1
Una piattaforma di ricerca affidabile per l'analisi facciale sviluppata dal Tencent Youtu Lab
fitlog รจ uno strumento utilizzato nel training di deep learning per aiutare gli utenti a registrare log e gestire il codice.
Compilatore PyTorch che accelera l'addestramento e l'inferenza. Ottieni ottimizzazioni integrate per prestazioni, memoria, parallelismo e scrivi facilmente le tue.
Libreria di comunicazione collettiva con varie primitive per l'addestramento multi-macchina.
BatchNorm Attivato In-Place per l'Addestramento Ottimizzato per la Memoria di DNN
DeepRec รจ un framework di deep learning per raccomandazioni ad alte prestazioni basato su TensorFlow. ร ospitato in incubazione nella LF AI & Data Foundation.
GigaTrain: Un Framework di Addestramento Efficiente e Scalabile per Modelli di IA
Un'infrastruttura aperta per democratizzare e decentralizzare lo sviluppo della superintelligenza per l'umanitร .
Attenzione distribuita verso la scalabilitร lineare per l'addestramento su contesti ultra-lunghi e dati eterogenei