#model-parallelism Dépôts
Découvrez 16 dépôts GitHub open source actifs associés à #model-parallelism, cumulant 115,629 étoiles au total (soit une moyenne de 7,226 étoiles par projet). Le projet en tête de ce thème est deepspeedai/DeepSpeed, avec 43,348 étoiles.
16 dépôts au total
DeepSpeed est une bibliothèque d'optimisation pour l'apprentissage profond qui rend l'entraînement distribué et l'inférence simples, efficaces et performants.
Un moyen simple de lancer, entraîner et utiliser des modèles PyTorch sur presque tous les appareils et configurations distribuées, la précision mixte automatique (y compris fp8) et la prise en charge FSDP et DeepSpeed facile à configurer
Meta Lingua : une base de code légère, efficace et facile à cracker pour la recherche sur les LLM.
Extensions PyTorch pour l'entraînement haute performance et à grande échelle.
VeOmni : Mise à l'échelle de la formation de modèles de toute modalité avec une bibliothèque distribuée de recettes centrée sur le modèle
Framework minimaliste d'entraînement distribué 4D-parallélisme à des fins éducatives
GigaTrain : Un cadre d'entraînement efficace et évolutif pour les modèles d'IA
Apprentissage des grands modèles linguistiques (LLM) (Apprentissage des grands modèles linguistiques)
Halo est un framework open source développé par White Circle pour entraîner des modèles de langage de grande taille et des modèles multimodaux
prime est un framework pour l'entraînement efficace et distribué au niveau mondial de modèles d'IA sur Internet.
MeshGPT : Génération de maillages triangulaires avec des transformateurs uniquement décodeurs
Fournit des pipelines de développement de modèles de bout en bout pour les LLM et les modèles multimodaux qui peuvent être lancés sur site ou en mode cloud natif.
Foire aux questions
Quel est le dépôt #model-parallelism le plus populaire sur GitHub ?
Le projet #model-parallelism open source le mieux classé sur GitHub est deepspeedai/DeepSpeed, avec 43,348 étoiles. DeepSpeed est une bibliothèque d'optimisation pour l'apprentissage profond qui rend l'entraînement distribué et l'inférence simples, efficaces et performants.
Quels langages de programmation sont les plus utilisés dans les dépôts #model-parallelism ?
Parmi les projets #model-parallelism les mieux classés sur GitHub, les langages de programmation les plus courants sont Python, TypeScript, Cuda.
Comment le classement des dépôts #model-parallelism est-il calculé ?
Nous suivons 16 dépôts open source actifs associés à #model-parallelism (500+ étoiles), totalisant 115,629 étoiles, avec une moyenne de 7,226 étoiles par dépôt. Les classements sont mis à jour quotidiennement à partir de l’API GitHub.