#pre-training Dépôts
Découvrez 18 dépôts GitHub open source actifs associés à #pre-training, cumulant 43,729 étoiles au total (soit une moyenne de 2,429 étoiles par projet). Le projet en tête de ce thème est RUCAIBox/LLMSurvey, avec 12,165 étoiles.
18 dépôts au total
La page GitHub officielle du document de synthèse "A Survey of Large Language Models".
Traitement des données pour et avec des modèles fondamentaux ! 🍎 🍋 🌽 ➡️ ➡️🍸 🍹 🍷
Framework de Modèles de Pré-entraînement Open Source en PyTorch & Zoo de Modèles Pré-entraînés
Des ressources géniales pour l'apprentissage en contexte et l'ingénierie de prompts : maîtrise des LLM tels que ChatGPT, GPT‑3 et FlanT5, avec des mises à jour à jour et à la pointe.
Articles sur le pré-entraînement et l'apprentissage auto-supervisé sur les réseaux de neurones graphiques (GNN).
Entraînement unifié de transformeurs universels pour la prévision de séries temporelles
Code pour l'article TKDE « Apprentissage auto-supervisé sur les graphes : Contrastif, génératif ou prédictif »
Liste impressionnante pour la recherche sur CLIP (Contrastive Language-Image Pre-Training).
Une liste professionnelle sur les grands modèles (de langage) et les modèles fondamentaux (LLM, LM, FM) pour les données de séries temporelles, spatio-temporelles et événementielles.
Framework de pré-entraînement Tencent en PyTorch et zoo de modèles pré-entraînés
Articles sur les systèmes de recommandation améliorés par des modèles de langage étendus
Le dépôt d'ET-BERT, un modèle de classification du trafic réseau sur le trafic chiffré. Le travail a été accepté en tant que document accepté par The Web Conference (WWW) 2022.
[ICLR 2024] Sheared LLaMA : Accélérer le pré-entraînement des modèles linguistiques par élagage structuré
[NeurIPS 2020] "Graph Contrastive Learning with Augmentations" par Yuning You, Tianlong Chen, Yongduo Sui, Ting Chen, Zhangyang Wang, Yang Shen
Foire aux questions
Quel est le dépôt #pre-training le plus populaire sur GitHub ?
Le projet #pre-training open source le mieux classé sur GitHub est RUCAIBox/LLMSurvey, avec 12,165 étoiles. La page GitHub officielle du document de synthèse "A Survey of Large Language Models".
Quels langages de programmation sont les plus utilisés dans les dépôts #pre-training ?
Parmi les projets #pre-training les mieux classés sur GitHub, les langages de programmation les plus courants sont Python, Jupyter Notebook.
Comment le classement des dépôts #pre-training est-il calculé ?
Nous suivons 18 dépôts open source actifs associés à #pre-training (500+ étoiles), totalisant 43,729 étoiles, avec une moyenne de 2,429 étoiles par dépôt. Les classements sont mis à jour quotidiennement à partir de l’API GitHub.