#pre-training Repositorios
Descubre 18 repositorios activos de código abierto de GitHub etiquetados con #pre-training, que acumulan 43,729 estrellas en total (una media de 2,429 estrellas por proyecto). El líder de este tema es RUCAIBox/LLMSurvey, con 12,165 estrellas.
18 repositorios en total
La página oficial de GitHub para el artículo de revisión "A Survey of Large Language Models".
Marco de modelos de preentrenamiento de código abierto en PyTorch & Zoológico de modelos preentrenados
Recursos increíbles para el aprendizaje en contexto y la ingeniería de prompts: dominio de los LLM como ChatGPT, GPT-3 y FlanT5, con actualizaciones de última generación y de vanguardia.
Artículos sobre preentrenamiento y aprendizaje autosupervisado en redes neuronales de grafos (GNN).
Entrenamiento unificado de transformadores universales para la predicción de series temporales
Código para el artículo de TKDE "Aprendizaje auto-supervisado en grafos: ¿Contrastivo, generativo o predictivo?"
Un framework de código abierto de modelos de lenguaje grandes basado en el conocimiento.
Impresionante lista para la investigación sobre CLIP (Contrastive Language-Image Pre-Training).
Una lista profesional sobre Modelos Grandes (de Lenguaje) y Modelos Fundacionales (LLM, LM, FM) para Datos de Series Temporales, Espacio-Temporales y de Eventos.
Marco de preentrenamiento de Tencent en PyTorch y Zoológico de modelos preentrenados
Artículos sobre sistemas de recomendación mejorados por modelos de lenguaje grandes
El repositorio de ET-BERT, un modelo de clasificación de tráfico de red en tráfico cifrado. El trabajo ha sido aceptado como un artículo aceptado en The Web Conference (WWW) 2022.
Repositorio oficial para "Craw4LLM: Rastreo web eficiente para preentrenamiento de LLM"
[ICLR 2024] Sheared LLaMA: Acelerando el preentrenamiento de modelos de lenguaje a través de la poda estructurada
[NeurIPS 2020] "Graph Contrastive Learning with Augmentations" por Yuning You, Tianlong Chen, Yongduo Sui, Ting Chen, Zhangyang Wang, Yang Shen
Preguntas frecuentes
¿Cuál es el repositorio de #pre-training más popular en GitHub?
El proyecto de código abierto de #pre-training mejor posicionado en GitHub es RUCAIBox/LLMSurvey, con 12,165 estrellas. La página oficial de GitHub para el artículo de revisión "A Survey of Large Language Models".
¿Qué lenguajes de programación se utilizan más en los repositorios de #pre-training?
Entre los proyectos de #pre-training mejor posicionados en GitHub, los lenguajes de programación más comunes son Python, Jupyter Notebook.
¿Cómo se calcula la clasificación de los repositorios de #pre-training?
Seguimos 18 repositorios activos de código abierto etiquetados con #pre-training (500+ estrellas), que suman un total de 43,729 estrellas, con una media de 2,429 estrellas por repositorio. Las clasificaciones se actualizan diariamente a partir de la API de GitHub.