#language-model Репозитории
Всего репозиториев: 139
Большие языковые модели (LLM) стали проще, EasyLM — это универсальное решение для предварительного обучения, дообучения, оценки и обслуживания LLM в JAX/Flax.
Запускайте модели Mixtral-8x7B в Colab или на потребительских настольных компьютерах
Экспериментальный набор инструментов для автоматической генерации технической документации по коду с использованием LLM
GenAI Processors — это легковесная библиотека Python, обеспечивающая эффективную параллельную обработку контента.
Список литературы по безопасности, защищенности и конфиденциальности больших моделей (включая Awesome LLM Security, Safety и т. д.).
[ACL 2023] Один эмбеддер, любая задача: Текстовые эмбеддинги, дообученные на инструкциях
Центр данных и инструментов пиньиня Wanxiang: расширенный словарь для упрощённого и традиционного китайского / кодирование тонов / цепочка инструментов для разметки тонов / цепочка инструментов обновления Wanxiang / грамматическая модель Rime
Неофициальный обёртщик API для Perplexity.ai + Генератор аккаунтов с веб-интерфейсом
[NeurIPS 2023] MotionGPT: Человеческое движение как иностранный язык, унифицированная модель генерации движения-языка с использованием LLM
Автоматически создавайте диаграммы архитектуры из кода с помощью больших языковых моделей (LLM).
Китайская диалоговая модель малого размера 0.2B (ChatLM-Chinese-0.2B) с открытым исходным кодом для всех процессов, таких как источники наборов данных, очистка данных, обучение токенизатора, предварительное обучение модели, тонкая настройка инструкций SFT, оптимизация RLHF и т. д. Поддерживает тонкую настройку SFT для последующих задач и предоставляет пример тонкой настройки для извлечения информации по тройкам.
[EMNLP 2025 Oral] MemoryOS разработан для предоставления операционной системы памяти для персонализированных ИИ-агентов.
Macaw-LLM: Мультимодальное моделирование языка с интеграцией изображений, видео, аудио и текста
Крошечная модель, большая логика: Оптимизация, управляемая разнообразием, вызывает у VibeThinker-1.5B способность к рассуждению, свойственную большим моделям
Официальная реализация RAPTOR: рекурсивная абстрактная обработка для древовидного поиска
Учебная программа по изучению фундаментальных моделей, от основ до передовых достижений
Предварительно обученный китайский ELECTRA (Предварительно обученная модель ELECTRA на китайском языке)
🛸 Используйте предобученные трансформеры, такие как BERT, XLNet и GPT-2, в spaCy
Рассчитайте требования к памяти GPU/токену/с для любого LLM. Поддерживает квантование llama.cpp/ggml/bnb/QLoRA
Втиснуть обучение языковой модели (типа BERT) в условия ограниченных вычислительных ресурсов.
Transformers4Rec - это гибкая и эффективная библиотека для последовательных и сессионных рекомендаций, работающая с PyTorch.
Список языковых агентов на основе статьи «Cognitive Architectures for Language Agents»
💁 Потрясающее сокровище моделей Transformer для обработки естественного языка содержит статьи, видео, блоги, официальные репозитории и ноутбуки Colab. 🛫☑️
Z80-μLM — это 2-битная квантованная языковая модель, достаточно маленькая для работы на 8-битном процессоре Z80. Обучайте разговорные модели на Python, экспортируйте их как двоичные файлы CP/M .COM и общайтесь со своим винтажным компьютером.
Сборник наборов данных с открытым исходным кодом для обучения LLM, следующих инструкциям (ChatGPT, LLaMA, Alpaca)
Куратированный список ресурсов NLP, сосредоточенный на сетях Transformer, механизме внимания, GPT, BERT, ChatGPT, LLM и трансферном обучении.
ToRA — это серия LLM-агентов для рассуждений с интеграцией инструментов, разработанных для решения сложных задач математического рассуждения путем взаимодействия с инструментами [ICLR'24].
[NeurIPS 2023] LLM-Pruner: Об структурной обрезке больших языковых моделей. Поддержка Llama-3/3.1, Llama-2, LLaMA, BLOOM, Vicuna, Baichuan, TinyLlama и др.
[совместимость с ollama/другими моделями] Интегрируйте любую модель с методом вызова API OpenAI в PotPlayer. Это позволяет переводить субтитры в реальном времени во время просмотра видео, разрушая языковые барьеры и улучшая ваш опыт просмотра.
Полное руководство по началу и улучшению ваших навыков LLM в 2026 году, даже при небольшом опыте в этой области, чтобы оставаться в курсе последних новостей и передовых технологий!
ChatGPT CLI — это мощный командный интерфейс с поддержкой нескольких провайдеров для работы с современными LLM. Он поддерживает OpenAI, Azure, Perplexity, LLaMA и другие, с такими возможностями как потоковая передача, интерактивный чат, файлы подсказок, ввод/вывод изображений/аудио, вызовы инструментов MCP и экспериментальный режим агента для безопасной многошаговой автоматизации.
Отобрано более 10 000 проектов, включая машинное обучение, глубокое обучение, NLP, GNN, рекомендательные системы, биомедицину, машинное зрение, разработку фронтенда и бэкенда и т. д. Пусть больше отличных проектов будут открыты людьми. Продолжайте обновлять! Добро пожаловать, чтобы поставить звезду!
Языковые модели для методов ввода китайского языка: корпуса, статистика n-грамм, нейросетевые модели на уровне символов и наборы для оценки их качества