#qlora Репозитории
Откройте для себя 17 активных репозиториев с открытым исходным кодом на GitHub, отмеченных тегом #qlora, с общим числом 162,571 звёзд (в среднем 9,563 на проект). Лидером этой темы является hiyouga/LlamaFactory, набравший 76,171 звёзд.
Всего репозиториев: 17
Тонкая настройка LLM из одного YAML. Потоковая передача слоев обучает модель 8B на 4 ГБ ноутбучном GPU.
Доступные большие языковые модели через k-битную квантизацию для PyTorch.
Firefly: Инструмент для обучения больших моделей, поддерживает обучение таких больших моделей, как Qwen2.5, Qwen2, Yi1.5, Phi-3, Llama3, Gemma, MiniCPM, Yi, Deepseek, Orion, Xverse, Mixtral-8x7B, Zephyr, Mistral, Baichuan2, Llma2, Llama, Qwen, Baichuan, ChatGLM2, InternLM, Ziya2, Vicuna, Bloom и т. д.
【LLMs Девятислойная башня демона】Обмен практическим опытом и знаниями LLMs в таких областях, как обработка естественного языка (ChatGLM, Chinese-LLaMA-Alpaca, Xiaoyangtuo Vicuna, LLaMA, GPT4ALL и др.), поиск информации (langchain), синтез речи, распознавание речи, мультимодальные модели (Stable Diffusion, MiniGPT-4, VisualGLM-6B, Ziya-Visual и др.).
DeepSeekMoE: К конечной специализации экспертов в языковых моделях Mixture-of-Experts
Набор инструментов для точной настройки, абляции и модульного тестирования LLM с открытым исходным кодом.
Halo — это фреймворк с открытым исходным кодом, разработанный White Circle для обучения больших языковых и мультимодальных моделей
Предварительная проверка дообучения LLM на одной GPU: оценка объёма памяти, готовые к запуску рецепты LoRA/QLoRA и локальные измерения.
🐋MindChat (Рассуждения) – Большая психологическая модель: Беседы о жизненном пути, встречая невзгоды с улыбкой
Простая и эффективная донастройка LLM. (Поддерживаются LLama, LLama2, LLama3, Qwen, Baichuan, GLM, Falcon) Эффективное обучение + развертывание больших моделей с квантованием.
Проекты индустрии генеративного ИИ «End to End» на моделях LLM с Deployment_Awesome LLM Projects
Часто задаваемые вопросы
Какой репозиторий по теме #qlora наиболее популярен на GitHub?
Самый высоко оценённый проект с открытым исходным кодом по теме #qlora на GitHub — hiyouga/LlamaFactory, набравший 76,171 звёзд. Единая эффективная тонкая настройка 100+ LLM и VLM (ACL 2024)
Какие языки программирования чаще всего используются в репозиториях по теме #qlora?
Среди наиболее высоко оценённых проектов по теме #qlora на GitHub чаще всего используются языки программирования Python, Jupyter Notebook.
Как рассчитывается рейтинг репозиториев по теме #qlora?
Мы отслеживаем 17 активных репозиториев с открытым исходным кодом, отмеченных тегом #qlora (500 и более звёзд), с общим числом 162,571 звёзд и в среднем 9,563 звёзд на репозиторий. Рейтинги обновляются ежедневно на основе данных GitHub API.