Git Stars Git Stars

#evals Репозитории

Откройте для себя 25 активных репозиториев с открытым исходным кодом на GitHub, отмеченных тегом #evals, с общим числом 108,810 звёзд (в среднем 4,352 на проект). Лидером этой темы является mastra-ai/mastra, набравший 29,719 звёзд.

25
Всего репозиториев
108,810
Всего звезд
4,352
Среднее количество звезд на репозиторий
Языки программирования: Python TypeScript JavaScript Jupyter Notebook

Всего репозиториев: 25

1
mastra-ai/mastra

Mastra — это современный фреймворк TypeScript для приложений и агентов на основе ИИ.

mastra-ai
⭐ 29,719 TypeScript 👤 mastra-ai Organization 🕐 Обновлено 2026-11-21 📅 Создано 2024-08-06
2
Arize-ai/phoenix

Наблюдаемость и оценка ИИ

Arize-ai
⭐ 12,368 Python 👤 Arize-ai Organization 🕐 Обновлено 2026-11-21 📅 Создано 2022-11-09
3
FailproofAI/failproofai

Наблюдаемость и контроль для сред выполнения ИИ-агентов. Фиксируйте каждый запуск и обеспечивайте надёжность во время выполнения с помощью принудительного применения политик.

FailproofAI
⭐ 9,904 TypeScript 👤 FailproofAI Organization 🕐 Обновлено 2026-11-21 📅 Создано 2026-04-06
4
harbor-framework/harbor

Структура для оценки и улучшения агентов

harbor-framework
⭐ 7,313 Python 👤 harbor-framework Organization 🕐 Обновлено 2026-11-21 📅 Создано 2025-08-04
5
AgentOps-AI/agentops

Python SDK для мониторинга ИИ-агентов, отслеживания затрат на LLM, бенчмаркинга и многого другого. Интегрируется с большинством LLM и фреймворков агентов, включая CrewAI, Agno, OpenAI Agents SDK, Langchain, Autogen, AG2 и CamelAI

AgentOps-AI
⭐ 5,971 Python 👤 AgentOps-AI Organization 🕐 Обновлено 2026-06-25 📅 Создано 2023-08-15
6
Kiln-AI/Kiln

Создание, оценка и оптимизация систем ИИ. Включает оценки (evals), RAG, агентов, тонкую настройку (fine-tuning), генерацию синтетических данных, управление наборами данных, MCP и многое другое.

Kiln-AI
⭐ 5,286 Python 👤 Kiln-AI Organization 🕐 Обновлено 2026-11-21 📅 Создано 2024-07-23
7
pydantic/logfire

Платформа наблюдения за ИИ для производственных систем LLM и агентских систем.

pydantic
⭐ 4,564 Python 👤 pydantic Organization 🕐 Обновлено 2026-11-21 📅 Создано 2024-04-23
8
ombharatiya/ai-system-design-guide

Руководство по проектированию систем ИИ для инженеров, создающих производственные системы ИИ и системы оценки.

ombharatiya
⭐ 4,426 👤 ombharatiya User 🕐 Обновлено 2026-11-10 📅 Создано 2025-12-16
9
truera/trulens

Оценка и отслеживание экспериментов LLM и ИИ-агентов

truera
⭐ 3,665 Python 👤 truera Organization 🕐 Обновлено 2026-11-20 📅 Создано 2020-11-02
10
lmnr-ai/lmnr

Laminar — платформа с открытым исходным кодом для обеспечения наблюдаемости, специально созданная для ИИ-агентов. YC S24.

lmnr-ai
⭐ 3,516 TypeScript 👤 lmnr-ai Organization 🕐 Обновлено 2026-11-20 📅 Создано 2024-08-29
11
FrancyJGLisboa/agent-skills-platform

Создавайте протестированные навыки агентов и управляйте их жизненным циклом через пользовательский маркетплейс: доказательства, обнаружение, обновления, откат, карантин и распространение на 17 платформ.

FrancyJGLisboa
⭐ 2,417 Python 👤 FrancyJGLisboa User 🕐 Обновлено 2026-09-15 📅 Создано 2025-10-18
12
MCPJam/inspector

Платформа для тестирования и оценки, позволяющая общаться, проверять и отлаживать серверы MCP, приложения MCP и приложения ChatGPT.

MCPJam
⭐ 2,331 TypeScript 👤 MCPJam Organization 🕐 Обновлено 2026-11-21 📅 Создано 2025-05-23
13
future-agi/future-agi

Открытая платформа полного цикла для оценки, наблюдения и улучшения приложений LLM и ИИ-агентов. Tracing · Evals · Simulations · Datasets · Gateway · Guardrails. Самостоятельный хостинг. Apache 2.0.

future-agi
⭐ 2,284 Python 👤 future-agi Organization 🕐 Обновлено 2026-11-21 📅 Создано 2026-04-23
14
ShenSeanChen/waku-agent

Waku Agent — это принадлежащий вам каркас ИИ-агента с открытым исходным кодом: цикл, память, оценки и постоянно работающий слой (входящие события, таймеры, подтверждения и исходящие сообщения) в коде, который остаётся читаемым.

ShenSeanChen
⭐ 2,206 Python 👤 ShenSeanChen User 🕐 Обновлено 2026-11-21 📅 Создано 2026-07-10
15
heymrun/heym

Создавайте агентные системы. Запускайте их с уверенностью. Оркеструйте агентов, автоматизируйте бизнес-процессы, проверяйте каждое выполнение и сохраняйте контроль за человеком. Разверните Heym на собственной инфраструктуре.

heymrun
⭐ 1,821 Python 👤 heymrun Organization 🕐 Обновлено 2026-11-21 📅 Создано 2026-03-28
16
mattpocock/evalite

Оцените ваши приложения на основе LLM с помощью TypeScript

mattpocock
⭐ 1,740 TypeScript 👤 mattpocock User 🕐 Обновлено 2026-04-28 📅 Создано 2024-11-12
17
GitHamza0206/simba

Готовое к производству решение для обслуживания клиентов с открытым исходным кодом, встроенными оценками и мониторингом

GitHamza0206
⭐ 1,545 TypeScript 👤 GitHamza0206 User 🕐 Обновлено 2026-06-18 📅 Создано 2024-12-20
18
LilMGenius/paperthin

Практическое руководство по рекурсивному самоулучшению (RSI). Новейшее доказательство NVIDIA — в разборе с опорой на проверенные временем инженерные принципы. Квинтэссенция метода без ручного вмешательства от победителя хакатона OpenAI по harness engineering.

LilMGenius
⭐ 1,469 JavaScript 👤 LilMGenius User 🕐 Обновлено 2026-11-15 📅 Создано 2026-06-19
19
superlinear-ai/raglite

🥤 RAGLite — это набор инструментов Python для генерации с расширенным поиском (RAG) с использованием DuckDB или PostgreSQL

superlinear-ai
⭐ 1,215 Python 👤 superlinear-ai Organization 🕐 Обновлено 2026-11-01 📅 Создано 2024-06-10
20
Jwuthri/Tracely-ai

Трассировочный CI/CD для ИИ-агентов: сбои в продакшене превращаются в регрессионные тесты, блокирующие PR. Автоматическое обнаружение и кластеризация, фиксация в герметичных тестовых случаях и воспроизведение в CI за $0.

Jwuthri
⭐ 1,122 Python 👤 Jwuthri User 🕐 Обновлено 2026-11-21 📅 Создано 2026-06-03
21
benchflow-ai/awesome-evals

Курируемая библиотека лучших ресурсов для создания и оценки AI-агентов — статьи, блоги, выступления, инструменты, бенчмарки. Поддерживается BenchFlow.

benchflow-ai
⭐ 1,049 👤 benchflow-ai Organization 🕐 Обновлено 2026-11-04 📅 Создано 2026-06-24
22
tripleyak/SkillForge

Создатель навыков, который доказывает эффективность своих навыков. Создание навыков на основе доказательств для Claude Code и Codex: генерация с базовым тестированием, регрессионная оценка для каждого навыка, диагностика экосистемы, кросс-средовая компиляция и опциональный проактивный советник.

tripleyak
⭐ 918 Python 👤 tripleyak User 🕐 Обновлено 2026-07-29 📅 Создано 2025-12-30
23
overmind-core/overmind

Платформа для непрерывного улучшения ИИ-агентов.

overmind-core
⭐ 771 Python 👤 overmind-core Organization 🕐 Обновлено 2026-11-21 📅 Создано 2026-03-27
24
calmrocks/ai-engineer-notebooks

Практические Colab-ноутбуки без использования фреймворков для развития навыков AI Engineer / Forward Deployed Engineer (FDE): API моделей, структурированный вывод, вызов инструментов, RAG, оценка как основа разработки, агенты (цикл с нуля, проектирование инструментов, защитные барьеры, MCP, навыки), fine-tuning против LoRA, prompt-инъекции/безопасность, LLMOps и работа с клиентами. Работает на бесплатном API Groq.

calmrocks
⭐ 756 Jupyter Notebook 👤 calmrocks User 🕐 Обновлено 2026-11-07 📅 Создано 2026-08-11
25
ratel-ai/ratel

Слой самоулучшения для ИИ-агентов. Ratel анализирует трассировки вашего агента, выявляет проблемы, рекомендует исправления и проводит оценку на реальных сессиях до запуска. Самостоятельное размещение: одно приложение, один Postgres. В комплекте SDK для TypeScript и Python.

ratel-ai
⭐ 566 TypeScript 👤 ratel-ai Organization 🕐 Обновлено 2026-11-21 📅 Создано 2025-11-12

Часто задаваемые вопросы

1

Какой репозиторий по теме #evals наиболее популярен на GitHub?

Самый высоко оценённый проект с открытым исходным кодом по теме #evals на GitHub — mastra-ai/mastra, набравший 29,719 звёзд. Mastra — это современный фреймворк TypeScript для приложений и агентов на основе ИИ.

2

Какие языки программирования чаще всего используются в репозиториях по теме #evals?

Среди наиболее высоко оценённых проектов по теме #evals на GitHub чаще всего используются языки программирования Python, TypeScript, JavaScript, Jupyter Notebook.

3

Как рассчитывается рейтинг репозиториев по теме #evals?

Мы отслеживаем 25 активных репозиториев с открытым исходным кодом, отмеченных тегом #evals (500 и более звёзд), с общим числом 108,810 звёзд и в среднем 4,352 звёзд на репозиторий. Рейтинги обновляются ежедневно на основе данных GitHub API.