#evaluation-metrics Репозитории
Откройте для себя 18 активных репозиториев с открытым исходным кодом на GitHub, отмеченных тегом #evaluation-metrics, с общим числом 46,395 звёзд (в среднем 2,577 на проект). Лидером этой темы является confident-ai/deepeval, набравший 19,585 звёзд.
Всего репозиториев: 18
Python SDK для мониторинга ИИ-агентов, отслеживания затрат на LLM, бенчмаркинга и многого другого. Интегрируется с большинством LLM и фреймворков агентов, включая CrewAI, Agno, OpenAI Agents SDK, Langchain, Autogen, AG2 и CamelAI
"Руководство по созданию White Box для больших моделей": Полностью самодельная Tiny-Universe
Lighteval — это ваш универсальный набор инструментов для оценки LLM на различных бэкэндах
Обмен как практическими идеями, так и теоретическими знаниями об оценке LLM, которые мы собрали при управлении Open LLM Leaderboard и разработке lighteval!
(IROS 2020, ECCVW 2020) Официальная реализация на Python для «3D Multi-Object Tracking: A Baseline and New Evaluation Metrics»
Этот репозиторий предназначен для размещения инструментов и демонстраций для ActivityNet.
Оцените вашу систему преобразования речи в текст с помощью мер сходства, таких как коэффициент ошибок слов (WER)
О скрытой тайне оптического распознавания символов (OCR) в больших мультимодальных моделях (OCRBench)
OCTIS: Сравнение тематических моделей — это просто! Пакет Python для оптимизации и оценки тематических моделей (принят на демо-трек EACL2021)
Функции оценки для алгоритмов извлечения музыкальной/аудиоинформации/обработки сигналов.
:chart_with_upwards_trend: Реализация восьми метрик оценки для определения сходства между двумя изображениями. Восемь метрик следующие: RMSE, PSNR, SSIM, ISSM, FSIM, SRE, SAM и UIQ.
Часто задаваемые вопросы
Какой репозиторий по теме #evaluation-metrics наиболее популярен на GitHub?
Самый высоко оценённый проект с открытым исходным кодом по теме #evaluation-metrics на GitHub — confident-ai/deepeval, набравший 19,585 звёзд. Фреймворк оценки LLM
Какие языки программирования чаще всего используются в репозиториях по теме #evaluation-metrics?
Среди наиболее высоко оценённых проектов по теме #evaluation-metrics на GitHub чаще всего используются языки программирования Python, Jupyter Notebook.
Как рассчитывается рейтинг репозиториев по теме #evaluation-metrics?
Мы отслеживаем 18 активных репозиториев с открытым исходным кодом, отмеченных тегом #evaluation-metrics (500 и более звёзд), с общим числом 46,395 звёзд и в среднем 2,577 звёзд на репозиторий. Рейтинги обновляются ежедневно на основе данных GitHub API.