#evaluation-metrics Repositórios
Descubra 18 repositórios ativos de código aberto no GitHub marcados com #evaluation-metrics, acumulando um total de 46,395 estrelas (uma média de 2,577 por projeto). O líder deste tópico é confident-ai/deepeval, com 19,585 estrelas.
18 repositórios no total
SDK Python para monitoramento de agentes de IA, rastreamento de custos de LLM, benchmarking e muito mais. Integra-se com a maioria dos LLMs e frameworks de agentes, incluindo CrewAI, Agno, OpenAI Agents SDK, Langchain, Autogen, AG2 e CamelAI.
“Guia para Construir uma Caixa Branca de Modelo Grande”: Um Tiny-Universe totalmente construído do zero
Lighteval é seu kit de ferramentas completo para avaliar LLMs em vários backends
Compartilhando tanto insights práticos quanto conhecimento teórico sobre a avaliação de LLMs que reunimos ao gerenciar o Open LLM Leaderboard e projetar o lighteval!
(IROS 2020, ECCVW 2020) Implementação Oficial em Python para "Rastreamento 3D de Múltiplos Objetos: Uma Linha de Base e Novas Métricas de Avaliação"
Este repositório destina-se a hospedar ferramentas e demonstrações para o ActivityNet
Avalie seu sistema de conversão de fala em texto com medidas de similaridade, como a taxa de erro de palavras (WER)
Sobre o Mistério Oculto de OCR em Grandes Modelos Multimodais (OCRBench)
OCTIS: Comparando Modelos de Tópicos é Simples! Um pacote python para otimizar e avaliar modelos de tópicos (aceito na trilha de demonstração da EACL2021)
Funções de avaliação para algoritmos de recuperação de informação/processamento de sinal de música/áudio.
:chart_with_upwards_trend: Implementação de oito métricas de avaliação para acessar a similaridade entre duas imagens. As oito métricas são as seguintes: RMSE, PSNR, SSIM, ISSM, FSIM, SRE, SAM e UIQ.
Uma biblioteca de métricas para avaliar sistemas de recomendação
Perguntas Frequentes
Qual é o repositório de #evaluation-metrics mais popular no GitHub?
O projeto de código aberto de #evaluation-metrics mais bem classificado no GitHub é confident-ai/deepeval, com 19,585 estrelas. A Estrutura de Avaliação de LLM
Quais linguagens de programação são mais usadas nos repositórios de #evaluation-metrics?
Entre os projetos de #evaluation-metrics mais bem classificados no GitHub, as linguagens de programação mais comuns são Python, Jupyter Notebook.
Como é calculada a classificação dos repositórios de #evaluation-metrics?
Acompanhamos 18 repositórios ativos de código aberto marcados com #evaluation-metrics (com mais de 500 estrelas), totalizando 46,395 estrelas e uma média de 2,577 estrelas por repositório. As classificações são atualizadas diariamente a partir da API do GitHub.