#evaluation-framework Repositórios
Descubra 13 repositórios ativos de código aberto no GitHub marcados com #evaluation-framework, acumulando um total de 100,331 estrelas (uma média de 7,717 por projeto). O líder deste tópico é promptfoo/promptfoo, com 27,516 estrelas.
13 repositórios no total
Teste seus prompts, agentes e RAGs. Red teaming/pentesting/verificação de vulnerabilidades para IA. Compare o desempenho de GPT, Claude, Gemini, DeepSeek e mais. Configurações declarativas simples com integração de linha de comando e CI/CD. Utilizado pela OpenAI e Anthropic.
Evals é uma estrutura para avaliar LLMs e sistemas de LLM, e um registro de código aberto de benchmarks.
Construir, Avaliar e Otimizar Sistemas de IA. Inclui avaliações (evals), RAG, agentes, ajuste fino, geração de dados sintéticos, gerenciamento de conjuntos de dados, MCP e muito mais.
Lighteval é seu kit de ferramentas completo para avaliar LLMs em vários backends
Plataforma open-source de ponta a ponta para avaliar, observar e melhorar aplicações de LLM e agentes de IA. Tracing · Evals · Simulations · Datasets · Gateway · Guardrails. Auto-hospedável. Apache 2.0.
:cloud: :rocket: :bar_chart: :chart_with_upwards_trend: Avaliando o estado da arte em IA
AgentLab: Um framework de código aberto para desenvolver, testar e avaliar agentes web em diversas tarefas, projetado para escalabilidade e reprodutibilidade.
Inspirando a Próxima Geração de Modelos 'Segment Anything': Avaliando de Forma Abrangente SAM e SAM 2 com Diversos Prompts em Direção a Conceitos Dependentes de Contexto em Diferentes Cenários
Perguntas Frequentes
Qual é o repositório de #evaluation-framework mais popular no GitHub?
O projeto de código aberto de #evaluation-framework mais bem classificado no GitHub é promptfoo/promptfoo, com 27,516 estrelas. Teste seus prompts, agentes e RAGs. Red teaming/pentesting/verificação de vulnerabilidades para IA. Compare o desempenho de GPT, Claude, Gemini, DeepSeek e mais. Configurações declarativas simples com integração de linha de comando e CI/CD. Utilizado pela OpenAI e Anthropic.
Quais linguagens de programação são mais usadas nos repositórios de #evaluation-framework?
Entre os projetos de #evaluation-framework mais bem classificados no GitHub, as linguagens de programação mais comuns são Python, TypeScript, Jupyter Notebook.
Como é calculada a classificação dos repositórios de #evaluation-framework?
Acompanhamos 13 repositórios ativos de código aberto marcados com #evaluation-framework (com mais de 500 estrelas), totalizando 100,331 estrelas e uma média de 7,717 estrelas por repositório. As classificações são atualizadas diariamente a partir da API do GitHub.