Git Stars Git Stars

#evaluation-framework Repository

Scopri 13 repository GitHub open source attivi contrassegnati con #evaluation-framework, che raccolgono un totale di 100,331 stelle (con una media di 7,717 stelle per progetto). Il progetto leader di questo argomento è promptfoo/promptfoo, con 27,516 stelle.

13
Totale Repository
100,331
Totale stelle
7,717
Media Stelle/Repo
Linguaggi di programmazione: Python TypeScript Jupyter Notebook

13 repository in totale

1
promptfoo/promptfoo

Testa i tuoi prompt, agenti e RAG. Red teaming/pentesting/scansione delle vulnerabilità per l'IA. Confronta le prestazioni di GPT, Claude, Gemini, DeepSeek e altri. Configurazioni dichiarative semplici con integrazione da riga di comando e CI/CD. Utilizzato da OpenAI e Anthropic.

promptfoo
⭐ 27,516 TypeScript 👤 promptfoo Organization 🕐 Aggiornato 2026-11-21 📅 Creato 2023-04-28
2
openai/evals

Evals è un framework per la valutazione di LLM e sistemi LLM e un registro open-source di benchmark.

openai
⭐ 19,776 Python 👤 openai Organization 🕐 Aggiornato 2026-04-14 📅 Creato 2023-01-23
3
confident-ai/deepeval

Il framework di valutazione LLM

confident-ai
⭐ 19,585 Python 👤 confident-ai Organization 🕐 Aggiornato 2026-11-19 📅 Creato 2023-08-10
4
EleutherAI/lm-evaluation-harness

Un framework per la valutazione few-shot dei modelli linguistici.

EleutherAI
⭐ 14,515 Python 👤 EleutherAI Organization 🕐 Aggiornato 2026-11-04 📅 Creato 2020-08-28
5
Kiln-AI/Kiln

Costruire, Valutare e Ottimizzare i Sistemi di IA. Include valutazioni (evals), RAG, agenti, messa a punto (fine-tuning), generazione di dati sintetici, gestione dei set di dati, MCP e altro ancora.

Kiln-AI
⭐ 5,286 Python 👤 Kiln-AI Organization 🕐 Aggiornato 2026-11-21 📅 Creato 2024-07-23
6
Nicolepcx/ai-agents-the-definitive-guide

Repository per Agenti IA: La guida definitiva

Nicolepcx
⭐ 3,020 Jupyter Notebook 👤 Nicolepcx User 🕐 Aggiornato 2026-08-01 📅 Creato 2025-08-22
7
huggingface/lighteval

Lighteval è il tuo toolkit all-in-one per la valutazione di LLM su più backend

huggingface
⭐ 2,587 Python 👤 huggingface Organization 🕐 Aggiornato 2026-11-18 📅 Creato 2024-01-26
8
future-agi/future-agi

Piattaforma open-source end-to-end per valutare, osservare e migliorare applicazioni LLM e agenti AI. Tracing · Evals · Simulations · Datasets · Gateway · Guardrails. Auto-ospitabile. Apache 2.0.

future-agi
⭐ 2,284 Python 👤 future-agi Organization 🕐 Aggiornato 2026-11-21 📅 Creato 2026-04-23
9
Cloud-CV/EvalAI

:cloud: :rocket: :bar_chart: :chart_with_upwards_trend: Valutazione dello stato dell'arte nell'IA

Cloud-CV
⭐ 2,049 Python 👤 Cloud-CV Organization 🕐 Aggiornato 2026-11-14 📅 Creato 2016-10-21
10
tsale/EDR-Telemetry

Questo progetto mira a confrontare e valutare la telemetria di vari prodotti EDR.

tsale
⭐ 2,004 Python 👤 tsale User 🕐 Aggiornato 2026-11-12 📅 Creato 2023-04-01
11
ServiceNow/AgentLab

AgentLab: Un framework open-source per lo sviluppo, il testing e il benchmarking di agenti web su compiti diversi, progettato per scalabilità e riproducibilità。

ServiceNow
⭐ 668 Python 👤 ServiceNow Organization 🕐 Aggiornato 2026-10-06 📅 Creato 2024-05-21
12
lartpang/SAMs-CDConcepts-Eval

Ispirare la prossima generazione di Segment Anything Models: Valutare in modo completo SAM e SAM 2 con prompt diversi verso concetti dipendenti dal contesto in scene differenti

lartpang
⭐ 575 Python 👤 lartpang User 🕐 Aggiornato 2026-08-30 📅 Creato 2024-11-26
13
relari-ai/continuous-eval

Valutazione basata sui dati per applicazioni basate su LLM

relari-ai
⭐ 519 Python 👤 relari-ai Organization 🕐 Aggiornato 2026-08-10 📅 Creato 2023-12-08

Domande frequenti

1

Qual è il repository #evaluation-framework più popolare su GitHub?

Il progetto open source #evaluation-framework più alto in classifica su GitHub è promptfoo/promptfoo, con 27,516 stelle. Testa i tuoi prompt, agenti e RAG. Red teaming/pentesting/scansione delle vulnerabilità per l'IA. Confronta le prestazioni di GPT, Claude, Gemini, DeepSeek e altri. Configurazioni dichiarative semplici con integrazione da riga di comando e CI/CD. Utilizzato da OpenAI e Anthropic.

2

Quali linguaggi di programmazione sono più utilizzati nei repository #evaluation-framework?

Tra i progetti #evaluation-framework più alti in classifica su GitHub, i linguaggi di programmazione più comuni sono Python, TypeScript, Jupyter Notebook.

3

Come viene calcolata la classifica dei repository #evaluation-framework?

Monitoriamo 13 repository open source attivi contrassegnati con #evaluation-framework (500+ stelle), per un totale di 100,331 stelle e una media di 7,717 stelle per repository. Le classifiche vengono aggiornate quotidianamente tramite l’API di GitHub.