Git Stars Git Stars

#evaluation-framework Repositories

Entdecke 13 aktive Open-Source-GitHub-Repositories, die mit #evaluation-framework getaggt sind und insgesamt 100,331 Sterne gesammelt haben (durchschnittlich 7,717 Sterne pro Projekt). Spitzenreiter in diesem Themenbereich ist promptfoo/promptfoo mit 27,516 Sternen.

13
Gesamtzahl der Repositories
100,331
Gesamtanzahl der Sterne
7,717
Durchschnittliche Sterne/Repo

Insgesamt 13 Repositories

1
promptfoo/promptfoo

Testen Sie Ihre Prompts, Agenten und RAGs. Red Teaming/Pentesting/Schwachstellenanalyse für KI. Vergleichen Sie die Leistung von GPT, Claude, Gemini, DeepSeek und mehr. Einfache deklarative Konfigurationen mit Befehlszeilen- und CI/CD-Integration. Wird von OpenAI und Anthropic verwendet.

promptfoo
⭐ 27,516 TypeScript 👤 promptfoo Organization 🕐 Aktualisiert 2026-11-21 📅 Erstellt 2023-04-28
2
openai/evals

Evals ist ein Framework zur Bewertung von LLMs und LLM-Systemen und ein Open-Source-Repository von Benchmarks.

openai
⭐ 19,776 Python 👤 openai Organization 🕐 Aktualisiert 2026-04-14 📅 Erstellt 2023-01-23
3
confident-ai/deepeval

Das LLM-Bewertungsframework

confident-ai
⭐ 19,585 Python 👤 confident-ai Organization 🕐 Aktualisiert 2026-11-19 📅 Erstellt 2023-08-10
4
EleutherAI/lm-evaluation-harness

Ein Framework zur Few-Shot-Bewertung von Sprachmodellen.

EleutherAI
⭐ 14,515 Python 👤 EleutherAI Organization 🕐 Aktualisiert 2026-11-04 📅 Erstellt 2020-08-28
5
Kiln-AI/Kiln

KI-Systeme erstellen, bewerten und optimieren. Umfasst Evals (Bewertungen), RAG, Agenten, Feinabstimmung (Fine-Tuning), Generierung synthetischer Daten, Dataset-Management, MCP und mehr.

Kiln-AI
⭐ 5,286 Python 👤 Kiln-AI Organization 🕐 Aktualisiert 2026-11-21 📅 Erstellt 2024-07-23
6
Nicolepcx/ai-agents-the-definitive-guide

Repo für KI-Agenten: Der ultimative Leitfaden

Nicolepcx
⭐ 3,020 Jupyter Notebook 👤 Nicolepcx User 🕐 Aktualisiert 2026-08-01 📅 Erstellt 2025-08-22
7
huggingface/lighteval

Lighteval ist Ihr All-in-One-Toolkit zur Bewertung von LLMs über mehrere Backends hinweg

huggingface
⭐ 2,587 Python 👤 huggingface Organization 🕐 Aktualisiert 2026-11-18 📅 Erstellt 2024-01-26
8
future-agi/future-agi

Open-Source-End-to-End-Plattform zur Bewertung, Beobachtung und Verbesserung von LLM- und KI-Agent-Anwendungen. Tracing · Evals · Simulations · Datasets · Gateway · Guardrails. Selbst-hostbar. Apache 2.0.

future-agi
⭐ 2,284 Python 👤 future-agi Organization 🕐 Aktualisiert 2026-11-21 📅 Erstellt 2026-04-23
9
Cloud-CV/EvalAI

:cloud: :rocket: :bar_chart: :chart_with_upwards_trend: Bewertung des Standes der Technik in der KI

Cloud-CV
⭐ 2,049 Python 👤 Cloud-CV Organization 🕐 Aktualisiert 2026-11-14 📅 Erstellt 2016-10-21
10
tsale/EDR-Telemetry

Dieses Projekt zielt darauf ab, die Telemetrie verschiedener EDR-Produkte zu vergleichen und zu bewerten.

tsale
⭐ 2,004 Python 👤 tsale User 🕐 Aktualisiert 2026-11-12 📅 Erstellt 2023-04-01
11
ServiceNow/AgentLab

AgentLab: Ein Open-Source-Framework zur Entwicklung, zum Testen und Benchmarking von Webagenten in vielfältigen Aufgaben, entwickelt für Skalierbarkeit und Reproduzierbarkeit。

ServiceNow
⭐ 668 Python 👤 ServiceNow Organization 🕐 Aktualisiert 2026-10-06 📅 Erstellt 2024-05-21
12
lartpang/SAMs-CDConcepts-Eval

Inspiration für die nächste Generation von Segment Anything Models: Umfassende Evaluierung von SAM und SAM 2 mit vielfältigen Prompts für kontextabhängige Konzepte in verschiedenen Szenen

lartpang
⭐ 575 Python 👤 lartpang User 🕐 Aktualisiert 2026-08-30 📅 Erstellt 2024-11-26
13
relari-ai/continuous-eval

Datengetriebene Evaluierung für LLM-gestützte Anwendungen

relari-ai
⭐ 519 Python 👤 relari-ai Organization 🕐 Aktualisiert 2026-08-10 📅 Erstellt 2023-12-08

Häufig gestellte Fragen

1

Welches ist das beliebteste #evaluation-framework-Repository auf GitHub?

Das am höchsten eingestufte Open-Source-#evaluation-framework-Projekt auf GitHub ist promptfoo/promptfoo mit 27,516 Sternen. Testen Sie Ihre Prompts, Agenten und RAGs. Red Teaming/Pentesting/Schwachstellenanalyse für KI. Vergleichen Sie die Leistung von GPT, Claude, Gemini, DeepSeek und mehr. Einfache deklarative Konfigurationen mit Befehlszeilen- und CI/CD-Integration. Wird von OpenAI und Anthropic verwendet.

2

Welche Programmiersprachen werden in #evaluation-framework-Repositories am häufigsten verwendet?

Unter den am höchsten eingestuften #evaluation-framework-Projekten auf GitHub sind Python, TypeScript, Jupyter Notebook die am häufigsten verwendeten Programmiersprachen.

3

Wie wird das Ranking der #evaluation-framework-Repositories berechnet?

Wir verfolgen 13 aktive Open-Source-Repositories, die mit #evaluation-framework getaggt sind (500+ Sterne), mit insgesamt 100,331 Sternen und durchschnittlich 7,717 Sternen pro Repository. Die Rankings werden täglich über die GitHub-API aktualisiert.