Git Stars Git Stars

#evaluation-framework リポジトリ

#evaluation-frameworkのタグが付いた、GitHub上の13件のアクティブなオープンソースリポジトリをご覧ください。合計スター数は100,331個で、プロジェクトあたりの平均は7,717個です。このトピックをリードしているのは、27,516個のスターを獲得しているpromptfoo/promptfooです。

13
リポジトリ総数
100,331
合計スター数
7,717
リポジトリあたりの平均スター数
プログラミング言語: Python TypeScript Jupyter Notebook

リポジトリ合計13件

1
promptfoo/promptfoo

プロンプト、エージェント、RAGをテストしましょう。AI向けのレッドチーミング/ペネトレーションテスト/脆弱性スキャンを実行します。GPT、Claude、Gemini、DeepSeekなどのパフォーマンスを比較。コマンドラインおよびCI/CD統合を備えたシンプルな宣言型構成。OpenAIやAnthropicでも採用されています。

promptfoo
⭐ 27,516 TypeScript 👤 promptfoo Organization 🕐 更新日時 2026-11-21 📅 作成日 2023-04-28
2
openai/evals

Evalsは、LLMおよびLLMシステムを評価するためのフレームワークであり、ベンチマークのオープンソースレジストリです。

openai
⭐ 19,776 Python 👤 openai Organization 🕐 更新日時 2026-04-14 📅 作成日 2023-01-23
3
confident-ai/deepeval

LLM評価フレームワーク

confident-ai
⭐ 19,585 Python 👤 confident-ai Organization 🕐 更新日時 2026-11-19 📅 作成日 2023-08-10
4
EleutherAI/lm-evaluation-harness

言語モデルの少数ショット評価のためのフレームワーク。

EleutherAI
⭐ 14,515 Python 👤 EleutherAI Organization 🕐 更新日時 2026-11-04 📅 作成日 2020-08-28
5
Kiln-AI/Kiln

AIシステムの構築、評価、および最適化。評価(evals)、RAG、エージェント、ファインチューニング、合成データ生成、データセット管理、MCPなどが含まれます。

Kiln-AI
⭐ 5,286 Python 👤 Kiln-AI Organization 🕐 更新日時 2026-11-21 📅 作成日 2024-07-23
6
Nicolepcx/ai-agents-the-definitive-guide

AIエージェント向けリポジトリ:決定版ガイド

Nicolepcx
⭐ 3,020 Jupyter Notebook 👤 Nicolepcx User 🕐 更新日時 2026-08-01 📅 作成日 2025-08-22
7
huggingface/lighteval

Lightevalは、複数のバックエンドにわたるLLMの評価のためのオールインワンツールキットです

huggingface
⭐ 2,587 Python 👤 huggingface Organization 🕐 更新日時 2026-11-18 📅 作成日 2024-01-26
8
future-agi/future-agi

オープンソースのエンドツーエンドプラットフォームで、LLMおよびAIエージェントアプリケーションの評価、観察、改善を行います。Tracing · Evals · Simulations · Datasets · Gateway · Guardrails。セルフホスト可能。Apache 2.0。

future-agi
⭐ 2,284 Python 👤 future-agi Organization 🕐 更新日時 2026-11-21 📅 作成日 2026-04-23
9
Cloud-CV/EvalAI

:cloud: :rocket: :bar_chart: :chart_with_upwards_trend: AIの最先端技術の評価

Cloud-CV
⭐ 2,049 Python 👤 Cloud-CV Organization 🕐 更新日時 2026-11-14 📅 作成日 2016-10-21
10
tsale/EDR-Telemetry

このプロジェクトは、さまざまなEDR製品のテレメトリを比較および評価することを目的としています。

tsale
⭐ 2,004 Python 👤 tsale User 🕐 更新日時 2026-11-12 📅 作成日 2023-04-01
11
ServiceNow/AgentLab

AgentLab:ウェブエージェントの開発・テスト・ベンチマークを、さまざまなタスクで行うためのオープンソースフレームワークで、スケーラビリティと再現性を実現するよう設計されています。

ServiceNow
⭐ 668 Python 👤 ServiceNow Organization 🕐 更新日時 2026-10-06 📅 作成日 2024-05-21
12
lartpang/SAMs-CDConcepts-Eval

Segment Anythingモデルの次世代にインスピレーションを与える:SAMとSAM 2を多様なプロンプトで包括的に評価し、さまざまなシーンにおけるコンテキスト依存の概念へと導く

lartpang
⭐ 575 Python 👤 lartpang User 🕐 更新日時 2026-08-30 📅 作成日 2024-11-26
13
relari-ai/continuous-eval

LLM駆動アプリケーションのためのデータ駆動型評価

relari-ai
⭐ 519 Python 👤 relari-ai Organization 🕐 更新日時 2026-08-10 📅 作成日 2023-12-08

よくある質問

1

GitHubで最も人気のある#evaluation-frameworkリポジトリは何ですか?

GitHubで最も上位にランクインしているオープンソースの#evaluation-frameworkプロジェクトは、27,516個のスターを獲得しているpromptfoo/promptfooです。プロンプト、エージェント、RAGをテストしましょう。AI向けのレッドチーミング/ペネトレーションテスト/脆弱性スキャンを実行します。GPT、Claude、Gemini、DeepSeekなどのパフォーマンスを比較。コマンドラインおよびCI/CD統合を備えたシンプルな宣言型構成。OpenAIやAnthropicでも採用されています。

2

#evaluation-frameworkリポジトリで最もよく使われているプログラミング言語は何ですか?

GitHubで上位にランクインしている#evaluation-frameworkプロジェクトでは、Python, TypeScript, Jupyter Notebookが最も一般的なプログラミング言語です。

3

#evaluation-frameworkリポジトリのランキングはどのように算出されていますか?

#evaluation-frameworkのタグが付いた13件のアクティブなオープンソースリポジトリ(スター500個以上)を追跡しています。合計スター数は100,331個で、リポジトリあたりの平均は7,717個です。ランキングはGitHub APIからのデータに基づいて毎日更新されます。