Git Stars Git Stars

#benchmark Repositórios

193
Total de Repositórios
392,395
Total de estrelas
2,033
Média de Estrelas/Repositório

193 repositórios no total

151
facebookresearch/BenchMARL

BenchMARL é uma biblioteca para benchmarking de Multi-Agent Reinforcement Learning (MARL). BenchMARL permite comparar rapidamente diferentes algoritmos, tarefas e modelos MARL, ao mesmo tempo que se baseia sistematicamente em seus dois princípios fundamentais: reprodutibilidade e padronização.

facebookresearch
⭐ 687 Python 👤 facebookresearch Organization 🕐 Atualizado 2026-02-07 📅 Criado 2023-08-22
152
JuliaCI/BenchmarkTools.jl

Um framework de benchmarking para a linguagem Julia

JuliaCI
⭐ 685 Julia 👤 JuliaCI Organization 🕐 Atualizado 2026-11-11 📅 Criado 2016-02-23
153
ServiceNow/AgentLab

AgentLab: Um framework de código aberto para desenvolver, testar e avaliar agentes web em diversas tarefas, projetado para escalabilidade e reprodutibilidade.

ServiceNow
⭐ 668 Python 👤 ServiceNow Organization 🕐 Atualizado 2026-10-06 📅 Criado 2024-05-21
154
lukeed/uid

Uma pequena (130B a 205B) e rápida utilidade para gerar IDs aleatórios de comprimento fixo

lukeed
⭐ 668 JavaScript 👤 lukeed User 🕐 Atualizado 2024-09-27 📅 Criado 2020-03-03
155
Tencent/AICGSecEval

A.S.E (AICGSecEval) é um benchmark de avaliação de segurança de código gerado por IA em nível de repositório, desenvolvido pela equipe de segurança de código Tencent Wukong.

Tencent
⭐ 667 Python 👤 Tencent Organization 🕐 Atualizado 2026-05-25 📅 Criado 2025-07-08
156
onejune2018/Awesome-LLM-Eval

Awesome-LLM-Eval: uma lista selecionada de ferramentas, conjuntos de dados/benchmarks, demonstrações, placares, artigos, documentos e modelos, principalmente para Avaliação em LLMs. Uma lista selecionada de ferramentas, benchmarks/dados, demonstrações, placares e grandes modelos, voltada principalmente para a avaliação de LLMs fundamentais, com o objetivo de explorar os limites técnicos da IA generativa.

onejune2018
⭐ 661 👤 onejune2018 User 🕐 Atualizado 2025-11-24 📅 Criado 2023-04-26
157
benedekrozemberczki/datasets

Um repositório de conjuntos de dados bem interessantes que coletei para pesquisas em ciência de redes e aprendizado de máquina.

benedekrozemberczki
⭐ 657 👤 benedekrozemberczki User 🕐 Atualizado 2025-12-20 📅 Criado 2019-04-07
158
Westlake-AI/openmixup

CAIRI Toolbox e Benchmark para Aprendizagem de Representação Visual Supervisionada, Semi-supervisionada e Auto-supervisionada

Westlake-AI
⭐ 656 Python 👤 Westlake-AI Organization 🕐 Atualizado 2025-10-15 📅 Criado 2021-12-30
159
run-llama/ParseBench

ParseBench - Um benchmark de análise de documentos para agentes de IA

run-llama
⭐ 650 Python 👤 run-llama Organization 🕐 Atualizado 2026-11-21 📅 Criado 2026-04-10
160
Kotlin/kotlinx-benchmark

Kit de benchmarking multiplataforma Kotlin

Kotlin
⭐ 644 Kotlin 👤 Kotlin Organization 🕐 Atualizado 2026-11-17 📅 Criado 2018-12-18
161
onyx-dot-app/EnterpriseRAG-Bench

Conjunto de dados e benchmark para RAG em documentos internos da empresa.

onyx-dot-app
⭐ 639 👤 onyx-dot-app Organization 🕐 Atualizado 2026-09-03 📅 Criado 2026-02-19
162
HowieHwong/TrustLLM

[ICML 2024] TrustLLM: avaliação da confiabilidade de LLMs em termos de veracidade, segurança, equidade, robustez, privacidade e ética. Kit de ferramentas Python/CLI para modelos locais, APIs compatíveis e orquestração de agentes de IA.

HowieHwong
⭐ 635 Python 👤 HowieHwong User 🕐 Atualizado 2026-10-04 📅 Criado 2023-12-23
163
IndoNLP/indonlu

O primeiro e vasto benchmark de processamento de linguagem natural para a língua indonésia. Fornecemos várias tarefas downstream, modelos IndoBERT pré-treinados e um código inicial! (AACL-IJCNLP 2020)

IndoNLP
⭐ 635 Jupyter Notebook 👤 IndoNLP Organization 🕐 Atualizado 2024-11-16 📅 Criado 2020-09-12
164
jsdelivr/globalping

Uma rede global de sondas para executar testes de rede como ping, traceroute e resolução DNS

jsdelivr
⭐ 630 TypeScript 👤 jsdelivr Organization 🕐 Atualizado 2026-11-20 📅 Criado 2022-02-19
165
piotrmurach/rspec-benchmark

Matchers de teste de desempenho para RSpec

piotrmurach
⭐ 617 Ruby 👤 piotrmurach User 🕐 Atualizado 2024-03-16 📅 Criado 2016-01-17
166
Xtra-Computing/NIID-Bench

Benchmark de Aprendizagem Federada - Aprendizagem Federada em Silos de Dados Não-IID: Um Estudo Experimental (ICDE 2022)

Xtra-Computing
⭐ 611 Python 👤 Xtra-Computing Organization 🕐 Atualizado 2024-02-26 📅 Criado 2021-01-08
167
KLUE-benchmark/KLUE

📖 Benchmark de NLU coreano

KLUE-benchmark
⭐ 606 👤 KLUE-benchmark Organization 🕐 Atualizado 2026-06-30 📅 Criado 2020-11-16
168
FreedomIntelligence/TextClassificationBenchmark

Um Ponto de Referência para Classificação de Texto em PyTorch

FreedomIntelligence
⭐ 606 Python 👤 FreedomIntelligence Organization 🕐 Atualizado 2024-04-20 📅 Criado 2017-12-13
169
JailbreakBench/jailbreakbench

JailbreakBench: Um Benchmark de Robustez Aberto para Jailbreaking de Modelos de Linguagem [NeurIPS 2024 Datasets and Benchmarks Track]

JailbreakBench
⭐ 603 Python 👤 JailbreakBench Organization 🕐 Atualizado 2025-04-04 📅 Criado 2023-11-13
170
DavidZhangdw/Visual-Tracking-Development

Rastreamento Visual de Objetos

DavidZhangdw
⭐ 602 Python 👤 DavidZhangdw User 🕐 Atualizado 2026-06-15 📅 Criado 2019-11-17
171
Tencent-Hunyuan/CL-bench

CL-bench: Um Benchmark para Aprendizado de Contexto

Tencent-Hunyuan
⭐ 596 Python 👤 Tencent-Hunyuan Organization 🕐 Atualizado 2026-10-17 📅 Criado 2026-01-23
172
TIGER-AI-Lab/WebsiteBench

Os agentes de IA podem reconstruir sites explorando o navegador?

TIGER-AI-Lab
⭐ 595 Python 👤 TIGER-AI-Lab Organization 🕐 Atualizado 2026-11-17 📅 Criado 2026-11-04
173
lance0/xfr

Uma alternativa moderna ao iperf3 com TUI ao vivo, servidor multi-cliente e suporte a QUIC. Construído em Rust.

lance0
⭐ 591 Rust 👤 lance0 User 🕐 Atualizado 2026-11-15 📅 Criado 2026-01-31
174
Aixio-AI/aixio-layer-v2

O Aixio Layer v2 recupera camadas editáveis de designs achatados quando possível. Benchmark com 150 designs em comparação com Canva Magic Layers, Qwen-Image-Layer e GPT-6 Astra Ultra.

Aixio-AI
⭐ 589 👤 Aixio-AI Organization 🕐 Atualizado 2026-10-09 📅 Criado 2026-10-09
175
facebookresearch/meta-agents-research-environments

O Meta Agents Research Environments é uma plataforma abrangente projetada para avaliar agentes de IA em cenários dinâmicos e realistas. Ao contrário de benchmarks estáticos, esta plataforma introduz ambientes em evolução onde os agentes devem adaptar suas estratégias à medida que novas informações se tornam disponíveis, espelhando desafios do mundo real.

facebookresearch
⭐ 581 Python 👤 facebookresearch Organization 🕐 Atualizado 2026-09-30 📅 Criado 2025-09-11
176
lnx-search/rewrk

Um benchmark de framework http mais moderno que suporta benchmarks HTTP/1 e HTTP/2.

lnx-search
⭐ 570 Rust 👤 lnx-search Organization 🕐 Atualizado 2024-03-25 📅 Criado 2021-01-19
177
p-ranav/alpaca

Biblioteca de serialização escrita em C++17 - Compacte structs C++ em um array de bytes conciso sem quaisquer macros ou código repetitivo

p-ranav
⭐ 564 C++ 👤 p-ranav User 🕐 Atualizado 2026-10-30 📅 Criado 2022-08-20
178
frol/completely-unscientific-benchmarks

Comparação ingênua de desempenho de algumas linguagens de programação (JavaScript, Kotlin, Rust, Swift, Nim, Python, Go, Haskell, D, C++, Java, C#, Object Pascal, Ada, Lua, Ruby)

frol
⭐ 557 C++ 👤 frol User 🕐 Atualizado 2026-07-02 📅 Criado 2018-05-12
179
turkaysoft/glow

Software Avançado de Análise de Sistemas

turkaysoft
⭐ 555 C# 👤 turkaysoft User 🕐 Atualizado 2026-11-20 📅 Criado 2023-10-04
180
SpeechColab/Leaderboard

SpeechIO Leaderboard: uma plataforma de benchmarking grande, robusta e abrangente para o Reconhecimento Automático de Fala.

SpeechColab
⭐ 545 Python 👤 SpeechColab User 🕐 Atualizado 2025-03-29 📅 Criado 2021-02-07
181
petabridge/NBench

Framework de benchmarking e teste de desempenho para aplicações .NET :chart_with_upwards_trend:

petabridge
⭐ 541 C# 👤 petabridge Organization 🕐 Atualizado 2024-09-10 📅 Criado 2015-11-02
182
krrishnarraj/clpeak

Poder computacional máximo, largura de banda da memória e latência de CPUs, GPUs e NPUs: os mesmos testes por meio de todas as APIs que acessam um dispositivo. Linha de comando e aplicativo para Windows, macOS, Linux e Android

krrishnarraj
⭐ 540 C++ 👤 krrishnarraj User 🕐 Atualizado 2026-11-20 📅 Criado 2013-08-25
183
hank-whu/rpc-benchmark

benchmark rpc java, inspirado em https://www.techempower.com/benchmarks/

hank-whu
⭐ 531 Java 👤 hank-whu User 🕐 Atualizado 2024-04-08 📅 Criado 2017-12-23
184
glmark2/glmark2

glmark2 é um benchmark OpenGL 2.0 e ES 2.0.

glmark2
⭐ 530 C 👤 glmark2 Organization 🕐 Atualizado 2025-09-29 📅 Criado 2014-02-11
185
v8/web-tooling-benchmark

Benchmark JavaScript para cargas de trabalho comuns de desenvolvedores web

v8
⭐ 526 JavaScript 👤 v8 Organization 🕐 Atualizado 2026-06-08 📅 Criado 2017-10-18
186
GraphRAG-Bench/GraphRAG-Benchmark

O repositório oficial do GraphRAG-Bench para avaliar modelos GraphRAG. «Quando usar grafos em RAG: uma análise abrangente da geração aumentada por recuperação em grafos». (ICLR'26)

GraphRAG-Bench
⭐ 525 Python 👤 GraphRAG-Bench User 🕐 Atualizado 2026-06-07 📅 Criado 2025-06-09
187
THUDM/LongCite

LongCite: Habilitando LLMs a Gerar Citações de Granularidade Fina em QA de Contexto Longo

THUDM
⭐ 516 Python 👤 THUDM Organization 🕐 Atualizado 2024-12-31 📅 Criado 2024-08-31
188
bigcode-project/bigcodebench

[ICLR'25] BigCodeBench: Benchmarking de geração de código em direção à AGI

bigcode-project
⭐ 515 Python 👤 bigcode-project Organization 🕐 Atualizado 2026-01-03 📅 Criado 2024-04-29
189
basveeling/pcam

O benchmark de classificação de aprendizado profundo PatchCamelyon (PCam).

basveeling
⭐ 514 Python 👤 basveeling User 🕐 Atualizado 2024-01-31 📅 Criado 2018-05-28
190
alexklwong/awesome-state-of-depth-completion

Estado atual dos métodos de completamento de profundidade supervisionados e não supervisionados

alexklwong
⭐ 513 👤 alexklwong User 🕐 Atualizado 2025-03-16 📅 Criado 2020-03-10
191
Chengjun023/agent-smith

Excesso de tokens? Ligue já para Smith! Better Call Smith. Roteamento adaptativo de modelos, um elegante monitor de uso do Codex e benchmarks reproduzíveis com comprovantes.

Chengjun023
⭐ 510 Python 👤 Chengjun023 User 🕐 Atualizado 2026-10-01 📅 Criado 2026-09-30
192
agent-next/polymarket-paper-trader

Simulador de paper trading para Polymarket

agent-next
⭐ 509 Python 👤 agent-next Organization 🕐 Atualizado 2026-11-01 📅 Criado 2026-03-01
193
SeekingDream/Static-to-Dynamic-LLMEval

O repositório oficial do GitHub do paper "Recent advances in large language model benchmarks against data contamination: From static to dynamic evaluation"

SeekingDream
⭐ 500 👤 SeekingDream User 🕐 Atualizado 2026-09-28 📅 Criado 2025-02-21