Ext Ops Panel
Abrir o painel
Comparação

eval-genius vs. Eval Runner

eval-genius é um pacote de plugins para ferramentas de programação com IA publicado por Alex Greenshpun. Marketplaces que lemos e que o listam: 1 (Community GitHub marketplaces). Eval Runner é um pacote de plugins para ferramentas de programação com IA publicado por danielrosehill. Marketplaces que lemos e que o listam: 1 (Community GitHub marketplaces). Conforme nossa passagem pelos marketplaces em 2026-10-17. Este par foi escolhido por um leitor, não pela nossa regra de comparação, por isso pedimos aos buscadores que não indexem a página.

Onde cada um é publicado

Onde cada um é publicado
Marketplaceeval-geniusEval Runner
Marketplace da comunidade alexgreensh/eval-genius Listado
Versão: 0.3.1
Forks (GitHub): 4
Estrelas (GitHub): 19
Sem marcação · Visto pela primeira vez
Não listado
Marketplace da comunidade danielrosehill/claude-code-plugins Não listado Listado
Versão: 0.1.0
Forks (GitHub): 0
Estrelas (GitHub): 4
Sem marcação · Visto pela primeira vez

Cada número é do próprio marketplace e nunca é somado entre marketplaces. Um marketplace que não publica números não mostra nenhum: sem número não é zero.

Os fatos lado a lado

eval-genius vs. Eval Runner
Fatoeval-geniusEval Runner
Marketplaces que o listam11
Estrelas (GitHub) (diferente)19 (melhor)4 (pior)
Forks (GitHub) (diferente)4 (melhor)0 (pior)
Último releaseNão publicadoNão publicado
Onde rodaInstala-se como pacote de pluginsInstala-se como pacote de plugins
TransporteNão informadoNão informado
Ferramentas que declaraNão publicadoNão publicado
Variáveis de ambiente que pedeNão publicadoNão publicado
Partes do pacote (diferente)114
Licença (diferente)Apache-2.0MIT
Repositório (diferente)github.com/alexgreensh/eval-geniusgithub.com/danielrosehill/claude-eval-runner-plugin
Mudanças nos últimos 7 dias22
Visto pela primeira vez2026-10-152026-10-15

As linhas em que os dois diferem têm fundo destacado e valores em negrito. Onde os próprios dados dizem qual valor é melhor (mais marketplaces, um número maior do mesmo marketplace, um release mais recente, uma marca verified em um marketplace que lista os dois), o melhor também é marcado em verde com ▲ e o pior em vermelho com ▼. Onde roda, o transporte, as ferramentas, as configurações, os hooks, as partes do pacote, a licença e as mudanças da semana são marcados apenas como diferentes: mais ou menos não é melhor por si só.

O que cada um diz que faz

eval-genius

Nas próprias palavras, em Community GitHub marketplaces:

Decide, design, gate, judge, and defend evaluations for LLM, agent, and retrieval systems. Not ordinary unit tests.

Eval Runner

Nas próprias palavras, em Community GitHub marketplaces:

Scaffolding, running, documenting, and publishing AI evaluations. Ships skills and commands for setting up eval workspaces, creating custom evals (or adapting existing frameworks/benchmarks), running them, and publishing evals or datasets. Bundles a curated ground-truth list of open-source eval tools and benchmarks as a reference data source.

Como executar cada um

eval-genius Como plugin do Claude Code

Claude Code
/plugin marketplace add alexgreensh/eval-genius
/plugin install eval-genius@eval-genius

Eval Runner Como plugin do Claude Code

Claude Code
/plugin marketplace add danielrosehill/claude-code-plugins
/plugin install eval-runner@danielrosehill

Comandos construídos apenas com o que os marketplaces declaram; o conjunto completo para cada cliente está no cartão de cada um.

Ferramentas que cada um declara

Os marketplaces de nenhum dos dois publicam uma lista de ferramentas, então não há o que comparar.

Configurações que cada um pede

Os marketplaces de nenhum dos dois publicam as configurações que ele pede.

O que pode fazer: eval-genius · O que pode fazer: Eval Runner · Comparar outros dois plugins

Dados de Community GitHub marketplaces. Os números vêm das nossas próprias passagens regulares pelos marketplaces, última leitura em . Não publicamos dados de contato dos editores de plugins.

De onde vêm os dados: como o catálogo é montado