Eval Runner vs. com.clauxel.evalscopebench/evalscopebench-mcp
Eval Runner ya no aparece en ningún marketplace que leemos: estos son sus últimos datos conocidos, a fecha de 2026‑11‑05.
Eval Runner es un paquete de plugins para herramientas de programación con IA publicado por danielrosehill. Ningún marketplace que leemos lo publica ya. com.clauxel.evalscopebench/evalscopebench-mcp es un servidor MCP publicado por evalscopebench.clauxel.com. Marketplaces que leemos y que lo publican: 1 (Official MCP Registry). Según nuestra pasada por los marketplaces del 2026-11-08. Un plugin de este par ya no aparece en ningún marketplace que leemos, así que pedimos a los buscadores que no indexen la página.
Dónde se publica cada uno
| Marketplace |  com.clauxel.evalscopebench/evalscopebench-mcp | |
|---|---|---|
| Marketplace de la comunidad danielrosehill/claude-code-plugins | Retirado el 2026-11-05 Versión: 0.1.0 Forks (GitHub): 0 Estrellas (GitHub): 4 Sin marca · Visto por primera vez |
No figura |
| Official MCP Registry | No figura | Publicado Versión: 1.0.0 Forks (GitHub): 0 Estrellas (GitHub): 0 Sin marca · Visto por primera vez |
Cada cifra es del propio marketplace y nunca se suma entre marketplaces. Un marketplace que no publica cifras no muestra ninguna: sin número no es cero.
Los datos lado a lado
| Dato | Eval Runnerya no está publicado · | com.clauxel.evalscopebench/evalscopebench-mcp |
|---|---|---|
| Marketplaces que lo listan (distinto) | 0 | 1 |
| Estrellas (GitHub) (distinto) | 4 | 0 |
| Forks (GitHub) | 0 | 0 |
| Última versión | No publicado | No publicado |
| Dónde se ejecuta (distinto) | Se instala como paquete de plugins | Servidor remoto (evalscopebench.clauxel.com/mcp) |
| Transporte (distinto) | Sin indicar | Streamable HTTP |
| Herramientas que declara | No publicado | No publicado |
| Variables de entorno que pide | No publicado | No publicado |
| Partes del paquete (distinto) | 14 | No es un paquete |
| Licencia (distinto) | MIT | Sin indicar |
| Repositorio (distinto) | github.com/danielrosehill/claude-eval-runner-plugin | github.com/clauxel/evalscope-benchmark-mcp-mcp |
| Cambios en los últimos 7 días (distinto) | 2 | 0 |
| Visto por primera vez (distinto) | 2026-10-15 | 2026-10-11 |
| Endpoint en la última comprobación (distinto) | sin endpoint remoto que comprobemos | Sin respuesta HTTP en la última comprobación (hace 11 h) |
Las líneas en las que difieren tienen fondo tintado y valores en negrita. Ningún valor se marca como mejor o peor: un plugin que ya no publica ningún marketplace se muestra con sus últimos datos conocidos, que no comparamos con cifras actuales.
Qué usar en lugar de «Eval Runner»
Plugins aún publicados cuyos nombres, descripciones, herramientas y skills son los más cercanos en significado. Comparables, no recomendados.
-
Skills for adding DeepEval evaluations, tracing, datasets, Confident AI reports, and iterative improvement loops to AI applications.
-
Agent skills for observing and evaluating LLM applications with LangSmith
-
AI agent evaluation sandbox for Claude Code. Holdout scenario testing with Doer/Judge/Adversary/Observer roles, probabilistic satisfaction scoring, and append-only JSONL audit…
-
Set up evaluation of an OpenAI Java SDK tool-calling agent using Dokimos
-
agent-evals-and-observability
Design, run, review, or release framework- and vendor-neutral evaluations and observability for AI agents. Use when defining agent evals, datasets, graders, trajectory review…
-
Configures and runs LLM evaluation using Promptfoo framework. Use when setting up prompt testing, creating evaluation configs (promptfooconfig.yaml), writing Python custom…
Qué dice cada uno que hace
Eval Runner
Scaffolding, running, documenting, and publishing AI evaluations. Ships skills and commands for setting up eval workspaces, creating custom evals (or adapting existing frameworks/benchmarks), running them, and publishing evals or datasets. Bundles a curated ground-truth list of open-source eval tools and benchmarks as a reference data source.
com.clauxel.evalscopebench/evalscopebench-mcp
A paid remote MCP for AI SDK benchmark dashboard, built to return verdicts, receipts, usage logs, an
Cómo ejecutar cada uno
Eval Runner
No hay datos para un comando automático: lo que declaran sus marketplaces no dice de forma inequívoca cómo conectarlo.
com.clauxel.evalscopebench/evalscopebench-mcp Como servidor MCP remoto
claude mcp add --transport http evalscopebench-mcp https://evalscopebench.clauxel.com/mcpComandos construidos solo con lo que declaran los marketplaces; el conjunto completo para cada cliente está en la ficha de cada uno.
Solo com.clauxel.evalscopebench/evalscopebench-mcp tiene un endpoint remoto que comprobamos. Cómo comprobamos los endpoints
Herramientas que declara cada uno
Los marketplaces de ninguno de los dos publican una lista de herramientas, así que no hay nada que comparar.
Ajustes que pide cada uno
Los marketplaces de ninguno de los dos publican los ajustes que pide.
Qué puede hacer: Eval Runner · Qué puede hacer: com.clauxel.evalscopebench/evalscopebench-mcp · Comparar otros dos plugins
Datos de Community GitHub marketplaces. Datos de Official MCP Registry. Las cifras proceden de nuestros propios recorridos periódicos por los marketplaces, leída por última vez el . No publicamos datos de contacto de los editores de plugins.