Eval Runner vs. Opik
Eval Runner es un paquete de plugins para herramientas de programación con IA publicado por danielrosehill. Marketplaces que leemos y que lo publican: 1 (Community GitHub marketplaces). Opik es un servidor MCP publicado por comet-ml. Marketplaces que leemos y que lo publican: 2 (Official MCP Registry, Docker MCP Catalog). Según nuestra pasada por los marketplaces del 2026-10-18. Este par lo eligió un lector, no nuestra regla de comparación, así que pedimos a los buscadores que no indexen la página.
Dónde se publica cada uno
| Marketplace |  Eval Runner |  Opik |
|---|---|---|
| Marketplace de la comunidad danielrosehill/claude-code-plugins | Publicado Versión: 0.1.0 Forks (GitHub): 0 Estrellas (GitHub): 4 Sin marca · Visto por primera vez |
No figura |
| Official MCP Registry | No figura | Publicado Versión: 3.0.5 Descargas por mes (PyPI): 3 591 Descargas por semana (PyPI): 1 906 Forks (GitHub): 39 Estrellas (GitHub): 223 Sin marca · Visto por primera vez |
| Docker MCP Catalog | No figura | Publicado Versión: sha256:0e0d7d33d5eb Forks (GitHub): 39 Descargas (Docker Hub): 16 991 Estrellas (Docker Hub): 1 Estrellas (GitHub): 223 Sin marca · Visto por primera vez |
Cada cifra es del propio marketplace y nunca se suma entre marketplaces. Un marketplace que no publica cifras no muestra ninguna: sin número no es cero.
Los datos lado a lado
| Dato | Eval Runner | Opik |
|---|---|---|
| Marketplaces que lo listan (distinto) | 1 (peor) | 2 (mejor) |
| Estrellas (GitHub) (distinto) | 4 (peor) | 223 (mejor) |
| Descargas (Docker Hub) (distinto) | Sin cifra en Docker Hub | 16 991 |
| Forks (GitHub) (distinto) | 0 (peor) | 39 (mejor) |
| Última versión | No publicado | No publicado |
| Dónde se ejecuta (distinto) | Se instala como paquete de plugins | Servidor remoto o tu equipo |
| Transporte (distinto) | Sin indicar | Streamable HTTP, stdio |
| Herramientas que declara (distinto) | No publicado | 13 |
| Variables de entorno que pide (distinto) | No publicado | 4, de ellas secretos: 1 |
| Partes del paquete (distinto) | 14 | No es un paquete |
| Licencia (distinto) | MIT | Apache-2.0 |
| Repositorio (distinto) | github.com/danielrosehill/claude-eval-runner-plugin | github.com/comet-ml/opik-mcp |
| Cambios en los últimos 7 días (distinto) | 2 | 0 |
| Visto por primera vez (distinto) | 2026-10-15 | 2026-10-11 |
| Endpoint en la última comprobación (distinto) | sin endpoint remoto que comprobemos | Respondió hace 2 días, requiere una clave |
Las filas en las que difieren tienen fondo tintado y valores en negrita. Donde los propios datos dicen qué valor es mejor (más marketplaces, una cifra mayor del mismo marketplace, una versión más reciente, una marca verified en un marketplace que lista a ambos), el mejor se marca además en verde con ▲ y el peor en rojo con ▼. Dónde se ejecuta, el transporte, las herramientas, los ajustes, los hooks, las partes del paquete, la licencia y los cambios de la semana se marcan solo como diferentes: más o menos no es mejor en sí.
Qué dice cada uno que hace
Eval Runner
Scaffolding, running, documenting, and publishing AI evaluations. Ships skills and commands for setting up eval workspaces, creating custom evals (or adapting existing frameworks/benchmarks), running them, and publishing evals or datasets. Bundles a curated ground-truth list of open-source eval tools and benchmarks as a reference data source.
Opik
Read and score Opik traces, experiments, datasets and prompts from your AI assistant.
Cómo ejecutar cada uno
Eval Runner Como plugin de Claude Code
/plugin marketplace add danielrosehill/claude-code-plugins
/plugin install eval-runner@danielrosehillOpik Como servidor MCP remoto
claude mcp add --transport http opik-mcp https://www.comet.com/opik/api/v1/mcpRequiere: OPIK_API_KEY (secreta)
Comandos construidos solo con lo que declaran los marketplaces; el conjunto completo para cada cliente está en la ficha de cada uno.
Solo Opik tiene un endpoint remoto que comprobamos. Cómo comprobamos los endpoints
Herramientas que declara cada uno
Los marketplaces de Eval Runner no publican una lista de herramientas, así que no comparamos herramientas.
Ajustes que pide cada uno
Los marketplaces de Eval Runner no publican los ajustes que pide, así que no comparamos ajustes.
Qué puede hacer: Eval Runner · Qué puede hacer: Opik · Comparar otros dos plugins
Datos de Community GitHub marketplaces. Datos de Official MCP Registry. Datos de Docker MCP Catalog. Las cifras proceden de nuestros propios recorridos periódicos por los marketplaces, leída por última vez el . No publicamos datos de contacto de los editores de plugins.