Eval Skills vs. Eval Engine API
Eval Skills ya no aparece en ningún marketplace que leemos: estos son sus últimos datos conocidos, a fecha de 2026‑10‑27.
Eval Skills es un paquete de plugins para herramientas de programación con IA publicado por Confident AI. Ningún marketplace que leemos lo publica ya. Eval Engine API es un servidor MCP publicado por invertedhoologan. Marketplaces que leemos y que lo publican: 1 (Official MCP Registry). Según nuestra pasada por los marketplaces del 2026-10-29. Un plugin de este par ya no aparece en ningún marketplace que leemos, así que pedimos a los buscadores que no indexen la página.
Dónde se publica cada uno
| Marketplace | ||
|---|---|---|
| Marketplace de la comunidad confident-ai/eval-skills | Retirado el 2026-10-27 Versión: 1.1.0 Forks (GitHub): 1 Estrellas (GitHub): 11 Sin marca · Visto por primera vez |
No figura |
| Official MCP Registry | No figura | Publicado Versión: 0.1.0 Sin cifra publicada Sin marca · Visto por primera vez |
Cada cifra es del propio marketplace y nunca se suma entre marketplaces. Un marketplace que no publica cifras no muestra ninguna: sin número no es cero.
Los datos lado a lado
| Dato | Eval Skillsya no está publicado · | Eval Engine API |
|---|---|---|
| Marketplaces que lo listan (distinto) | 0 | 1 |
| Estrellas (GitHub) (distinto) | 11 | Sin cifra en GitHub |
| Forks (GitHub) (distinto) | 1 | Sin cifra en GitHub |
| Última versión | No publicado | No publicado |
| Dónde se ejecuta (distinto) | Se instala como paquete de plugins | Servidor remoto (eval.zuluworksai.com/mcp) |
| Transporte (distinto) | Sin indicar | Streamable HTTP |
| Herramientas que declara | No publicado | No publicado |
| Variables de entorno que pide | No publicado | No publicado |
| Partes del paquete (distinto) | 10 | No es un paquete |
| Licencia (distinto) | Apache-2.0 | Sin indicar |
| Repositorio (distinto) | github.com/confident-ai/eval-skills | Sin indicar |
| Cambios en los últimos 7 días (distinto) | 2 | 0 |
| Visto por primera vez (distinto) | 2026-10-15 | 2026-10-11 |
| Endpoint en la última comprobación (distinto) | sin endpoint remoto que comprobemos | No responde desde 2026-10-16 |
Las líneas en las que difieren tienen fondo tintado y valores en negrita. Ningún valor se marca como mejor o peor: un plugin que ya no publica ningún marketplace se muestra con sus últimos datos conocidos, que no comparamos con cifras actuales.
Qué usar en lugar de «Eval Skills»
Plugins aún publicados cuyos nombres, descripciones, herramientas y skills son los más cercanos en significado. Comparables, no recomendados.
-
Evaluate Codex skills and plugins from chat with a beginner-friendly start command, local-first reports, token budget explanations, and guided benchmarking.
-
Skills for adding DeepEval evaluations, tracing, datasets, Confident AI reports, and iterative improvement loops to AI applications.
-
Scaffolding, running, documenting, and publishing AI evaluations. Ships skills and commands for setting up eval workspaces, creating custom evals (or adapting existing…
-
Decide, design, gate, judge, and defend evaluations for LLM, agent, and retrieval systems. Not ordinary unit tests.
-
AI agent evaluation sandbox for Claude Code. Holdout scenario testing with Doer/Judge/Adversary/Observer roles, probabilistic satisfaction scoring, and append-only JSONL audit…
-
Compare AI coding skills head-to-head to find which one works best for your task. Run controlled A/B tests: same model (Claude Code), same tasks, different skills. Each candidate…
Qué dice cada uno que hace
Eval Skills
Skills that take a coding agent from your first trace to evals you can trust: error analysis, datasets, validated graders, eval runs, and production monitoring.
Eval Engine API
Pay-per-call AI evaluation MCP server. Score LLM outputs against benchmark rubrics via Workers AI.
Cómo ejecutar cada uno
Eval Skills
No hay datos para un comando automático: lo que declaran sus marketplaces no dice de forma inequívoca cómo conectarlo.
Eval Engine API Como servidor MCP remoto
claude mcp add --transport http eval-engine-mcp https://eval.zuluworksai.com/mcpComandos construidos solo con lo que declaran los marketplaces; el conjunto completo para cada cliente está en la ficha de cada uno.
Solo Eval Engine API tiene un endpoint remoto que comprobamos. Cómo comprobamos los endpoints
Herramientas que declara cada uno
Los marketplaces de ninguno de los dos publican una lista de herramientas, así que no hay nada que comparar.
Ajustes que pide cada uno
Los marketplaces de ninguno de los dos publican los ajustes que pide.
Qué puede hacer: Eval Skills · Qué puede hacer: Eval Engine API · Comparar otros dos plugins
Datos de Community GitHub marketplaces. Datos de Official MCP Registry. Las cifras proceden de nuestros propios recorridos periódicos por los marketplaces, leída por última vez el . No publicamos datos de contacto de los editores de plugins.