evals vs. Eval Engine API
evals ist ein Plugin-Paket für KI-Coding-Tools von Melodic Software. Marktplätze, die wir lesen und die es listen: 1 (Community GitHub marketplaces). Eval Engine API ist ein MCP-Server von invertedhoologan. Marktplätze, die wir lesen und die es listen: 1 (Official MCP Registry). Stand unseres Marktplatz-Durchlaufs vom 2026-10-29. Dieses Paar hat ein Leser gewählt, nicht unsere Vergleichsregel, deshalb bitten wir Suchmaschinen, die Seite nicht zu indexieren.
Wo jedes veröffentlicht ist
| Marktplatz | ||
|---|---|---|
| Community-Marktplatz melodic-software/claude-code-plugins | Gelistet Version: 0.10.12 Forks (GitHub): 5 Sterne (GitHub): 28 Nicht markiert · Erstmals gesehen |
Nicht gelistet |
| Official MCP Registry | Nicht gelistet | Gelistet Version: 0.1.0 Keine Zahl veröffentlicht Nicht markiert · Erstmals gesehen |
Jede Zahl stammt vom jeweiligen Marktplatz und wird nie über Marktplätze hinweg addiert. Ein Marktplatz ohne veröffentlichte Zahl zeigt keine: keine Zahl ist nicht null.
Die Fakten nebeneinander
| Fakt | evals | Eval Engine API |
|---|---|---|
| Marktplätze, die es listen | 1 | 1 |
| Sterne (GitHub) (unterschiedlich) | 28 | Keine Zahl auf GitHub |
| Forks (GitHub) (unterschiedlich) | 5 | Keine Zahl auf GitHub |
| Letztes Release (unterschiedlich) | 2026-10-28 | Nicht veröffentlicht |
| Wo es läuft (unterschiedlich) | Wird als Plugin-Paket installiert | Entfernter Server (eval.zuluworksai.com/mcp) |
| Transport (unterschiedlich) | Nicht angegeben | Streamable HTTP |
| Deklarierte Tools | Nicht veröffentlicht | Nicht veröffentlicht |
| Abgefragte Umgebungsvariablen | Nicht veröffentlicht | Nicht veröffentlicht |
| Teile des Bundles (unterschiedlich) | 4 | Kein Bundle |
| Lizenz (unterschiedlich) | MIT | Nicht angegeben |
| Repository (unterschiedlich) | github.com/melodic-software/claude-code-plugins | Nicht angegeben |
| Änderungen in den letzten 7 Tagen (unterschiedlich) | 3 | 0 |
| Erstmals gesehen (unterschiedlich) | 2026-10-28 | 2026-10-11 |
| Endpoint bei der letzten Prüfung (unterschiedlich) | kein Remote-Endpoint, den wir prüfen | Antwortet nicht seit 2026-10-16 |
Zeilen, in denen sich die beiden unterscheiden, haben einen getönten Hintergrund und fette Werte. Wo die Daten selbst sagen, welcher Wert besser ist (mehr Marktplätze, eine größere Zahl desselben Marktplatzes, ein neueres Release, eine Verified-Markierung auf einem Marktplatz, der beide listet), ist der bessere zusätzlich grün mit ▲ und der schlechtere rot mit ▼ markiert. Wo es läuft, der Transport, die Tools, die Einstellungen, Hooks, die Teile des Bundles, die Lizenz und die Änderungen der Woche sind nur als Unterschied markiert: mehr oder weniger ist an sich nicht besser.
Was jeder über sich sagt
evals
LLM evaluation methodology and eval-suite design, based on Anthropic's evaluation guidance. /evals:methodology answers questions on success criteria, eval design, and grading. /evals:design interviews for measurable success criteria and scaffolds a graded eval suite for an LLM app or Claude Code skill. /evals:plugin-eval preflights the CLI and target, prices a suite before running, and reads the with-versus-without delta. /evals:validate checks case files with no model call.
Eval Engine API
Pay-per-call AI evaluation MCP server. Score LLM outputs against benchmark rubrics via Workers AI.
So startet man jeden
evals Als Claude-Code-Plugin
/plugin marketplace add melodic-software/claude-code-plugins
/plugin install evals@melodic-softwareEval Engine API Als entfernter MCP-Server
claude mcp add --transport http eval-engine-mcp https://eval.zuluworksai.com/mcpBefehle nur aus den Angaben der Marktplätze gebaut; den vollständigen Satz für jeden Client gibt es auf jeder Karte.
Nur Eval Engine API hat einen Remote-Endpoint, den wir prüfen. Wie wir Endpoints prüfen
Welche Tools jedes deklariert
Die Marktplätze keines der beiden veröffentlichen eine Tool-Liste, es gibt also nichts zu vergleichen.
Welche Einstellungen jedes verlangt
Die Marktplätze keines der beiden veröffentlichen die verlangten Einstellungen.
Was es kann: evals · Was es kann: Eval Engine API · Zwei andere Plugins vergleichen
Daten von Community GitHub marketplaces. Daten von Official MCP Registry. Die Zahlen stammen aus unseren eigenen regelmäßigen Durchläufen über die Marktplätze, zuletzt abgerufen am . Kontaktdaten von Plugin-Herausgebern veröffentlichen wir nicht.