eval-genius vs. LLM Eval Harness
eval-genius ist auf keinem Marktplatz mehr gelistet, den wir lesen: Das sind die letzten bekannten Daten, Stand 2026‑11‑03.
eval-genius ist ein Plugin-Paket für KI-Coding-Tools von Alex Greenshpun. Kein Marktplatz, den wir lesen, listet es noch. LLM Eval Harness ist ein MCP-Server von razilzul. Marktplätze, die wir lesen und die es listen: 1 (Official MCP Registry). Stand unseres Marktplatz-Durchlaufs vom 2026-11-09. Ein Plugin dieses Paares ist auf keinem Marktplatz mehr gelistet, den wir lesen, deshalb bitten wir Suchmaschinen, die Seite nicht zu indexieren.
Wo jedes veröffentlicht ist
| Marktplatz |  LLM Eval Harness | |
|---|---|---|
| Community-Marktplatz alexgreensh/eval-genius | Entfernt am 2026-11-03 Version: 0.3.1 Forks (GitHub): 4 Sterne (GitHub): 24 Nicht markiert · Erstmals gesehen |
Nicht gelistet |
| Official MCP Registry | Nicht gelistet | Gelistet Version: 1.0.0 Forks (GitHub): 0 Sterne (GitHub): 0 Nicht markiert · Erstmals gesehen |
Jede Zahl stammt vom jeweiligen Marktplatz und wird nie über Marktplätze hinweg addiert. Ein Marktplatz ohne veröffentlichte Zahl zeigt keine: keine Zahl ist nicht null.
Die Fakten nebeneinander
| Fakt | eval-geniusnicht mehr gelistet · | LLM Eval Harness |
|---|---|---|
| Marktplätze, die es listen (unterschiedlich) | 0 | 1 |
| Sterne (GitHub) (unterschiedlich) | 24 | 0 |
| Forks (GitHub) (unterschiedlich) | 4 | 0 |
| Letztes Release | Nicht veröffentlicht | Nicht veröffentlicht |
| Wo es läuft (unterschiedlich) | Wird als Plugin-Paket installiert | Auf Ihrem Rechner (ghcr.io/razilzul/llm-eval-harness:1.0.0) |
| Transport (unterschiedlich) | Nicht angegeben | stdio |
| Deklarierte Tools | Nicht veröffentlicht | Nicht veröffentlicht |
| Abgefragte Umgebungsvariablen (unterschiedlich) | Nicht veröffentlicht | 2, davon Secrets: 2 |
| Teile des Bundles (unterschiedlich) | 1 | Kein Bundle |
| Lizenz (unterschiedlich) | Apache-2.0 | Nicht angegeben |
| Repository (unterschiedlich) | github.com/alexgreensh/eval-genius | github.com/razilzul/llm-eval-harness |
| Änderungen in den letzten 7 Tagen (unterschiedlich) | 2 | 0 |
| Erstmals gesehen (unterschiedlich) | 2026-10-15 | 2026-10-18 |
Zeilen, in denen sich die beiden unterscheiden, sind hinterlegt und fett. Kein Wert ist als besser oder schlechter markiert: Ein Plugin, das kein Marktplatz mehr listet, erscheint mit seinen letzten bekannten Daten, und die stellen wir nicht gegen aktuelle Zahlen.
Was Sie statt „eval-genius“ nutzen können
Noch gelistete Plugins, deren Namen, Beschreibungen, Tools und Skills ihm in der Bedeutung am nächsten sind. Vergleichbar, nicht empfohlen.
-
Skills for adding DeepEval evaluations, tracing, datasets, Confident AI reports, and iterative improvement loops to AI applications.
-
Configures and runs LLM evaluation using Promptfoo framework. Use when setting up prompt testing, creating evaluation configs (promptfooconfig.yaml), writing Python custom…
-
Set up evaluation of an OpenAI Java SDK tool-calling agent using Dokimos
-
Set up evaluation of AI agents with tool call validation, correctness checks, and task completion using Dokimos
-
Pay-per-call AI evaluation MCP server. Score LLM outputs against benchmark rubrics via Workers AI.
-
Connect providers and targets, write eval suites, and set up or run red team scans with promptfoo
Was jeder über sich sagt
eval-genius
Decide, design, gate, judge, and defend evaluations for LLM, agent, and retrieval systems. Not ordinary unit tests.
LLM Eval Harness
Run a golden set and gate LLM model swaps on accuracy, with latency and cost per request.
So startet man jeden
eval-genius
Keine Daten für einen automatischen Befehl: Die Angaben der Marktplätze sagen nicht eindeutig, wie man es verbindet.
LLM Eval Harness Als lokaler MCP-Server: Docker-Image
claude mcp add --env "ANTHROPIC_API_KEY=<YOUR_ANTHROPIC_API_KEY>" --env "GEMINI_API_KEY=<YOUR_GEMINI_API_KEY>" --transport stdio llm-eval-harness -- docker run -i --rm -e ANTHROPIC_API_KEY -e GEMINI_API_KEY ghcr.io/razilzul/llm-eval-harness:1.0.0Erfordert: ANTHROPIC_API_KEY (geheim), GEMINI_API_KEY (geheim)
Befehle nur aus den Angaben der Marktplätze gebaut; den vollständigen Satz für jeden Client gibt es auf jeder Karte.
Welche Tools jedes deklariert
Die Marktplätze keines der beiden veröffentlichen eine Tool-Liste, es gibt also nichts zu vergleichen.
Welche Einstellungen jedes verlangt
Die Marktplätze von eval-genius veröffentlichen keine verlangten Einstellungen, daher vergleichen wir keine Einstellungen.
Was es kann: eval-genius · Was es kann: LLM Eval Harness · Zwei andere Plugins vergleichen
Daten von Community GitHub marketplaces. Daten von Official MCP Registry. Die Zahlen stammen aus unseren eigenen regelmäßigen Durchläufen über die Marktplätze, zuletzt abgerufen am . Kontaktdaten von Plugin-Herausgebern veröffentlichen wir nicht.