promptfoo-evaluation vs. Opik
promptfoo-evaluation ist ein Plugin-Paket für KI-Coding-Tools von daymade. Marktplätze, die wir lesen und die es listen: 1 (Community GitHub marketplaces). Opik ist ein MCP-Server von comet-ml. Marktplätze, die wir lesen und die es listen: 2 (Official MCP Registry, Docker MCP Catalog). Stand unseres Marktplatz-Durchlaufs vom 2026-10-23. Dieses Paar hat ein Leser gewählt, nicht unsere Vergleichsregel, deshalb bitten wir Suchmaschinen, die Seite nicht zu indexieren.
Wo jedes veröffentlicht ist
| Marktplatz |  promptfoo-evaluation |  Opik |
|---|---|---|
| Community-Marktplatz daymade/claude-code-skills | Gelistet Version: 1.1.0 Forks (GitHub): 229 Sterne (GitHub): 1 487 Nicht markiert · Erstmals gesehen |
Nicht gelistet |
| Official MCP Registry | Nicht gelistet | Gelistet Version: 3.0.6 Downloads pro Monat (PyPI): 3 591 Downloads pro Woche (PyPI): 1 906 Forks (GitHub): 37 Sterne (GitHub): 225 Nicht markiert · Erstmals gesehen |
| Docker MCP Catalog | Nicht gelistet | Gelistet Version: sha256:0e0d7d33d5eb Forks (GitHub): 37 Pulls (Docker Hub): 17 135 Sterne (Docker Hub): 1 Sterne (GitHub): 225 Nicht markiert · Erstmals gesehen |
Jede Zahl stammt vom jeweiligen Marktplatz und wird nie über Marktplätze hinweg addiert. Ein Marktplatz ohne veröffentlichte Zahl zeigt keine: keine Zahl ist nicht null.
Die Fakten nebeneinander
| Fakt | promptfoo-evaluation | Opik |
|---|---|---|
| Marktplätze, die es listen (unterschiedlich) | 1 (schlechter) | 2 (besser) |
| Sterne (GitHub) (unterschiedlich) | 1 487 (besser) | 225 (schlechter) |
| Pulls (Docker Hub) (unterschiedlich) | Keine Zahl auf Docker Hub | 17 135 |
| Forks (GitHub) (unterschiedlich) | 229 (besser) | 37 (schlechter) |
| Letztes Release (unterschiedlich) | Nicht veröffentlicht | 2026-10-19 |
| Wo es läuft (unterschiedlich) | Wird als Plugin-Paket installiert | Entfernter Server oder Ihr Rechner |
| Transport (unterschiedlich) | Nicht angegeben | Streamable HTTP, stdio |
| Deklarierte Tools (unterschiedlich) | Nicht veröffentlicht | 13 |
| Abgefragte Umgebungsvariablen (unterschiedlich) | Nicht veröffentlicht | 4, davon Secrets: 1 |
| Lizenz (unterschiedlich) | Nicht angegeben | Apache-2.0 |
| Repository (unterschiedlich) | github.com/daymade/claude-code-skills | github.com/comet-ml/opik-mcp |
| Änderungen in den letzten 7 Tagen (unterschiedlich) | 0 | 1 |
| Erstmals gesehen (unterschiedlich) | 2026-10-15 | 2026-10-11 |
| Endpoint bei der letzten Prüfung (unterschiedlich) | kein Remote-Endpoint, den wir prüfen | Antwortet nicht seit 2026-10-21 |
Zeilen, in denen sich die beiden unterscheiden, haben einen getönten Hintergrund und fette Werte. Wo die Daten selbst sagen, welcher Wert besser ist (mehr Marktplätze, eine größere Zahl desselben Marktplatzes, ein neueres Release, eine Verified-Markierung auf einem Marktplatz, der beide listet), ist der bessere zusätzlich grün mit ▲ und der schlechtere rot mit ▼ markiert. Wo es läuft, der Transport, die Tools, die Einstellungen, Hooks, die Teile des Bundles, die Lizenz und die Änderungen der Woche sind nur als Unterschied markiert: mehr oder weniger ist an sich nicht besser.
Was jeder über sich sagt
promptfoo-evaluation
Configures and runs LLM evaluation using Promptfoo framework. Use when setting up prompt testing, creating evaluation configs (promptfooconfig.yaml), writing Python custom assertions, implementing llm-rubric for LLM-as-judge, or managing few-shot examples in prompts. Triggers on keywords like promptfoo, eval, LLM evaluation, prompt testing, or model comparison
Opik
Read and score Opik traces, experiments, datasets and prompts from your AI assistant.
So startet man jeden
promptfoo-evaluation Als Claude-Code-Plugin
/plugin marketplace add daymade/claude-code-skills
/plugin install promptfoo-evaluation@daymade-skillsOpik Als entfernter MCP-Server
claude mcp add --transport http opik-mcp https://www.comet.com/opik/api/v1/mcpErfordert: OPIK_API_KEY (geheim)
Befehle nur aus den Angaben der Marktplätze gebaut; den vollständigen Satz für jeden Client gibt es auf jeder Karte.
Nur Opik hat einen Remote-Endpoint, den wir prüfen. Wie wir Endpoints prüfen
Welche Tools jedes deklariert
Die Marktplätze von promptfoo-evaluation veröffentlichen keine Tool-Liste, daher vergleichen wir keine Tools.
Welche Einstellungen jedes verlangt
Die Marktplätze von promptfoo-evaluation veröffentlichen keine verlangten Einstellungen, daher vergleichen wir keine Einstellungen.
Was es kann: promptfoo-evaluation · Was es kann: Opik · Zwei andere Plugins vergleichen
Daten von Community GitHub marketplaces. Daten von Official MCP Registry. Daten von Docker MCP Catalog. Die Zahlen stammen aus unseren eigenen regelmäßigen Durchläufen über die Marktplätze, zuletzt abgerufen am . Kontaktdaten von Plugin-Herausgebern veröffentlichen wir nicht.