Eval Skills ou Opik
Eval Skills n’est plus référencé sur aucune place de marché que nous lisons : ce sont ses dernières données connues, au 2026‑10‑27.
Eval Skills est un lot de plugins pour les outils de code IA publié par Confident AI. Aucune place de marché que nous lisons ne le référence plus. Opik est un serveur MCP publié par comet-ml. Places de marché que nous lisons et qui le référencent : 3 (Official MCP Registry, Docker MCP Catalog, PyPI (MCP servers)). Selon notre passage sur les places de marché du 2026-10-27. Un plugin de cette paire n’est plus référencé sur aucune place de marché que nous lisons : nous demandons donc aux moteurs de recherche de ne pas indexer la page.
Où chacun est publié
| Place de marché |  Opik | |
|---|---|---|
| Place de marché communautaire confident-ai/eval-skills | Retiré le 2026-10-27 Version: 1.1.0 Forks (GitHub): 1 Étoiles (GitHub): 11 Non marqué · Vu pour la première fois |
Absent |
| Official MCP Registry | Absent | Référencé Version: 3.0.7 Téléchargements par mois (PyPI): 3 591 Téléchargements par semaine (PyPI): 814 Forks (GitHub): 37 Étoiles (GitHub): 225 Non marqué · Vu pour la première fois |
| Docker MCP Catalog | Absent | Référencé Version: sha256:0e0d7d33d5eb Forks (GitHub): 37 Téléchargements (Docker Hub): 17 250 Étoiles (Docker Hub): 1 Étoiles (GitHub): 225 Non marqué · Vu pour la première fois |
| PyPI (MCP servers) | Absent | Référencé Version: 3.0.7 Téléchargements par mois (PyPI): 3 591 Téléchargements par semaine (PyPI): 814 Forks (GitHub): 37 Étoiles (GitHub): 225 Non marqué · Vu pour la première fois |
Chaque chiffre est celui de la place de marché et n'est jamais additionné entre places de marché. Une place de marché qui ne publie pas de chiffre n'en affiche aucun : pas de nombre ne veut pas dire zéro.
Les faits côte à côte
| Fait | Eval Skillsplus référencé · | Opik |
|---|---|---|
| Marketplaces qui le listent (différent) | 0 | 3 |
| Étoiles (GitHub) (différent) | 11 | 225 |
| Téléchargements (Docker Hub) (différent) | Aucun chiffre sur Docker Hub | 17 250 |
| Forks (GitHub) (différent) | 1 | 37 |
| Dernière version (différent) | Non publié | 2026-10-24 |
| Où il s'exécute (différent) | S'installe comme lot de plugins | Serveur distant ou votre machine |
| Transport (différent) | Non indiqué | Streamable HTTP, stdio |
| Outils déclarés (différent) | Non publié | 13 |
| Variables d'environnement demandées (différent) | Non publié | 4, dont secrets : 1 |
| Parties du lot (différent) | 10 | Pas un lot |
| Licence | Apache-2.0 | Apache-2.0 |
| Dépôt (différent) | github.com/confident-ai/eval-skills | github.com/comet-ml/opik-mcp |
| Modifications des 7 derniers jours | 2 | 2 |
| Vu pour la première fois (différent) | 2026-10-15 | 2026-10-11 |
| Endpoint à la dernière vérification (différent) | pas d’endpoint distant que nous vérifions | Ne répond plus depuis le 2026-10-21 |
Les lignes où les deux diffèrent ont un fond teinté et des valeurs en gras. Aucune valeur n’est marquée meilleure ou moins bonne : un plugin qu’aucune place de marché ne référence plus est montré avec ses dernières données connues, que nous ne classons pas face à des chiffres actuels.
Quoi utiliser à la place de « Eval Skills »
Plugins encore référencés dont les noms, descriptions, outils et skills sont les plus proches par le sens. Comparables, pas recommandés.
-
Evaluate Codex skills and plugins from chat with a beginner-friendly start command, local-first reports, token budget explanations, and guided benchmarking.
-
Skills for adding DeepEval evaluations, tracing, datasets, Confident AI reports, and iterative improvement loops to AI applications.
-
Scaffolding, running, documenting, and publishing AI evaluations. Ships skills and commands for setting up eval workspaces, creating custom evals (or adapting existing…
-
Decide, design, gate, judge, and defend evaluations for LLM, agent, and retrieval systems. Not ordinary unit tests.
-
AI agent evaluation sandbox for Claude Code. Holdout scenario testing with Doer/Judge/Adversary/Observer roles, probabilistic satisfaction scoring, and append-only JSONL audit…
-
Compare AI coding skills head-to-head to find which one works best for your task. Run controlled A/B tests: same model (Claude Code), same tasks, different skills. Each candidate…
Ce que chacun dit faire
Eval Skills
Skills that take a coding agent from your first trace to evals you can trust: error analysis, datasets, validated graders, eval runs, and production monitoring.
Opik
Read and score Opik traces, experiments, datasets and prompts from your AI assistant.
Comment lancer chacun
Eval Skills
Pas de données pour une commande automatique : ce que déclarent ses places de marché ne dit pas sans ambiguïté comment le connecter.
Opik En serveur MCP distant
claude mcp add --transport http opik-mcp https://www.comet.com/opik/api/v1/mcpDemande: OPIK_API_KEY (secrète)
Commandes construites uniquement à partir de ce que déclarent les marketplaces ; le jeu complet pour chaque client figure sur la fiche de chacun.
Seul Opik a un endpoint distant que nous vérifions. Comment nous vérifions les endpoints
Outils que déclare chacun
Les marketplaces de Eval Skills ne publient pas de liste d'outils, nous ne comparons donc pas les outils.
Réglages que demande chacun
Les marketplaces de Eval Skills ne publient pas les réglages demandés, nous ne comparons donc pas les réglages.
Ce qu'il peut faire : Eval Skills · Ce qu'il peut faire : Opik · Comparer deux autres plugins
Données issues de Community GitHub marketplaces. Données issues de Official MCP Registry. Données issues de Docker MCP Catalog. Données issues de PyPI (MCP servers). Les chiffres proviennent de nos propres passages réguliers sur les places de marché, dernière lecture le . Nous ne publions aucune coordonnée des éditeurs de plugins.