eval-genius ou EvalForge Lite
eval-genius n’est plus référencé sur aucune place de marché que nous lisons : ce sont ses dernières données connues, au 2026‑11‑03.
eval-genius est un lot de plugins pour les outils de code IA publié par Alex Greenshpun. Aucune place de marché que nous lisons ne le référence plus. EvalForge Lite est un serveur MCP publié par thejaredchapman. Places de marché que nous lisons et qui le référencent : 1 (Official MCP Registry). Selon notre passage sur les places de marché du 2026-11-05. Un plugin de cette paire n’est plus référencé sur aucune place de marché que nous lisons : nous demandons donc aux moteurs de recherche de ne pas indexer la page.
Où chacun est publié
| Place de marché |  EvalForge Lite | |
|---|---|---|
| Place de marché communautaire alexgreensh/eval-genius | Retiré le 2026-11-03 Version: 0.3.1 Forks (GitHub): 4 Étoiles (GitHub): 24 Non marqué · Vu pour la première fois |
Absent |
| Official MCP Registry | Absent | Référencé Version: 1.0.1 Téléchargements par mois (PyPI): 244 Téléchargements par semaine (PyPI): 124 Forks (GitHub): 0 Étoiles (GitHub): 0 Non marqué · Vu pour la première fois |
Chaque chiffre est celui de la place de marché et n'est jamais additionné entre places de marché. Une place de marché qui ne publie pas de chiffre n'en affiche aucun : pas de nombre ne veut pas dire zéro.
Les faits côte à côte
| Fait | eval-geniusplus référencé · | EvalForge Lite |
|---|---|---|
| Marketplaces qui le listent (différent) | 0 | 1 |
| Étoiles (GitHub) (différent) | 24 | 0 |
| Forks (GitHub) (différent) | 4 | 0 |
| Dernière version | Non publié | Non publié |
| Où il s'exécute (différent) | S'installe comme lot de plugins | Sur votre machine (evalforge-lite) |
| Transport (différent) | Non indiqué | stdio |
| Outils déclarés | Non publié | Non publié |
| Variables d'environnement demandées (différent) | Non publié | 1, dont secrets : 1 |
| Parties du lot (différent) | 1 | Pas un lot |
| Licence (différent) | Apache-2.0 | Non indiqué |
| Dépôt (différent) | github.com/alexgreensh/eval-genius | github.com/thejaredchapman/evalforge-lite |
| Modifications des 7 derniers jours (différent) | 2 | 0 |
| Vu pour la première fois (différent) | 2026-10-15 | 2026-10-11 |
Les lignes où les deux diffèrent ont un fond teinté et des valeurs en gras. Aucune valeur n’est marquée meilleure ou moins bonne : un plugin qu’aucune place de marché ne référence plus est montré avec ses dernières données connues, que nous ne classons pas face à des chiffres actuels.
Quoi utiliser à la place de « eval-genius »
Plugins encore référencés dont les noms, descriptions, outils et skills sont les plus proches par le sens. Comparables, pas recommandés.
-
Skills for adding DeepEval evaluations, tracing, datasets, Confident AI reports, and iterative improvement loops to AI applications.
-
Configures and runs LLM evaluation using Promptfoo framework. Use when setting up prompt testing, creating evaluation configs (promptfooconfig.yaml), writing Python custom…
-
Set up evaluation of an OpenAI Java SDK tool-calling agent using Dokimos
-
Set up evaluation of AI agents with tool call validation, correctness checks, and task completion using Dokimos
-
Pay-per-call AI evaluation MCP server. Score LLM outputs against benchmark rubrics via Workers AI.
-
AI agent evaluation sandbox for Claude Code. Holdout scenario testing with Doer/Judge/Adversary/Observer roles, probabilistic satisfaction scoring, and append-only JSONL audit…
Ce que chacun dit faire
eval-genius
Decide, design, gate, judge, and defend evaluations for LLM, agent, and retrieval systems. Not ordinary unit tests.
EvalForge Lite
Compare text LLMs across OpenRouter, Bedrock, Vertex AI and Foundry with automated grading.
Comment lancer chacun
eval-genius
Pas de données pour une commande automatique : ce que déclarent ses places de marché ne dit pas sans ambiguïté comment le connecter.
EvalForge Lite En serveur MCP local : paquet PyPI
claude mcp add --env "OPENROUTER_API_KEY=<YOUR_OPENROUTER_API_KEY>" --transport stdio evalforge-lite -- uvx evalforge-liteDemande: OPENROUTER_API_KEY (secrète)
Commandes construites uniquement à partir de ce que déclarent les marketplaces ; le jeu complet pour chaque client figure sur la fiche de chacun.
Outils que déclare chacun
Les marketplaces d'aucun des deux ne publient de liste d'outils, il n'y a donc rien à comparer.
Réglages que demande chacun
Les marketplaces de eval-genius ne publient pas les réglages demandés, nous ne comparons donc pas les réglages.
Ce qu'il peut faire : eval-genius · Ce qu'il peut faire : EvalForge Lite · Comparer deux autres plugins
Données issues de Community GitHub marketplaces. Données issues de Official MCP Registry. Les chiffres proviennent de nos propres passages réguliers sur les places de marché, dernière lecture le . Nous ne publions aucune coordonnée des éditeurs de plugins.