llm-eval ou Amicus
llm-eval n’est plus référencé sur aucune place de marché que nous lisons : ce sont ses dernières données connues, au 2026‑10‑18.
llm-eval est un lot de plugins pour les outils de code IA publié par barnburner121. Aucune place de marché que nous lisons ne le référence plus. Amicus est un serveur MCP publié par BourbonDog. Places de marché que nous lisons et qui le référencent : 1 (Official MCP Registry). Selon notre passage sur les places de marché du 2026-11-13. Un plugin de cette paire n’est plus référencé sur aucune place de marché que nous lisons : nous demandons donc aux moteurs de recherche de ne pas indexer la page.
Où chacun est publié
| Place de marché |  Amicus | |
|---|---|---|
| Place de marché communautaire barnburner121/claude-plugin-marketplace | Retiré le 2026-10-18 Version: 1.0.0 Forks (GitHub): 0 Étoiles (GitHub): 3 Non marqué · Vu pour la première fois |
Absent |
| Official MCP Registry | Absent | Référencé Version: 4.16.1 Téléchargements par mois (npm): 2 921 Téléchargements par semaine (npm): 718 Forks (GitHub): 0 Étoiles (GitHub): 2 Non marqué · Vu pour la première fois |
Chaque chiffre est celui de la place de marché et n'est jamais additionné entre places de marché. Une place de marché qui ne publie pas de chiffre n'en affiche aucun : pas de nombre ne veut pas dire zéro.
Les faits côte à côte
| Fait | llm-evalplus référencé · | Amicus |
|---|---|---|
| Marketplaces qui le listent (différent) | 0 | 1 |
| Étoiles (GitHub) (différent) | 3 | 2 |
| Forks (GitHub) | 0 | 0 |
| Dernière version (différent) | Non publié | 2026-11-12 |
| Où il s'exécute (différent) | Sur votre machine (@barnburner121/plugin-hub-mcp) | Sur votre machine (amicus) |
| Transport (différent) | Non indiqué | stdio |
| Outils déclarés | Non publié | Non publié |
| Variables d'environnement demandées (différent) | Non publié | 2, dont secrets : 1 |
| Parties du lot (différent) | 2 | Pas un lot |
| Licence | MIT | MIT |
| Dépôt (différent) | github.com/barnburner121/claude-plugin-marketplace | github.com/bourbondog/amicus |
| Modifications des 7 derniers jours (différent) | 0 | 3 |
| Vu pour la première fois (différent) | 2026-10-14 | 2026-10-11 |
Les lignes où les deux diffèrent ont un fond teinté et des valeurs en gras. Aucune valeur n’est marquée meilleure ou moins bonne : un plugin qu’aucune place de marché ne référence plus est montré avec ses dernières données connues, que nous ne classons pas face à des chiffres actuels.
Quoi utiliser à la place de « llm-eval »
Plugins encore référencés dont les noms, descriptions, outils et skills sont les plus proches par le sens. Comparables, pas recommandés.
-
evaluation
LLM benchmarking and evaluation including lm-evaluation-harness, BigCode Evaluation Harness, and NeMo Evaluator. Use when benchmarking models or measuring performance.
-
Configures and runs LLM evaluation using Promptfoo framework. Use when setting up prompt testing, creating evaluation configs (promptfooconfig.yaml), writing Python custom…
-
Compare text LLMs across OpenRouter, Bedrock, Vertex AI and Foundry with automated grading.
-
Skills for adding DeepEval evaluations, tracing, datasets, Confident AI reports, and iterative improvement loops to AI applications.
-
Benchmark, evaluate, and optimize skills to ensure reliable performance across all LLMs
-
Set up evaluation of LangChain4j applications and RAG pipelines using Dokimos
Ce que chacun dit faire
llm-eval
Generate LLM evaluation and benchmarking
Amicus
Multi-model LLM Council and parallel AI window for Claude Code. Fork any model, fold results back.
Comment lancer chacun
llm-eval
Pas de données pour une commande automatique : ce que déclarent ses places de marché ne dit pas sans ambiguïté comment le connecter.
Amicus En serveur MCP local : paquet npm
claude mcp add --env "OPENROUTER_API_KEY=<YOUR_OPENROUTER_API_KEY>" --transport stdio amicus -- npx -y amicus mcpDemande: OPENROUTER_API_KEY (secrète)
Commandes construites uniquement à partir de ce que déclarent les marketplaces ; le jeu complet pour chaque client figure sur la fiche de chacun.
Outils que déclare chacun
Les marketplaces d'aucun des deux ne publient de liste d'outils, il n'y a donc rien à comparer.
Réglages que demande chacun
Les marketplaces de llm-eval ne publient pas les réglages demandés, nous ne comparons donc pas les réglages.
Ce qu'il peut faire : llm-eval · Ce qu'il peut faire : Amicus · Comparer deux autres plugins
Données issues de Community GitHub marketplaces. Données issues de Official MCP Registry. Les chiffres proviennent de nos propres passages réguliers sur les places de marché, dernière lecture le . Nous ne publions aucune coordonnée des éditeurs de plugins.