Hugging Face vs. llm-eval
llm-eval não está mais listado em nenhum marketplace que lemos: estes são os últimos dados conhecidos, de 2026‑10‑18.
Hugging Face é um servidor MCP publicado por docker. Marketplaces que lemos e que o listam: 1 (Docker MCP Catalog). llm-eval é um pacote de plugins para ferramentas de programação com IA publicado por barnburner121. Nenhum marketplace que lemos o lista mais. Conforme nossa passagem pelos marketplaces em 2026-10-27. Um plugin deste par não está mais listado em nenhum marketplace que lemos, por isso pedimos aos buscadores que não indexem a página.
Onde cada um é publicado
| Marketplace |  Hugging Face | |
|---|---|---|
| Docker MCP Catalog | Listado Versão: não informada Nenhum número publicado Sem marcação · Visto pela primeira vez |
Não listado |
| Marketplace da comunidade barnburner121/claude-plugin-marketplace | Não listado | Removido em 2026-10-18 Versão: 1.0.0 Forks (GitHub): 0 Estrelas (GitHub): 3 Sem marcação · Visto pela primeira vez |
Cada número é do próprio marketplace e nunca é somado entre marketplaces. Um marketplace que não publica números não mostra nenhum: sem número não é zero.
Os fatos lado a lado
| Fato | Hugging Face | llm-evalnão está mais listado · |
|---|---|---|
| Marketplaces que o listam (diferente) | 1 | 0 |
| Estrelas (GitHub) (diferente) | Sem número no GitHub | 3 |
| Forks (GitHub) (diferente) | Sem número no GitHub | 0 |
| Último release | Não publicado | Não publicado |
| Onde roda (diferente) | Servidor remoto (huggingface.co/mcp) | Na sua máquina (@barnburner121/plugin-hub-mcp) |
| Transporte (diferente) | Streamable HTTP | Não informado |
| Ferramentas que declara (diferente) | 4 | Não publicado |
| Variáveis de ambiente que pede | Não publicado | Não publicado |
| Partes do pacote (diferente) | Não é um pacote | 2 |
| Licença (diferente) | Apache-2.0 | MIT |
| Repositório (diferente) | Não informado | github.com/barnburner121/claude-plugin-marketplace |
| Mudanças nos últimos 7 dias | 0 | 0 |
| Visto pela primeira vez (diferente) | 2026-10-11 | 2026-10-14 |
| Endpoint na última verificação (diferente) | Respondeu há 6 dias | sem endpoint remoto que verificamos |
As linhas em que os dois diferem têm fundo destacado e valores em negrito. Nenhum valor é marcado como melhor ou pior: um plugin que nenhum marketplace lista mais aparece com os últimos dados conhecidos, que não comparamos com números atuais.
O que usar no lugar de «llm-eval»
Plugins ainda listados cujos nomes, descrições, ferramentas e skills são os mais próximos em significado. Comparáveis, não recomendados.
-
Decide, design, gate, judge, and defend evaluations for LLM, agent, and retrieval systems. Not ordinary unit tests.
-
Configures and runs LLM evaluation using Promptfoo framework. Use when setting up prompt testing, creating evaluation configs (promptfooconfig.yaml), writing Python custom…
-
Compare text LLMs across OpenRouter, Bedrock, Vertex AI and Foundry with automated grading.
-
Skills for adding DeepEval evaluations, tracing, datasets, Confident AI reports, and iterative improvement loops to AI applications.
-
Benchmark, evaluate, and optimize skills to ensure reliable performance across all LLMs
-
Set up evaluation of LangChain4j applications and RAG pipelines using Dokimos
O que cada um diz que faz
Hugging Face
Tools for interacting with Hugging Face models, datasets, research papers, and more.
llm-eval
Generate LLM evaluation and benchmarking
Como executar cada um
Hugging Face Como servidor MCP remoto
claude mcp add --transport http hugging-face https://huggingface.co/mcpllm-eval
Sem dados para um comando automático: o que os marketplaces declaram não diz de forma inequívoca como conectá-lo.
Comandos construídos apenas com o que os marketplaces declaram; o conjunto completo para cada cliente está no cartão de cada um.
Só Hugging Face tem um endpoint remoto que verificamos. Como verificamos os endpoints
Ferramentas que cada um declara
Nem os marketplaces de llm-eval nem seu endpoint listam ferramentas, então não comparamos ferramentas.
Configurações que cada um pede
Os marketplaces de nenhum dos dois publicam as configurações que ele pede.
O que pode fazer: Hugging Face · O que pode fazer: llm-eval · Comparar outros dois plugins
Dados de Docker MCP Catalog. Dados de Community GitHub marketplaces. Os números vêm das nossas próprias passagens regulares pelos marketplaces, última leitura em . Não publicamos dados de contato dos editores de plugins.