promptfoo-evaluation vs. IA-QA — 152 QA & Dev Tools for AI Agents
promptfoo-evaluation é um pacote de plugins para ferramentas de programação com IA publicado por daymade. Marketplaces que lemos e que o listam: 1 (Community GitHub marketplaces). IA-QA — 152 QA & Dev Tools for AI Agents é um servidor MCP publicado por JcJamet. Marketplaces que lemos e que o listam: 1 (Official MCP Registry). Conforme nossa passagem pelos marketplaces em 2026-10-27. Este par foi escolhido por um leitor, não pela nossa regra de comparação, por isso pedimos aos buscadores que não indexem a página.
Onde cada um é publicado
| Marketplace |  promptfoo-evaluation |  IA-QA — 152 QA & Dev Tools for AI Agents |
|---|---|---|
| Marketplace da comunidade daymade/claude-code-skills | Listado Versão: 1.1.0 Forks (GitHub): 230 Estrelas (GitHub): 1 499 Sem marcação · Visto pela primeira vez |
Não listado |
| Official MCP Registry | Não listado | Listado Versão: 1.1.1 Forks (GitHub): 0 Estrelas (GitHub): 0 Sem marcação · Visto pela primeira vez |
Cada número é do próprio marketplace e nunca é somado entre marketplaces. Um marketplace que não publica números não mostra nenhum: sem número não é zero.
Os fatos lado a lado
| Fato | promptfoo-evaluation | IA-QA — 152 QA & Dev Tools for AI Agents |
|---|---|---|
| Marketplaces que o listam | 1 | 1 |
| Estrelas (GitHub) (diferente) | 1 499 (melhor) | 0 (pior) |
| Forks (GitHub) (diferente) | 230 (melhor) | 0 (pior) |
| Último release (diferente) | Não publicado | 2026-10-26 |
| Onde roda (diferente) | Instala-se como pacote de plugins | Servidor remoto (www.ia-qa.com/mcp) |
| Transporte (diferente) | Não informado | Streamable HTTP |
| Ferramentas que declara | Não publicado | Não publicado |
| Variáveis de ambiente que pede | Não publicado | Não publicado |
| Licença | Não informado | Não informado |
| Repositório (diferente) | github.com/daymade/claude-code-skills | github.com/ia-qa-com/mcp |
| Mudanças nos últimos 7 dias (diferente) | 0 | 6 |
| Visto pela primeira vez (diferente) | 2026-10-15 | 2026-10-11 |
| Endpoint na última verificação (diferente) | sem endpoint remoto que verificamos | Respondeu há 4 dias |
As linhas em que os dois diferem têm fundo destacado e valores em negrito. Onde os próprios dados dizem qual valor é melhor (mais marketplaces, um número maior do mesmo marketplace, um release mais recente, uma marca verified em um marketplace que lista os dois), o melhor também é marcado em verde com ▲ e o pior em vermelho com ▼. Onde roda, o transporte, as ferramentas, as configurações, os hooks, as partes do pacote, a licença e as mudanças da semana são marcados apenas como diferentes: mais ou menos não é melhor por si só.
O que cada um diz que faz
promptfoo-evaluation
Configures and runs LLM evaluation using Promptfoo framework. Use when setting up prompt testing, creating evaluation configs (promptfooconfig.yaml), writing Python custom assertions, implementing llm-rubric for LLM-as-judge, or managing few-shot examples in prompts. Triggers on keywords like promptfoo, eval, LLM evaluation, prompt testing, or model comparison
IA-QA — 152 QA & Dev Tools for AI Agents
152 free QA tools for agents: injection scan, evals, RAG, web audits. Smaller packs: /mcp/{pack}.
Como executar cada um
promptfoo-evaluation Como plugin do Claude Code
/plugin marketplace add daymade/claude-code-skills
/plugin install promptfoo-evaluation@daymade-skillsIA-QA — 152 QA & Dev Tools for AI Agents Como servidor MCP remoto
claude mcp add --transport http ia-qa-toolbox https://www.ia-qa.com/mcpComandos construídos apenas com o que os marketplaces declaram; o conjunto completo para cada cliente está no cartão de cada um.
Só IA-QA — 152 QA & Dev Tools for AI Agents tem um endpoint remoto que verificamos. Como verificamos os endpoints
Ferramentas que cada um declara
Os marketplaces de nenhum dos dois publicam uma lista de ferramentas, então não há o que comparar.
Configurações que cada um pede
Os marketplaces de nenhum dos dois publicam as configurações que ele pede.
O que pode fazer: promptfoo-evaluation · O que pode fazer: IA-QA — 152 QA & Dev Tools for AI Agents · Comparar outros dois plugins
Dados de Community GitHub marketplaces. Dados de Official MCP Registry. Os números vêm das nossas próprias passagens regulares pelos marketplaces, última leitura em . Não publicamos dados de contato dos editores de plugins.