Ext Ops Panel
Abrir el panel
Comparación

promptfoo-evaluation vs. IA-QA Eval & RAG — 38 tools

promptfoo-evaluation es un paquete de plugins para herramientas de programación con IA publicado por daymade. Marketplaces que leemos y que lo publican: 1 (Community GitHub marketplaces). IA-QA Eval & RAG — 38 tools es un servidor MCP publicado por JcJamet. Marketplaces que leemos y que lo publican: 1 (Official MCP Registry). Según nuestra pasada por los marketplaces del 2026-10-29. Este par lo eligió un lector, no nuestra regla de comparación, así que pedimos a los buscadores que no indexen la página.

Dónde se publica cada uno

Dónde se publica cada uno
Marketplacepromptfoo-evaluationIA-QA Eval & RAG — 38 tools
Marketplace de la comunidad daymade/claude-code-skills Publicado
Versión: 1.1.0
Forks (GitHub): 230
Estrellas (GitHub): 1 503
Sin marca · Visto por primera vez
No figura
Official MCP Registry No figura Publicado
Versión: 1.0.1
Forks (GitHub): 0
Estrellas (GitHub): 0
Sin marca · Visto por primera vez

Cada cifra es del propio marketplace y nunca se suma entre marketplaces. Un marketplace que no publica cifras no muestra ninguna: sin número no es cero.

Los datos lado a lado

promptfoo-evaluation vs. IA-QA Eval & RAG — 38 tools
Datopromptfoo-evaluationIA-QA Eval & RAG — 38 tools
Marketplaces que lo listan11
Estrellas (GitHub) (distinto)1 503 (mejor)0 (peor)
Forks (GitHub) (distinto)230 (mejor)0 (peor)
Última versión (distinto)No publicado2026-10-26
Dónde se ejecuta (distinto)Se instala como paquete de pluginsServidor remoto (www.ia-qa.com/mcp/eval)
Transporte (distinto)Sin indicarStreamable HTTP
Herramientas que declaraNo publicadoNo publicado
Variables de entorno que pideNo publicadoNo publicado
LicenciaSin indicarSin indicar
Repositorio (distinto)github.com/daymade/claude-code-skillsgithub.com/ia-qa-com/mcp
Cambios en los últimos 7 días (distinto)04
Visto por primera vez (distinto)2026-10-152026-10-26
Endpoint en la última comprobación (distinto)sin endpoint remoto que comprobemosaún sin comprobar

Las filas en las que difieren tienen fondo tintado y valores en negrita. Donde los propios datos dicen qué valor es mejor (más marketplaces, una cifra mayor del mismo marketplace, una versión más reciente, una marca verified en un marketplace que lista a ambos), el mejor se marca además en verde con ▲ y el peor en rojo con ▼. Dónde se ejecuta, el transporte, las herramientas, los ajustes, los hooks, las partes del paquete, la licencia y los cambios de la semana se marcan solo como diferentes: más o menos no es mejor en sí.

Qué dice cada uno que hace

promptfoo-evaluation

En sus propias palabras, en Community GitHub marketplaces:

Configures and runs LLM evaluation using Promptfoo framework. Use when setting up prompt testing, creating evaluation configs (promptfooconfig.yaml), writing Python custom assertions, implementing llm-rubric for LLM-as-judge, or managing few-shot examples in prompts. Triggers on keywords like promptfoo, eval, LLM evaluation, prompt testing, or model comparison

IA-QA Eval & RAG — 38 tools

En sus propias palabras, en Official MCP Registry:

LLM & RAG evals: hallucination, eval contracts, semantic tests, tokens & model info. Free, no key.

Cómo ejecutar cada uno

promptfoo-evaluation Como plugin de Claude Code

Claude Code
/plugin marketplace add daymade/claude-code-skills
/plugin install promptfoo-evaluation@daymade-skills

IA-QA Eval & RAG — 38 tools Como servidor MCP remoto

Claude Code
claude mcp add --transport http ia-qa-eval https://www.ia-qa.com/mcp/eval

Comandos construidos solo con lo que declaran los marketplaces; el conjunto completo para cada cliente está en la ficha de cada uno.

Herramientas que declara cada uno

Los marketplaces de ninguno de los dos publican una lista de herramientas, así que no hay nada que comparar.

Ajustes que pide cada uno

Los marketplaces de ninguno de los dos publican los ajustes que pide.

Qué puede hacer: promptfoo-evaluation · Qué puede hacer: IA-QA Eval & RAG — 38 tools · Comparar otros dos plugins

Datos de Community GitHub marketplaces. Datos de Official MCP Registry. Las cifras proceden de nuestros propios recorridos periódicos por los marketplaces, leída por última vez el . No publicamos datos de contacto de los editores de plugins.

De dónde salen los datos: cómo se elabora el catálogo