Ext Ops Panel
Открыть панель
Сравнение

promptfoo-evaluation или Eval Engine API

promptfoo-evaluation: пакет плагинов для ИИ-инструментов разработки, издатель daymade. Витрин, которые мы читаем и где он опубликован: 1 (Community GitHub marketplaces). Eval Engine API: MCP-сервер, издатель invertedhoologan. Витрин, которые мы читаем и где он опубликован: 1 (Official MCP Registry). Данные нашего прохода по витринам на 2026-10-28. Эту пару выбрал читатель, а не наше правило сравнений, поэтому поисковикам предложено не индексировать страницу.

Где опубликован каждый

Где опубликован каждый
Витринаpromptfoo-evaluationEval Engine API
Маркетплейс сообщества daymade/claude-code-skills Опубликован
Версия: 1.1.0
Форки (GitHub): 230
Звёзды (GitHub): 1 500
Не помечен · Впервые замечен
Нет на витрине
Official MCP Registry Нет на витрине Опубликован
Версия: 0.1.0
Число не опубликовано
Не помечен · Впервые замечен

Каждое число принадлежит своей витрине и никогда не складывается с числами других витрин. Если витрина число не публикует, мы его не показываем: нет числа не значит ноль.

Факты рядом

promptfoo-evaluation или Eval Engine API
Фактpromptfoo-evaluationEval Engine API
Витрины, где он есть11
Звёзды (GitHub) (различается)1 500Нет цифры на GitHub
Форки (GitHub) (различается)230Нет цифры на GitHub
Последний релизНе опубликованоНе опубликовано
Где работает (различается)Ставится как пакет плагиновУдалённый сервер (eval.zuluworksai.com/mcp)
Транспорт (различается)Не указаноStreamable HTTP
Объявляет инструментовНе опубликованоНе опубликовано
Просит переменных окруженияНе опубликованоНе опубликовано
ЛицензияНе указаноНе указано
Репозиторий (различается)github.com/daymade/claude-code-skillsНе указано
Изменения за последние 7 дней00
Впервые замечен (различается)2026-10-152026-10-11
Endpoint на последней проверке (различается)нет remote endpoint, который мы проверяемНе отвечает с 2026-10-16

Строки, где значения различаются, выделены фоном и жирным. Где сами данные говорят, какое значение лучше (больше витрин, большая цифра одной и той же витрины, более свежий релиз, отметка verified на витрине, где есть оба), лучшее дополнительно отмечено зелёным и ▲, худшее красным и ▼. Где работает, транспорт, инструменты, настройки, hooks, части набора, лицензия и изменения за неделю отмечены только как различие: больше или меньше само по себе не лучше.

Что каждый говорит о себе

promptfoo-evaluation

Своими словами, на витрине Community GitHub marketplaces:

Configures and runs LLM evaluation using Promptfoo framework. Use when setting up prompt testing, creating evaluation configs (promptfooconfig.yaml), writing Python custom assertions, implementing llm-rubric for LLM-as-judge, or managing few-shot examples in prompts. Triggers on keywords like promptfoo, eval, LLM evaluation, prompt testing, or model comparison

Eval Engine API

Своими словами, на витрине Official MCP Registry:

Pay-per-call AI evaluation MCP server. Score LLM outputs against benchmark rubrics via Workers AI.

Как запустить каждый

promptfoo-evaluation Как плагин Claude Code

Claude Code
/plugin marketplace add daymade/claude-code-skills
/plugin install promptfoo-evaluation@daymade-skills

Eval Engine API Как удалённый MCP-сервер

Claude Code
claude mcp add --transport http eval-engine-mcp https://eval.zuluworksai.com/mcp

Команды построены только из того, что объявляют витрины; полный набор для всех клиентов есть на карточке каждого.

Remote endpoint, который мы проверяем, есть только у Eval Engine API. Как мы проверяем endpoint

Какие инструменты объявляет каждый

Витрины ни одного из них не публикуют список инструментов, сравнивать нечего.

Какие настройки просит каждый

Витрины ни одного из них не публикуют настройки, которые он просит.

Что умеет: promptfoo-evaluation · Что умеет: Eval Engine API · Сравнить два других плагина

Данные витрины Community GitHub marketplaces. Данные витрины Official MCP Registry. Числа взяты из наших регулярных обходов витрин, последняя проверка . Контакты издателей плагинов мы не публикуем.

Откуда данные: как устроен каталог