Zen или llm-eval
llm-eval больше нет ни на одной читаемой нами витрине, это последние данные на 2026‑10‑18.
Zen: MCP-сервер, издатель BeehiveInnovations. Витрин, которые мы читаем и где он опубликован: 1 (Docker MCP Catalog). llm-eval: пакет плагинов для ИИ-инструментов разработки, издатель barnburner121. Ни одна витрина, которую мы читаем, его больше не публикует. Данные нашего прохода по витринам на 2026-10-24. Одного из плагинов этой пары больше нет ни на одной читаемой нами витрине, поэтому поисковикам предложено не индексировать страницу.
Где опубликован каждый
| Витрина |  Zen | |
|---|---|---|
| Docker MCP Catalog | Опубликован Версия: sha256:02cbe1d325db Форки (GitHub): 1 038 Загрузки (Docker Hub): 35 111 Звёзды (Docker Hub): 0 Звёзды (GitHub): 11 802 Не помечен · Впервые замечен |
Нет на витрине |
| Маркетплейс сообщества barnburner121/claude-plugin-marketplace | Нет на витрине | Удалён 2026-10-18 Версия: 1.0.0 Форки (GitHub): 0 Звёзды (GitHub): 3 Не помечен · Впервые замечен |
Каждое число принадлежит своей витрине и никогда не складывается с числами других витрин. Если витрина число не публикует, мы его не показываем: нет числа не значит ноль.
Факты рядом
| Факт | Zen | llm-evalбольше не публикуется · |
|---|---|---|
| Витрины, где он есть (различается) | 1 | 0 |
| Звёзды (GitHub) (различается) | 11 802 | 3 |
| Загрузки (Docker Hub) (различается) | 35 111 | Нет цифры на Docker Hub |
| Форки (GitHub) (различается) | 1 038 | 0 |
| Последний релиз | Не опубликовано | Не опубликовано |
| Где работает (различается) | На вашем компьютере (mcp/zen) | На вашем компьютере (@barnburner121/plugin-hub-mcp) |
| Транспорт (различается) | stdio | Не указано |
| Объявляет инструментов (различается) | 18 | Не опубликовано |
| Просит переменных окружения (различается) | 4, из них секретов: 4 | Не опубликовано |
| Части набора (различается) | Не набор | 2 |
| Лицензия (различается) | NOASSERTION | MIT |
| Репозиторий (различается) | github.com/beehiveinnovations/zen-mcp-server | github.com/barnburner121/claude-plugin-marketplace |
| Изменения за последние 7 дней (различается) | 0 | 2 |
| Впервые замечен (различается) | 2026-10-11 | 2026-10-14 |
Строки, где они различаются, выделены фоном и жирным. Лучшее и худшее значение не отмечены: плагин, которого больше нет на витринах, показан по последним известным данным, а их мы не ранжируем против текущих цифр.
Чем заменить «llm-eval»
Плагины, которые ещё публикуются и ближе всего к нему по смыслу названий, описаний, инструментов и скиллов. Сравнимые, а не рекомендованные.
-
Decide, design, gate, judge, and defend evaluations for LLM, agent, and retrieval systems. Not ordinary unit tests.
-
Configures and runs LLM evaluation using Promptfoo framework. Use when setting up prompt testing, creating evaluation configs (promptfooconfig.yaml), writing Python custom…
-
Compare text LLMs across OpenRouter, Bedrock, Vertex AI and Foundry with automated grading.
-
Skills for adding DeepEval evaluations, tracing, datasets, Confident AI reports, and iterative improvement loops to AI applications.
-
Benchmark, evaluate, and optimize skills to ensure reliable performance across all LLMs
-
Set up evaluation of LangChain4j applications and RAG pipelines using Dokimos
Что каждый говорит о себе
Zen
Bridges multiple AI models and CLIs, enabling orchestrated workflows across Claude Code, Gemini CLI, Codex CLI, and other AI development tools.
llm-eval
Generate LLM evaluation and benchmarking
Как запустить каждый
Zen Как локальный MCP-сервер: образ Docker
claude mcp add --env "GEMINI_API_KEY=<YOUR_GEMINI_API_KEY>" --env "OPENAI_API_KEY=<YOUR_OPENAI_API_KEY>" --env "OPENROUTER_API_KEY=<YOUR_OPENROUTER_API_KEY>" --env "XAI_API_KEY=<YOUR_XAI_API_KEY>" --transport stdio zen -- docker run -i --rm -e GEMINI_API_KEY -e OPENAI_API_KEY -e OPENROUTER_API_KEY -e XAI_API_KEY mcp/zenТребует: GEMINI_API_KEY (секрет), OPENAI_API_KEY (секрет), OPENROUTER_API_KEY (секрет), XAI_API_KEY (секрет)
llm-eval
Нет данных для автоматической команды: из того, что объявляют витрины, нельзя однозначно понять, как его подключить.
Команды построены только из того, что объявляют витрины; полный набор для всех клиентов есть на карточке каждого.
Какие инструменты объявляет каждый
Витрины llm-eval не публикуют список инструментов, поэтому инструменты не сравниваем.
Какие настройки просит каждый
Витрины llm-eval не публикуют, какие настройки он просит, поэтому настройки не сравниваем.
Что умеет: Zen · Что умеет: llm-eval · Сравнить два других плагина
Данные витрины Docker MCP Catalog. Данные витрины Community GitHub marketplaces. Числа взяты из наших регулярных обходов витрин, последняя проверка . Контакты издателей плагинов мы не публикуем.