Ext Ops Panel
Открыть панель
Сравнение

Eval Skills или Eval Engine API

Eval Skills больше нет ни на одной читаемой нами витрине, это последние данные на 2026‑10‑27.

Eval Skills: пакет плагинов для ИИ-инструментов разработки, издатель Confident AI. Ни одна витрина, которую мы читаем, его больше не публикует. Eval Engine API: MCP-сервер, издатель invertedhoologan. Витрин, которые мы читаем и где он опубликован: 1 (Official MCP Registry). Данные нашего прохода по витринам на 2026-10-29. Одного из плагинов этой пары больше нет ни на одной читаемой нами витрине, поэтому поисковикам предложено не индексировать страницу.

Где опубликован каждый

Где опубликован каждый
ВитринаEval SkillsEval Engine API
Маркетплейс сообщества confident-ai/eval-skills Удалён 2026-10-27
Версия: 1.1.0
Форки (GitHub): 1
Звёзды (GitHub): 11
Не помечен · Впервые замечен
Нет на витрине
Official MCP Registry Нет на витрине Опубликован
Версия: 0.1.0
Число не опубликовано
Не помечен · Впервые замечен

Каждое число принадлежит своей витрине и никогда не складывается с числами других витрин. Если витрина число не публикует, мы его не показываем: нет числа не значит ноль.

Факты рядом

Eval Skills или Eval Engine API
ФактEval Skillsбольше не публикуется · Eval Engine API
Витрины, где он есть (различается)01
Звёзды (GitHub) (различается)11Нет цифры на GitHub
Форки (GitHub) (различается)1Нет цифры на GitHub
Последний релизНе опубликованоНе опубликовано
Где работает (различается)Ставится как пакет плагиновУдалённый сервер (eval.zuluworksai.com/mcp)
Транспорт (различается)Не указаноStreamable HTTP
Объявляет инструментовНе опубликованоНе опубликовано
Просит переменных окруженияНе опубликованоНе опубликовано
Части набора (различается)10Не набор
Лицензия (различается)Apache-2.0Не указано
Репозиторий (различается)github.com/confident-ai/eval-skillsНе указано
Изменения за последние 7 дней (различается)20
Впервые замечен (различается)2026-10-152026-10-11
Endpoint на последней проверке (различается)нет remote endpoint, который мы проверяемНе отвечает с 2026-10-16

Строки, где они различаются, выделены фоном и жирным. Лучшее и худшее значение не отмечены: плагин, которого больше нет на витринах, показан по последним известным данным, а их мы не ранжируем против текущих цифр.

Чем заменить «Eval Skills»

Плагины, которые ещё публикуются и ближе всего к нему по смыслу названий, описаний, инструментов и скиллов. Сравнимые, а не рекомендованные.

  • Plugin Eval

    Evaluate Codex skills and plugins from chat with a beginner-friendly start command, local-first reports, token budget explanations, and guided benchmarking.

    от OpenAI Codex · Пакет плагинов

    Опубликован: Codex: openai-curated (openai/plugins) · Решает почти ту же задачу

  • DeepEval

    Skills for adding DeepEval evaluations, tracing, datasets, Confident AI reports, and iterative improvement loops to AI applications.

    от confident-ai · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Community GitHub marketplaces · Решает почти ту же задачу

  • Eval Runner

    Scaffolding, running, documenting, and publishing AI evaluations. Ships skills and commands for setting up eval workspaces, creating custom evals (or adapting existing…

    от danielrosehill · Пакет плагинов

    Опубликован: Community GitHub marketplaces · Решает почти ту же задачу

  • eval-genius

    Decide, design, gate, judge, and defend evaluations for LLM, agent, and retrieval systems. Not ordinary unit tests.

    от Alex Greenshpun · Пакет плагинов

    Опубликован: Community GitHub marketplaces · Решает почти ту же задачу

  • memoriant-eval-sandbox-skill

    AI agent evaluation sandbox for Claude Code. Holdout scenario testing with Doer/Judge/Adversary/Observer roles, probabilistic satisfaction scoring, and append-only JSONL audit…

    от NathanMaine · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-community · Решает почти ту же задачу

  • skill-picker

    Compare AI coding skills head-to-head to find which one works best for your task. Run controlled A/B tests: same model (Claude Code), same tasks, different skills. Each candidate…

    от qhuang20 · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-community · Решает почти ту же задачу

Его карточка и похожие плагины по витринам

Что каждый говорит о себе

Eval Skills

Своими словами, на витрине Community GitHub marketplaces:

Skills that take a coding agent from your first trace to evals you can trust: error analysis, datasets, validated graders, eval runs, and production monitoring.

Eval Engine API

Своими словами, на витрине Official MCP Registry:

Pay-per-call AI evaluation MCP server. Score LLM outputs against benchmark rubrics via Workers AI.

Как запустить каждый

Eval Skills

Нет данных для автоматической команды: из того, что объявляют витрины, нельзя однозначно понять, как его подключить.

Eval Engine API Как удалённый MCP-сервер

Claude Code
claude mcp add --transport http eval-engine-mcp https://eval.zuluworksai.com/mcp

Команды построены только из того, что объявляют витрины; полный набор для всех клиентов есть на карточке каждого.

Remote endpoint, который мы проверяем, есть только у Eval Engine API. Как мы проверяем endpoint

Какие инструменты объявляет каждый

Витрины ни одного из них не публикуют список инструментов, сравнивать нечего.

Какие настройки просит каждый

Витрины ни одного из них не публикуют настройки, которые он просит.

Что умеет: Eval Skills · Что умеет: Eval Engine API · Сравнить два других плагина

Данные витрины Community GitHub marketplaces. Данные витрины Official MCP Registry. Числа взяты из наших регулярных обходов витрин, последняя проверка . Контакты издателей плагинов мы не публикуем.

Откуда данные: как устроен каталог