Ext Ops Panel
Открыть панель
Сравнение

Eval Runner или com.clauxel.evalscopebench/evalscopebench-mcp

Eval Runner больше нет ни на одной читаемой нами витрине, это последние данные на 2026‑11‑05.

Eval Runner: пакет плагинов для ИИ-инструментов разработки, издатель danielrosehill. Ни одна витрина, которую мы читаем, его больше не публикует. com.clauxel.evalscopebench/evalscopebench-mcp: MCP-сервер, издатель evalscopebench.clauxel.com. Витрин, которые мы читаем и где он опубликован: 1 (Official MCP Registry). Данные нашего прохода по витринам на 2026-11-08. Одного из плагинов этой пары больше нет ни на одной читаемой нами витрине, поэтому поисковикам предложено не индексировать страницу.

Где опубликован каждый

Где опубликован каждый
ВитринаEval Runnercom.clauxel.evalscopebench/evalscopebench-mcp
Маркетплейс сообщества danielrosehill/claude-code-plugins Удалён 2026-11-05
Версия: 0.1.0
Форки (GitHub): 0
Звёзды (GitHub): 4
Не помечен · Впервые замечен
Нет на витрине
Official MCP Registry Нет на витрине Опубликован
Версия: 1.0.0
Форки (GitHub): 0
Звёзды (GitHub): 0
Не помечен · Впервые замечен

Каждое число принадлежит своей витрине и никогда не складывается с числами других витрин. Если витрина число не публикует, мы его не показываем: нет числа не значит ноль.

Факты рядом

Eval Runner или com.clauxel.evalscopebench/evalscopebench-mcp
ФактEval Runnerбольше не публикуется · com.clauxel.evalscopebench/evalscopebench-mcp
Витрины, где он есть (различается)01
Звёзды (GitHub) (различается)40
Форки (GitHub)00
Последний релизНе опубликованоНе опубликовано
Где работает (различается)Ставится как пакет плагиновУдалённый сервер (evalscopebench.clauxel.com/mcp)
Транспорт (различается)Не указаноStreamable HTTP
Объявляет инструментовНе опубликованоНе опубликовано
Просит переменных окруженияНе опубликованоНе опубликовано
Части набора (различается)14Не набор
Лицензия (различается)MITНе указано
Репозиторий (различается)github.com/danielrosehill/claude-eval-runner-plugingithub.com/clauxel/evalscope-benchmark-mcp-mcp
Изменения за последние 7 дней (различается)20
Впервые замечен (различается)2026-10-152026-10-11
Endpoint на последней проверке (различается)нет remote endpoint, который мы проверяемНет ответа HTTP при последней проверке (9 ч назад)

Строки, где они различаются, выделены фоном и жирным. Лучшее и худшее значение не отмечены: плагин, которого больше нет на витринах, показан по последним известным данным, а их мы не ранжируем против текущих цифр.

Чем заменить «Eval Runner»

Плагины, которые ещё публикуются и ближе всего к нему по смыслу названий, описаний, инструментов и скиллов. Сравнимые, а не рекомендованные.

  • DeepEval

    Skills for adding DeepEval evaluations, tracing, datasets, Confident AI reports, and iterative improvement loops to AI applications.

    от confident-ai · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Community GitHub marketplaces · Решает почти ту же задачу

  • langsmith-skills

    Agent skills for observing and evaluating LLM applications with LangSmith

    от LangChain · Пакет плагинов

    Опубликован: Community GitHub marketplaces · Решает почти ту же задачу

  • memoriant-eval-sandbox-skill

    AI agent evaluation sandbox for Claude Code. Holdout scenario testing with Doer/Judge/Adversary/Observer roles, probabilistic satisfaction scoring, and append-only JSONL audit…

    от NathanMaine · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-community · Решает почти ту же задачу

  • evaluate-openai

    Set up evaluation of an OpenAI Java SDK tool-calling agent using Dokimos

    от Dokimos Contributors · Пакет плагинов

    Опубликован: Community GitHub marketplaces · Решает почти ту же задачу

  • agent-evals-and-observability

    Design, run, review, or release framework- and vendor-neutral evaluations and observability for AI agents. Use when defining agent evals, datasets, graders, trajectory review…

    от magnus919 · Пакет плагинов

    Опубликован: Community GitHub marketplaces · Решает почти ту же задачу

  • promptfoo-evaluation

    Configures and runs LLM evaluation using Promptfoo framework. Use when setting up prompt testing, creating evaluation configs (promptfooconfig.yaml), writing Python custom…

    от daymade · Пакет плагинов

    Опубликован: Community GitHub marketplaces · Решает почти ту же задачу

Его карточка и похожие плагины по витринам

Что каждый говорит о себе

Eval Runner

Своими словами, на витрине Community GitHub marketplaces:

Scaffolding, running, documenting, and publishing AI evaluations. Ships skills and commands for setting up eval workspaces, creating custom evals (or adapting existing frameworks/benchmarks), running them, and publishing evals or datasets. Bundles a curated ground-truth list of open-source eval tools and benchmarks as a reference data source.

com.clauxel.evalscopebench/evalscopebench-mcp

Своими словами, на витрине Official MCP Registry:

A paid remote MCP for AI SDK benchmark dashboard, built to return verdicts, receipts, usage logs, an

Как запустить каждый

Eval Runner

Нет данных для автоматической команды: из того, что объявляют витрины, нельзя однозначно понять, как его подключить.

com.clauxel.evalscopebench/evalscopebench-mcp Как удалённый MCP-сервер

Claude Code
claude mcp add --transport http evalscopebench-mcp https://evalscopebench.clauxel.com/mcp

Команды построены только из того, что объявляют витрины; полный набор для всех клиентов есть на карточке каждого.

Remote endpoint, который мы проверяем, есть только у com.clauxel.evalscopebench/evalscopebench-mcp. Как мы проверяем endpoint

Какие инструменты объявляет каждый

Витрины ни одного из них не публикуют список инструментов, сравнивать нечего.

Какие настройки просит каждый

Витрины ни одного из них не публикуют настройки, которые он просит.

Что умеет: Eval Runner · Что умеет: com.clauxel.evalscopebench/evalscopebench-mcp · Сравнить два других плагина

Данные витрины Community GitHub marketplaces. Данные витрины Official MCP Registry. Числа взяты из наших регулярных обходов витрин, последняя проверка . Контакты издателей плагинов мы не публикуем.

Откуда данные: как устроен каталог