Ext Ops Panel
Открыть панель

evaluate-agent

Set up evaluation of AI agents with tool call validation, correctness checks, and task completion using Dokimos

Пакет плагинов · от Dokimos Contributors

Коротко

evaluate-agent: пакет плагинов для ИИ-инструментов разработки, издатель Dokimos Contributors. Витрин, которые мы читаем и где он опубликован: 1 (Community GitHub marketplaces). Последнее изменение мы зафиксировали 2026-10-19. Данные нашего прохода по витринам на 2026-10-21.

Что просит

  • Ставится как пакет плагинов

Ни одна из витрин, которые мы читаем, не публикует его инструменты или настройки, которые он просит.

Что объявляет, просит и запускает, полностью

Устанавливайте плагины только от разработчиков, которым доверяете. Мы показываем то, что публикуют витрины, и не проверяем плагины.

Работает с

  • Claude Code

По маркетплейсам, где он опубликован, и объявленному транспорту MCP, как их документирует каждый клиент. Плагины мы не тестируем.

Подключить

Команды и конфигурации собраны только из того, что объявляют витрины. Мы не запускаем их за вас и не проверяем плагины.

Как плагин Claude Code

Собрано из того, что объявляет Community GitHub marketplaces.

Claude CodeВнутри сессии Claude Code
/plugin marketplace add dokimos-dev/dokimos
/plugin install evaluate-agent@dokimos

Где опубликован

ВитринаСтатусВерсияЧислаПроверенВпервые замечен
Маркетплейс сообщества dokimos-dev/dokimos (Открыть исходники на GitHub) Опубликован 0.2.0 Форки (GitHub): 5
Звёзды (GitHub): 60
Не помечен

Каждое число принадлежит своей витрине и никогда не складывается с числами других витрин. Если витрина число не публикует, мы его не показываем: нет числа не значит ноль.

Есть в одном маркетплейсе сообщества
ВитринаРепозиторийЗвёзды (GitHub)
dokimos dokimos-dev/dokimos 60

Какие маркетплейсы мы читаем и как их проверяем

Как менялись числа

Форки (GitHub)
unchanged с 19.10
История с витрины Community GitHub marketplaces
  1. 2026-10-195
  2. 2026-10-215

Каждая точка: день, когда мы прочитали другое число; ровные участки: дни, когда число не менялось. Числа разных витрин никогда не складываются.

Что входит в пакет

Так опубликовано на витрине Community GitHub marketplaces.

Скиллы: 1

  • evaluate-agent

Что менялось

  1. Стал продуктом, за которым мы следим
  2. Community GitHub marketplaces: появился

Похожие плагины

Продукты, чьи собственные названия, описания, инструменты и скиллы ближе всего по смыслу к этому, на всех витринах, которые мы читаем. Близость упорядочена только внутри этого списка.

  • VerifyAX

    Evaluate, benchmark, and simulate AI agents on the VerifyAX agent-evaluation platform.

    от verifyax · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • evaluate-openai

    Set up evaluation of an OpenAI Java SDK tool-calling agent using Dokimos

    от Dokimos Contributors · Пакет плагинов

    Опубликован: Community GitHub marketplaces · Решает почти ту же задачу

  • eval-genius

    Decide, design, gate, judge, and defend evaluations for LLM, agent, and retrieval systems. Not ordinary unit tests.

    от Alex Greenshpun · Пакет плагинов

    Опубликован: Community GitHub marketplaces · Решает почти ту же задачу

  • Myagi - Open Agent Registry

    Score any website's AI-agent readiness. Open Agent Registry scanner + platform tools.

    от myagi.bot · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • memoriant-eval-sandbox-skill

    AI agent evaluation sandbox for Claude Code. Holdout scenario testing with Doer/Judge/Adversary/Observer roles, probabilistic satisfaction scoring, and append-only JSONL audit…

    от NathanMaine · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-community · Решает почти ту же задачу

  • IA-QA — 130+ QA & Dev Tools for AI Agents

    130+ QA & dev tools for AI agents: prompt injection, RAG testing, VLM eval, guardrails. Free.

    от JcJamet · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • DeepEval

    Skills for adding DeepEval evaluations, tracing, datasets, Confident AI reports, and iterative improvement loops to AI applications.

    от confident-ai · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Community GitHub marketplaces · Решает почти ту же задачу

  • evalview-mcp io.github.hidai25/evalview-mcp

    Regression testing for AI agents. Golden baselines, CI/CD, LangGraph, CrewAI, OpenAI, Claude.

    от hidai25 · MCP-сервер

    Опубликован: Official MCP Registry, Claude Code: claude-plugins-community · Решает почти ту же задачу

  • frootai-evaluation-skills

    FrootAI evaluation skills — benchmarking, test generation, load testing, SLA checks, and quality gates. (152 skills)

    от frootai · Пакет плагинов

    Опубликован: Community GitHub marketplaces · Решает почти ту же задачу

  • Bench Agent Discovery

    Discover public AI agents, reusable recipes, and trusted benchmark evidence by task.

    от VirajMishra1 · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

Похожие плагины по витринам

Тот же вопрос к каждой витрине по отдельности: есть ли там аналог этого плагина?

Есть на витрине Claude Code: claude-plugins-community (5)
  • memoriant-eval-sandbox-skill

    AI agent evaluation sandbox for Claude Code. Holdout scenario testing with Doer/Judge/Adversary/Observer roles, probabilistic satisfaction scoring, and append-only JSONL audit…

    от NathanMaine · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-community · Решает почти ту же задачу

  • evalview-mcp io.github.hidai25/evalview-mcp

    Regression testing for AI agents. Golden baselines, CI/CD, LangGraph, CrewAI, OpenAI, Claude.

    от hidai25 · MCP-сервер

    Опубликован: Official MCP Registry, Claude Code: claude-plugins-community · Решает почти ту же задачу

  • joai

    JoAi is a platform for creating and managing your own AI agents.

    от joai-plugins · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-community · Решает почти ту же задачу

  • giskard-skills

    Skills to streamline adoption and usage of Giskard products (OSS, Hub, Guards) for testing, evaluating, and red-teaming AI agents.

    от Giskard-AI · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-community · Решает почти ту же задачу

  • adaptive-agent

    Make your AI agent get stronger with use. Includes two skills: /skill-review (periodic audit of all skills for staleness, missing gotchas, and improvements) and…

    от truenorth-lj · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-community · Решает почти ту же задачу

Есть на витрине Claude Code: claude-plugins-official (5)
  • DeepEval

    Skills for adding DeepEval evaluations, tracing, datasets, Confident AI reports, and iterative improvement loops to AI applications.

    от confident-ai · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Community GitHub marketplaces · Решает почти ту же задачу

  • atomic-agents

    Comprehensive development workflow for building AI agents with the Atomic Agents framework. Includes specialized agents for schema design, architecture planning, code review, and…

    от BrainBlend-AI · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Claude Code: claude-plugins-community, Community GitHub marketplaces · Решает почти ту же задачу

  • outputai

    Output.ai workflow development toolkit for Claude Code. Adds 5 specialist agents (planner, builder, debugger, prompt writer, quality reviewer), 40+ slash-command skills covering…

    от growthxai · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Claude Code: claude-plugins-community, Community GitHub marketplaces · Решает почти ту же задачу

  • aws-agents

    Build, deploy, and operate AI agents on AWS. Skills for scaffolding agents with Amazon Bedrock AgentCore, connecting tools, memory, policies, evaluation, debugging, and production…

    от aws · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Claude Code: claude-plugins-community, Community GitHub marketplaces · Решает почти ту же задачу

  • langfuse

    Skills for working with Langfuse, the open-source LLM engineering platform for tracing, prompt management, and evaluation.

    от langfuse · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Claude: knowledge-work-plugins, Claude Code: claude-plugins-community · Решает почти ту же задачу

Есть на витрине Claude: knowledge-work-plugins (5)
  • AI-Firstify

    AI-first project auditor and re-engineer based on the 9 design principles and 7 design patterns from the TechWolf AI-First Bootcamp

    от techwolf-ai · Пакет плагинов

    Опубликован: Claude: knowledge-work-plugins, Claude Code: claude-plugins-community, Community GitHub marketplaces · Решает почти ту же задачу

  • langfuse

    Skills for working with Langfuse, the open-source LLM engineering platform for tracing, prompt management, and evaluation.

    от langfuse · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Claude: knowledge-work-plugins, Claude Code: claude-plugins-community · Решает почти ту же задачу

  • datarobot-agent-skills

    DataRobot skills for AI/ML workflows — model training, deployment, predictions, feature engineering, monitoring, explainability, data preparation, App Framework CI/CD, and…

    от datarobot-oss · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Claude: knowledge-work-plugins, Community GitHub marketplaces · Решает почти ту же задачу

  • Synthflow

    Connects Claude Code to the Synthflow AI voice-agent platform through its hosted MCP server, with skills for reviewing calls and auditing agent prompts, plus a docs-search…

    от SynthFlowAI · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Claude: knowledge-work-plugins, Claude Code: claude-plugins-community · Решает почти ту же задачу

  • Pixeltable

    Build multimodal AI applications with Pixeltable -- tables, computed columns, embedding search, UDFs, tool-calling agents, and 25+ AI provider integrations.

    от pixeltable · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Claude: knowledge-work-plugins · Решает почти ту же задачу

Есть на витрине Codex: openai-curated (openai/plugins) (5)
  • Plugin Eval

    Evaluate Codex skills and plugins from chat with a beginner-friendly start command, local-first reports, token budget explanations, and guided benchmarking.

    от OpenAI Codex · Пакет плагинов

    Опубликован: Codex: openai-curated (openai/plugins) · Решает почти ту же задачу

  • OpenAI Developers

    Build with OpenAI APIs, Agents SDK, and ChatGPT Apps, and create and save OpenAI API keys from Codex.

    от OpenAI · Пакет плагинов

    Опубликован: Codex: openai-curated (openai/plugins) · Решает почти ту же задачу

  • NVIDIA

    Skills for NVIDIAs ecosystem spans GPU acceleration, CUDA, AI agents, inference, robotics, Physical AI, Omniverse, and simulation. This plugin helps you understand the pieces…

    от NVIDIA · Пакет плагинов

    Опубликован: Codex: openai-curated (openai/plugins) · Решает почти ту же задачу

  • Superpowers

    An agentic skills framework & software development methodology that works: planning, TDD, debugging, and collaboration workflows.

    от Jesse Vincent · Пакет плагинов

    Опубликован: Codex: openai-curated (openai/plugins) · Решает похожую задачу

  • crowdstrike-falcon-foundry

    CrowdStrike Falcon Foundry development skills for building cybersecurity applications on the Falcon platform. Includes UI development, collections, functions, workflows, API…

    от CrowdStrike · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Codex: openai-curated (openai/plugins), Copilot CLI: github/awesome-copilot, Community GitHub marketplaces, Claude Code: claude-plugins-community · Решает похожую задачу

Есть на витрине Community GitHub marketplaces (5)
  • evaluate-openai

    Set up evaluation of an OpenAI Java SDK tool-calling agent using Dokimos

    от Dokimos Contributors · Пакет плагинов

    Опубликован: Community GitHub marketplaces · Решает почти ту же задачу

  • eval-genius

    Decide, design, gate, judge, and defend evaluations for LLM, agent, and retrieval systems. Not ordinary unit tests.

    от Alex Greenshpun · Пакет плагинов

    Опубликован: Community GitHub marketplaces · Решает почти ту же задачу

  • DeepEval

    Skills for adding DeepEval evaluations, tracing, datasets, Confident AI reports, and iterative improvement loops to AI applications.

    от confident-ai · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Community GitHub marketplaces · Решает почти ту же задачу

  • frootai-evaluation-skills

    FrootAI evaluation skills — benchmarking, test generation, load testing, SLA checks, and quality gates. (152 skills)

    от frootai · Пакет плагинов

    Опубликован: Community GitHub marketplaces · Решает почти ту же задачу

  • agent-governance

    Govern and audit AI agent systems with policy enforcement, OWASP Agentic Security Initiative controls, supply-chain integrity, and evidence-quality gates. Use when designing…

    от Copilot Primitives Maintainers · Пакет плагинов

    Опубликован: Community GitHub marketplaces · Решает почти ту же задачу

Есть на витрине Copilot CLI: github/awesome-copilot (5)
  • ai-team-orchestration

    Run a lightweight, role-separated AI development team with flexible tools, developer-selected models, proportionate planning, and optional QA.

    от Denis Evdokimov · Пакет плагинов

    Опубликован: Copilot CLI: github/awesome-copilot · Решает почти ту же задачу

  • doublecheck

    Three-layer verification pipeline for AI output. Extracts claims, finds sources, and flags hallucination risks so humans can verify before acting.

    от Awesome Copilot Community · Пакет плагинов

    Опубликован: Copilot CLI: github/awesome-copilot · Решает почти ту же задачу

  • agent-council

    A runtime-portable 5-agent quality gate that adjudicates text artifacts before they ship. Five role-conditioned LLM deliberators run a 2-round async protocol with cross-read…

    от Avyayalaya · Пакет плагинов

    Опубликован: Copilot CLI: github/awesome-copilot, Community GitHub marketplaces · Решает почти ту же задачу

  • edge-ai-tasks

    Task Researcher and Task Planner for intermediate to expert users and large codebases - Brought to you by microsoft/edge-ai

    от Awesome Copilot Community · Пакет плагинов

    Опубликован: Copilot CLI: github/awesome-copilot · Решает почти ту же задачу

  • skills-for-copilot-studio

    Microsoft Copilot Studio plugins for AI coding agents

    от microsoft · Пакет плагинов

    Опубликован: Copilot CLI: github/awesome-copilot · Решает почти ту же задачу

Есть на витрине Copilot CLI: github/copilot-plugins (5)
  • microsoft-365-agents-toolkit

    Toolkit for building Microsoft 365 Copilot declarative agents — scaffolding, JSON manifest development, and capability configuration.

    от microsoft · Пакет плагинов

    Опубликован: Copilot CLI: github/copilot-plugins · Решает почти ту же задачу

  • workiq-productivity

    WorkIQ productivity skills powered by the local WorkIQ CLI — read-only insights across email, meetings, calendar, Teams, SharePoint, projects, and people.

    от microsoft · Пакет плагинов

    Опубликован: Copilot CLI: github/copilot-plugins · Решает почти ту же задачу

  • workiq

    Query Microsoft 365 data with natural language — emails, meetings, documents, Teams messages, and more.

    от microsoft · Пакет плагинов

    Опубликован: Copilot CLI: github/copilot-plugins · Решает почти ту же задачу

  • advanced-security

    Advanced Security plugin for GitHub Copilot.

    от github · Пакет плагинов

    Опубликован: Copilot CLI: github/copilot-plugins · Решает почти ту же задачу

  • model-apps

    Build and deploy Power Apps generative pages for model-driven apps with specialist agents for planning, entity creation, and parallel code generation. Requires PAC CLI >= 2.7.0…

    от microsoft · Пакет плагинов

    Опубликован: Copilot CLI: github/copilot-plugins · Решает похожую задачу

Есть на витрине Cursor: cursor/plugins (5)
  • Ralph Loop

    Iterative self-referential AI loops using the Ralph Wiggum technique.

    от Cursor · Пакет плагинов

    Опубликован: Cursor: cursor/plugins · Решает почти ту же задачу

  • Advisor

    Consult a stronger model before major decisions, when stuck, and before declaring done.

    от Cursor · Пакет плагинов

    Опубликован: Cursor: cursor/plugins · Решает почти ту же задачу

  • Continual Learning

    Incremental transcript-driven memory updates for AGENTS.md using high-signal bullet points only.

    от Eric Zakariasson · Пакет плагинов

    Опубликован: Cursor: cursor/plugins · Решает почти ту же задачу

  • Agent Compatibility

    CLI-backed repo compatibility scans plus agents that audit startup, validation, and docs against reality.

    от Cursor · Пакет плагинов

    Опубликован: Cursor: cursor/plugins · Решает почти ту же задачу

  • CLI for Agents

    Patterns for designing CLIs that coding agents can run reliably: flags, help with examples, pipelines, errors, idempotency, dry-run.

    от Eric Zakariasson · Пакет плагинов

    Опубликован: Cursor: cursor/plugins · Решает почти ту же задачу

Есть на витрине Docker MCP Catalog (5)
  • Wayfound

    Wayfound’s MCP server allows business users to govern, supervise, and improve AI Agents.

    от docker · MCP-сервер

    Опубликован: Docker MCP Catalog · Решает почти ту же задачу

  • Opik

    Read and score Opik traces, experiments, datasets and prompts from your AI assistant.

    от comet-ml · MCP-сервер

    Опубликован: Official MCP Registry, Docker MCP Catalog · Решает почти ту же задачу

  • Sequential Thinking (Reference)

    Dynamic and reflective problem-solving through thought sequences.

    от modelcontextprotocol · MCP-сервер

    Опубликован: Docker MCP Catalog · Решает почти ту же задачу

  • Zen

    Bridges multiple AI models and CLIs, enabling orchestrated workflows across Claude Code, Gemini CLI, Codex CLI, and other AI development tools.

    от BeehiveInnovations · MCP-сервер

    Опубликован: Docker MCP Catalog · Решает почти ту же задачу

  • AWS Bedrock AgentCore

    Documentation on AgentCore platform services.

    от awslabs · MCP-сервер

    Опубликован: Docker MCP Catalog · Решает почти ту же задачу

Есть на витрине Official MCP Registry (5)
  • VerifyAX

    Evaluate, benchmark, and simulate AI agents on the VerifyAX agent-evaluation platform.

    от verifyax · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • Myagi - Open Agent Registry

    Score any website's AI-agent readiness. Open Agent Registry scanner + platform tools.

    от myagi.bot · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • IA-QA — 130+ QA & Dev Tools for AI Agents

    130+ QA & dev tools for AI agents: prompt injection, RAG testing, VLM eval, guardrails. Free.

    от JcJamet · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • evalview-mcp io.github.hidai25/evalview-mcp

    Regression testing for AI agents. Golden baselines, CI/CD, LangGraph, CrewAI, OpenAI, Claude.

    от hidai25 · MCP-сервер

    Опубликован: Official MCP Registry, Claude Code: claude-plugins-community · Решает почти ту же задачу

  • Bench Agent Discovery

    Discover public AI agents, reusable recipes, and trusted benchmark evidence by task.

    от VirajMishra1 · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

Есть на витрине npm registry (MCP servers) (5)
  • Delimit

    One workspace for every AI coding assistant. Shared tasks, memory, and governance.

    от delimit-ai · MCP-сервер

    Опубликован: Official MCP Registry, npm registry (MCP servers), Community GitHub marketplaces · Решает почти ту же задачу

  • mcp com.dechonet/mcp

    30 security tools for AI agents: phishing links, exposure maps, DNS, SSL, PQC, history, pivots.

    от dechonet.com · MCP-сервер

    Опубликован: Official MCP Registry, npm registry (MCP servers) · Решает почти ту же задачу

  • dealflowpro io.github.jbechtel-97/dealflowpro

    Multifamily real estate deal analysis — cap rate, DSCR, IRR, DFP Score, max offer price

    от jbechtel-97 · MCP-сервер

    Опубликован: Official MCP Registry, npm registry (MCP servers) · Решает похожую задачу

  • depwire io.github.atef-ataya/depwire

    Dependency graph + 24 MCP tools. Impact analysis, simulation, security, agent coordination

    от atef-ataya · MCP-сервер

    Опубликован: Official MCP Registry, npm registry (MCP servers) · Решает похожую задачу

  • DEEPBOM

    Browser-local and CLI static evidence for deployed AI model artifacts.

    от JunHwan-Kwon · MCP-сервер

    Опубликован: Official MCP Registry, npm registry (MCP servers) · Решает похожую задачу

Найдено по смыслу, а не по общему коду или репозиторию: похожие плагины остаются разными продуктами, и это не обзор и не рекомендация.

Хотите такой знак у своего плагина в нашем каталоге?

Докажите, что поддерживаете его, файлом в репозитории, файлом на вашем домене или DNS-записью, и сможете показать этот знак на карточке, а ещё живые баннеры для сайта и README. Как проходит подтверждение

Ещё вы будете получать уведомления, когда витрина добавит плагин, снимет его, изменит отметку verified или список того, что он просит, а его удалённый endpoint встанет на мониторинг как веб-сервис.

Данные витрины Community GitHub marketplaces. Числа взяты из наших регулярных обходов витрин, последняя проверка . Контакты издателей плагинов мы не публикуем.

Откуда данные: как устроен каталог