Ext Ops Panel
Открыть панель

io.github.Grubbomatic/crawl-readiness

Audit any site for 50+ AI crawlers, generate llms.txt, robots.txt and schema, track AI mentions.

MCP-сервер · от Grubbomatic

Коротко

io.github.Grubbomatic/crawl-readiness: MCP-сервер, издатель Grubbomatic. Витрин, которые мы читаем и где он опубликован: 1 (Official MCP Registry). Последнее изменение мы зафиксировали 2026-10-12. Данные нашего прохода по витринам на 2026-10-13.

Что просит

  • Работает на вашем компьютере
  • Секретов: 1
  • Настроек: 2

Требует: CRAWL_READINESS_API_KEY (секрет)

Что объявляет, просит и запускает, полностью

Устанавливайте плагины только от разработчиков, которым доверяете. Мы показываем то, что публикуют витрины, и не проверяем плагины.

Пакет

npm crawl-readiness-mcp (crawl-readiness-mcp на npm)

  • Загрузки npm за неделю: 64 (2026-10-12)
  • Загрузки npm за месяц: 1 464 (2026-10-12)
  • Последняя версия на npm: 0.2.5, опубликована 2026-10-12
  • Объявленной версии 0.2.5 нет на npm

Данные npm взяты из публичного реестра npm (registry.npmjs.org, api.npmjs.org). Каждое число принадлежит своему реестру и никогда не складывается с другим. Реестр, который не публикует число, ничего не показывает: нет числа не значит ноль.

Работает с

  • Claude Code
  • Codex
  • Cursor
  • VS Code
  • Copilot CLI

По маркетплейсам, где он опубликован, и объявленному транспорту MCP, как их документирует каждый клиент. Плагины мы не тестируем.

Подключить

Команды и конфигурации собраны только из того, что объявляют витрины. Мы не запускаем их за вас и не проверяем плагины.

Как локальный MCP-сервер: пакет npm

Собрано из того, что объявляет Official MCP Registry.

Claude CodeТерминал
claude mcp add --env "CRAWL_READINESS_API_KEY=<YOUR_CRAWL_READINESS_API_KEY>" --transport stdio crawl-readiness -- npx -y crawl-readiness-mcp
Codex~/.codex/config.toml
[mcp_servers.crawl-readiness]
command = "npx"
args = ["-y", "crawl-readiness-mcp"]

[mcp_servers.crawl-readiness.env]
CRAWL_READINESS_API_KEY = "<YOUR_CRAWL_READINESS_API_KEY>"
Cursor~/.cursor/mcp.json
{
  "mcpServers": {
    "crawl-readiness": {
      "command": "npx",
      "args": [
        "-y",
        "crawl-readiness-mcp"
      ],
      "env": {
        "CRAWL_READINESS_API_KEY": "<YOUR_CRAWL_READINESS_API_KEY>"
      }
    }
  }
}

Замените значения в угловых скобках своими. Мы показываем имена настроек, но не значения.

Необязательные настройки, которые он тоже перечисляет: CRAWL_READINESS_API_BASE.

Где опубликован

ВитринаСтатусВерсияЧислаПроверенВпервые замечен
Official MCP Registry (Открыть запись реестра) Опубликован 0.2.5 Загрузки за месяц (npm): 1 464
Загрузки за неделю (npm): 64
Форки (GitHub): 0
Звёзды (GitHub): 0
Не помечен

Каждое число принадлежит своей витрине и никогда не складывается с числами других витрин. Если витрина число не публикует, мы его не показываем: нет числа не значит ноль.

Что менялось

  1. Official MCP Registry: выпущена версия 0.2.5 (была 0.2.4)

Похожие плагины

Продукты, чьи собственные названия, описания, инструменты и скиллы ближе всего по смыслу к этому, на всех витринах, которые мы читаем. Близость упорядочена только внутри этого списка.

  • ai-crawler-readiness com.lumnika/ai-crawler-readiness

    Can AI crawlers read this site? GPTBot/ClaudeBot verdicts, robots vs edge blocking, 47k-domain index

    от lumnika.com · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • NM Signals: AI crawler audit

    Audit webpage access for AI crawlers. API key and Premium or Partner plan required.

    от newmediamadman · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • alice io.tranx/alice

    Audit any site's AI visibility from your assistant: crawler access, rendering, and schema.

    от tranx.io · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • ai-visibility com.lastminutedealshq/ai-visibility

    AI-search-visibility tools: check crawler access, generate llms.txt, lint robots.txt, census data.

    от lastminutedealshq.com · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • Siteiz

    Check which AI crawlers a site allows and see pages the way AI crawlers do. Free, read-only.

    от siteiz.com · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • ActableSite AI Crawler Monitor

    Check AI crawler robots.txt policy and monitor public-site policy, sitemap, and llms.txt changes.

    от actablesite.com · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • AI Visibility Audit — Can AI crawlers read and cite your site?

    One-call audit: robots.txt AI-bot rules, llms.txt, JSON-LD, meta tags, sitemap. Score plus fixes.

    от ai-visibility.rowb.app · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • mcp-agent-accessibility-auditor com.mambabuilt/mcp-agent-accessibility-auditor

    Audit whether an AI agent can read a site: llms.txt, robots AI rules, structured data.

    от mambabuilt.com · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • OpenAEO

    Asks 8 AI crawlers for your page, checks who really answered, and writes the fixes. MIT.

    от openaeo.dev · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • seegeo com.see-geo/seegeo

    Audit any website for AI visibility: graded report, findings with fixes, AI crawler access check.

    от see-geo.com · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

Похожие плагины по витринам

Тот же вопрос к каждой витрине по отдельности: есть ли там аналог этого плагина?

Есть на витрине Claude Code: claude-plugins-community (5)
  • claude-seo-and-geo-site-audit

    Audits public-facing websites across accessibility, SEO, GEO (AI search readiness), and usability -- evaluates 17 checks, assigns a letter grade, and generates a client-ready PDF…

    от rjspence3 · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-community · Решает почти ту же задачу

  • geo-audit-by-alignment-ai

    Free AI visibility audit for any website. Discover how ChatGPT, Claude, and Perplexity perceive your brand across 5 dimensions and 30 checks — then get a one-click fix plan…

    от Alignment-GEOAI · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-community · Решает почти ту же задачу

  • magpie

    Magpie website intelligence over a hosted MCP server. Free: a single-page audit covering overall score, Core Web Vitals, on-page SEO, security headers, robots/sitemap, and…

    от jezweb · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-community · Решает почти ту же задачу

  • akii-seo-ai-search-optimizer

    Free SEO, AEO, and GEO toolkit by Akii. Audit websites, plan content strategy, optimize pages, generate schema markup, cluster keywords, and track AI visibility across ChatGPT…

    от akii-technologies-ltd · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-community · Решает почти ту же задачу

  • webscan

    Client-side web security scanner — detects secrets, vulnerable JS libraries, misconfigurations, XSS sinks, CORS issues, and more

    от enderphan94 · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-community · Решает почти ту же задачу

Есть на витрине Claude Code: claude-plugins-official (5)
  • zyte-web-data

    Web scraping skills for Claude Code powered by the Zyte API — scrape sites, generate and run Scrapy spiders, define extraction schemas, and ship to Scrapy Cloud.

    от zytedata · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Claude Code: claude-plugins-community · Решает почти ту же задачу

  • playwright-mcp io.github.microsoft/playwright-mcp

    Playwright Tools for MCP

    от microsoft · MCP-сервер

    Опубликован: Official MCP Registry, Claude Code: claude-plugins-official, Cursor: cursor/plugins, Docker MCP Catalog · Решает почти ту же задачу

  • brightdata-plugin

    Web scraping, Google search, structured data extraction, and MCP server integration powered by Bright Data. Includes 7 skills: scrape any webpage as markdown (with bot…

    от brightdata · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Claude: knowledge-work-plugins, Claude Code: claude-plugins-community, Community GitHub marketplaces · Решает почти ту же задачу

  • browser-use

    Give Claude a real browser — your Chrome or a Browser Use Cloud browser. Use it whenever a task involves a website or web app: browsing, scraping and data extraction, filling…

    от browser-use · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Claude: knowledge-work-plugins, Community GitHub marketplaces · Решает почти ту же задачу

  • firecrawl

    Web scraping and crawling powered by Firecrawl. Turn any website into clean, LLM-ready markdown or structured data. Scrape single pages, crawl entire sites, search the web, and…

    от firecrawl · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Claude Code: claude-plugins-community, Community GitHub marketplaces · Решает почти ту же задачу

Есть на витрине Claude: knowledge-work-plugins (5)
  • SearchFit SEO

    Free AI-powered SEO toolkit — audit websites, plan content strategy, optimize pages, generate schema markup, cluster keywords, and track AI visibility. Works with any website or…

    от searchfit · Пакет плагинов

    Опубликован: Claude: knowledge-work-plugins, Claude Code: claude-plugins-community · Решает почти ту же задачу

  • brightdata-plugin

    Web scraping, Google search, structured data extraction, and MCP server integration powered by Bright Data. Includes 7 skills: scrape any webpage as markdown (with bot…

    от brightdata · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Claude: knowledge-work-plugins, Claude Code: claude-plugins-community, Community GitHub marketplaces · Решает почти ту же задачу

  • browser-use

    Give Claude a real browser — your Chrome or a Browser Use Cloud browser. Use it whenever a task involves a website or web app: browsing, scraping and data extraction, filling…

    от browser-use · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Claude: knowledge-work-plugins, Community GitHub marketplaces · Решает почти ту же задачу

  • TinyFish

    The complete web toolkit for your agent. Search the web and get answers in milliseconds. Fetch any URL and get clean markdown content back. Send a browser agent to navigate sites…

    от tinyfish-io · Пакет плагинов

    Опубликован: Claude: knowledge-work-plugins, Claude Code: claude-plugins-community · Решает почти ту же задачу

  • stackhawk-hawkscan

    Configure, run, and interpret HawkScan DAST results inside Claude Code. Generates stackhawk.yml configs, runs scans via CLI or Docker, and transforms security findings into…

    от stackhawk · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Claude: knowledge-work-plugins · Решает почти ту же задачу

Есть на витрине Codex: openai-curated (openai/plugins) (5)
  • Cloudflare

    Cloudflare platform plugin with curated skills for Workers, Wrangler, and Agents SDK plus the official Cloudflare API MCP server.

    от Cloudflare · Пакет плагинов

    Опубликован: Codex: openai-curated (openai/plugins) · Решает почти ту же задачу

  • Codex Security

    Codex Security workflows for security scans, analysis, and investigation.

    от OpenAI · Пакет плагинов

    Опубликован: Codex: openai-curated (openai/plugins) · Решает почти ту же задачу

  • Plugin Eval

    Evaluate Codex skills and plugins from chat with a beginner-friendly start command, local-first reports, token budget explanations, and guided benchmarking.

    от OpenAI Codex · Пакет плагинов

    Опубликован: Codex: openai-curated (openai/plugins) · Решает почти ту же задачу

  • Datadog (Preview)

    Available for US1 customers only. Analyze, investigate, and act on your Datadog telemetry directly from ChatGPT using natural language. Ask questions about your production…

    от Datadog · Пакет плагинов

    Опубликован: Codex: openai-curated (openai/plugins) · Решает почти ту же задачу

  • crowdstrike-falcon-foundry

    CrowdStrike Falcon Foundry development skills for building cybersecurity applications on the Falcon platform. Includes UI development, collections, functions, workflows, API…

    от CrowdStrike · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Codex: openai-curated (openai/plugins), Copilot CLI: github/awesome-copilot, Community GitHub marketplaces, Claude Code: claude-plugins-community · Решает почти ту же задачу

Есть на витрине Community GitHub marketplaces (5)
  • web

    Browser automation and web page analysis skills using playwright-cli: connect via CDP, probe bot protection, dismiss overlays, capture DOM trees, reduce pages to skeletons…

    от Adobe · Пакет плагинов

    Опубликован: Community GitHub marketplaces · Решает почти ту же задачу

  • Google Search Console

    Google Search Console: SEO audits, performance queries, URL inspection, indexing checks.

    от acamolese · MCP-сервер

    Опубликован: Official MCP Registry, Community GitHub marketplaces · Решает почти ту же задачу

  • brightdata-plugin

    Web scraping, Google search, structured data extraction, and MCP server integration powered by Bright Data. Includes 7 skills: scrape any webpage as markdown (with bot…

    от brightdata · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Claude: knowledge-work-plugins, Claude Code: claude-plugins-community, Community GitHub marketplaces · Решает почти ту же задачу

  • browser-use

    Give Claude a real browser — your Chrome or a Browser Use Cloud browser. Use it whenever a task involves a website or web app: browsing, scraping and data extraction, filling…

    от browser-use · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Claude: knowledge-work-plugins, Community GitHub marketplaces · Решает почти ту же задачу

  • qa

    QA-test a website or app and return a 1-5 quality score with evidence. Drives a Browser Use cloud browser and tunnels localhost automatically. Run as /qa <url-or-localhost-port>…

    от Browser Use · Пакет плагинов

    Опубликован: Community GitHub marketplaces · Решает почти ту же задачу

Есть на витрине Copilot CLI: github/awesome-copilot (5)
  • apify

    Helps devs extract data from any website with thousands of trusted scrapers, crawlers, and automations from Apify Store. Integrate ready-made Actors to access all popular social…

    от apify · Пакет плагинов

    Опубликован: Copilot CLI: github/awesome-copilot · Решает почти ту же задачу

  • doublecheck

    Three-layer verification pipeline for AI output. Extracts claims, finds sources, and flags hallucination risks so humans can verify before acting.

    от Awesome Copilot Community · Пакет плагинов

    Опубликован: Copilot CLI: github/awesome-copilot · Решает почти ту же задачу

  • BLEA

    Safe BLE diagnostics, evidence workflows, and guarded automation for AI agents.

    от Nitmi · MCP-сервер

    Опубликован: Official MCP Registry, Copilot CLI: github/awesome-copilot · Решает почти ту же задачу

  • Chrome DevTools MCP

    MCP server for Chrome DevTools

    от ChromeDevTools · MCP-сервер

    Опубликован: Official MCP Registry, Claude Code: claude-plugins-official, Copilot CLI: github/awesome-copilot, Community GitHub marketplaces, Claude Code: claude-plugins-community · Решает почти ту же задачу

  • tiny-tool-town-submitter

    Inspect a repository, improve Tiny Tool Town readiness, submit its listing issue, and launch remediation work.

    от James Montemagno · Пакет плагинов

    Опубликован: Copilot CLI: github/awesome-copilot · Решает почти ту же задачу

Есть на витрине Copilot CLI: github/copilot-plugins (5)
  • advanced-security

    Advanced Security plugin for GitHub Copilot.

    от github · Пакет плагинов

    Опубликован: Copilot CLI: github/copilot-plugins · Решает почти ту же задачу

  • microsoft-365-agents-toolkit

    Toolkit for building Microsoft 365 Copilot declarative agents — scaffolding, JSON manifest development, and capability configuration.

    от microsoft · Пакет плагинов

    Опубликован: Copilot CLI: github/copilot-plugins · Решает почти ту же задачу

  • workiq

    Query Microsoft 365 data with natural language — emails, meetings, documents, Teams messages, and more.

    от microsoft · Пакет плагинов

    Опубликован: Copilot CLI: github/copilot-plugins · Решает почти ту же задачу

  • azure-devops-copilot-plugin

    Bring Azure DevOps work-item, repository, and pull-request workflows into GitHub Copilot.

    от microsoft · Пакет плагинов

    Опубликован: Copilot CLI: github/copilot-plugins · Решает почти ту же задачу

  • canvas-apps

    Build Power Apps Canvas Apps using the Canvas Authoring MCP server.

    от microsoft · Пакет плагинов

    Опубликован: Copilot CLI: github/copilot-plugins · Решает почти ту же задачу

Есть на витрине Cursor: cursor/plugins (5)
  • TinyFish

    Browse and automate the web with TinyFish: run multi-step web automations, search the web, extract clean page content, and drive remote stealth browser sessions.

    от Cursor · Пакет плагинов

    Опубликован: Cursor: cursor/plugins · Решает почти ту же задачу

  • playwright-mcp io.github.microsoft/playwright-mcp

    Playwright Tools for MCP

    от microsoft · MCP-сервер

    Опубликован: Official MCP Registry, Claude Code: claude-plugins-official, Cursor: cursor/plugins, Docker MCP Catalog · Решает почти ту же задачу

  • Similarweb

    Analyze website traffic, audiences, and competitors.

    от Cursor · Пакет плагинов

    Опубликован: Cursor: cursor/plugins · Решает почти ту же задачу

  • Ahrefs

    Research keywords, backlinks, rankings, and site health.

    от Cursor · Пакет плагинов

    Опубликован: Cursor: cursor/plugins · Решает почти ту же задачу

  • Profound

    Track AI visibility, sentiment, and citations.

    от Cursor · Пакет плагинов

    Опубликован: Cursor: cursor/plugins · Решает почти ту же задачу

Есть на витрине Docker MCP Catalog (5)
  • Firecrawl

    🔥 Official Firecrawl MCP Server - Adds powerful web scraping and search to Cursor, Claude and any other LLM clients.

    от firecrawl · MCP-сервер

    Опубликован: Docker MCP Catalog · Решает почти ту же задачу

  • Apify

    Apify is the world's largest marketplace of tools for web scraping, data extraction, and web automation. You can extract structured data from social media, e-commerce, search…

    от apify · MCP-сервер

    Опубликован: Docker MCP Catalog · Решает почти ту же задачу

  • mcp-server-browserbase io.github.browserbase/mcp-server-browserbase

    MCP server for AI web browser automation using Browserbase and Stagehand

    от browserbase · MCP-сервер

    Опубликован: Official MCP Registry, Docker MCP Catalog · Решает почти ту же задачу

  • playwright-mcp io.github.microsoft/playwright-mcp

    Playwright Tools for MCP

    от microsoft · MCP-сервер

    Опубликован: Official MCP Registry, Claude Code: claude-plugins-official, Cursor: cursor/plugins, Docker MCP Catalog · Решает почти ту же задачу

  • scrapegraph-mcp io.github.ScrapeGraphAI/scrapegraph-mcp

    AI-powered web scraping and data extraction capabilities through ScrapeGraph API

    от ScrapeGraphAI · MCP-сервер

    Опубликован: Official MCP Registry, Docker MCP Catalog · Решает почти ту же задачу

Есть на витрине Official MCP Registry (5)
  • ai-crawler-readiness com.lumnika/ai-crawler-readiness

    Can AI crawlers read this site? GPTBot/ClaudeBot verdicts, robots vs edge blocking, 47k-domain index

    от lumnika.com · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • NM Signals: AI crawler audit

    Audit webpage access for AI crawlers. API key and Premium or Partner plan required.

    от newmediamadman · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • alice io.tranx/alice

    Audit any site's AI visibility from your assistant: crawler access, rendering, and schema.

    от tranx.io · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • ai-visibility com.lastminutedealshq/ai-visibility

    AI-search-visibility tools: check crawler access, generate llms.txt, lint robots.txt, census data.

    от lastminutedealshq.com · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • Siteiz

    Check which AI crawlers a site allows and see pages the way AI crawlers do. Free, read-only.

    от siteiz.com · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

Найдено по смыслу, а не по общему коду или репозиторию: похожие плагины остаются разными продуктами, и это не обзор и не рекомендация.

Это ваш плагин?

Добавьте плагин в свои проекты и докажите, что поддерживаете его: файлом в репозитории, файлом на вашем домене или DNS-записью. Вы будете получать уведомления, когда витрина добавит плагин, снимет его, изменит отметку verified или список того, что он просит, а его удалённый endpoint встанет на мониторинг как веб-сервис.

Данные витрины Official MCP Registry. Числа взяты из наших регулярных обходов витрин, последняя проверка . Контакты издателей плагинов мы не публикуем.

Откуда данные: как устроен каталог