Ext Ops Panel
Открыть панель

Crawlerpeek

Check whether AI crawlers (GPTBot, ClaudeBot, PerplexityBot) can access a URL. Read-only.

MCP-сервер · от crawlerpeek

Подключить Сравнить Это мой

Коротко

Crawlerpeek: MCP-сервер, издатель crawlerpeek. Витрин, которые мы читаем и где он опубликован: 1 (Official MCP Registry). Последнее изменение мы зафиксировали 2026-10-29. Данные нашего прохода по витринам на 2026-11-10.

Что просит

  • Работает на вашем компьютере

Ни одна из витрин, которые мы читаем, не публикует его инструменты или настройки, которые он просит.

Что объявляет, просит и запускает, полностью

Устанавливайте плагины только от разработчиков, которым доверяете. Мы показываем то, что публикуют витрины, и не проверяем плагины.

Пакет

npm crawlerpeek (crawlerpeek на npm)

  • Загрузки npm за неделю: 181 (2026-11-08)
  • Загрузки npm за месяц: 1 698 (2026-11-08)
  • Последняя версия на npm: 0.3.1, опубликована 2026-10-29

Данные npm взяты из публичного реестра npm (registry.npmjs.org, api.npmjs.org). Каждое число принадлежит своему реестру и никогда не складывается с другим. Реестр, который не публикует число, ничего не показывает: нет числа не значит ноль.

Работает с

  • Claude Code
  • Codex
  • Cursor
  • VS Code
  • Copilot CLI
Установить в CursorУстановить в VS Code

Ссылка в один клик открывает клиент, и он просит подтвердить, прежде чем добавить сервер.

По маркетплейсам, где он опубликован, и объявленному транспорту MCP, как их документирует каждый клиент. Плагины мы не тестируем.

Подключить

Команды и конфигурации собраны только из того, что объявляют витрины. Мы не запускаем их за вас и не проверяем плагины.

Как локальный MCP-сервер: пакет npm

Собрано из того, что объявляет Official MCP Registry.

Claude CodeТерминал
claude mcp add --transport stdio crawlerpeek -- npx -y crawlerpeek mcp
Codex~/.codex/config.toml
[mcp_servers.crawlerpeek]
command = "npx"
args = ["-y", "crawlerpeek", "mcp"]
Cursor~/.cursor/mcp.json
{
  "mcpServers": {
    "crawlerpeek": {
      "command": "npx",
      "args": [
        "-y",
        "crawlerpeek",
        "mcp"
      ]
    }
  }
}

Где опубликован

ВитринаСтатусВерсияЧислаПроверенВпервые замечен
Official MCP Registry (Открыть запись реестра) Опубликован 0.3.1 Загрузки за месяц (npm): 1 698
Загрузки за неделю (npm): 181
Форки (GitHub): 0
Звёзды (GitHub): 3		 Не помечен

Каждое число принадлежит своей витрине и никогда не складывается с числами других витрин. Если витрина число не публикует, мы его не показываем: нет числа не значит ноль.

Как менялись числа

Звёзды (GitHub)
unchanged с 27.10
История с витрины Official MCP Registry
  1. 2026-10-273
  2. 2026-11-103

Каждая точка: день, когда мы прочитали другое число; ровные участки: дни, когда число не менялось. Числа разных витрин никогда не складываются.

Что менялось

  1. Official MCP Registry: выпущена версия 0.3.1 (была 0.2.0)
  2. Official MCP Registry: выпущена версия 0.2.0 (была 0.1.2)
  3. Стал продуктом, за которым мы следим
  4. Official MCP Registry: появился

Похожие плагины

Продукты, чьи собственные названия, описания, инструменты и скиллы ближе всего по смыслу к этому, на всех витринах, которые мы читаем. Близость упорядочена только внутри этого списка.

  • AI Crawler Access Checker

    Shows if GPTBot, ClaudeBot, PerplexityBot and other AI crawlers can read each site in a list.

    от Nero-Engine · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • AI Crawler Access Check

    Can GPTBot, ClaudeBot and PerplexityBot reach a site? Real fetch per crawler, firewall/CDN blocks.

    от hamzawamiqhq · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • Atalaya AI crawler check

    Which AI crawlers (GPTBot, OAI-SearchBot, ClaudeBot, PerplexityBot) a website allows, and why.

    от atalaya-ai.com · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • NM Signals: AI crawler audit

    Audit webpage access for AI crawlers. API key and Premium or Partner plan required.

    от newmediamadman · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • ai-crawler-readiness com.lumnika/ai-crawler-readiness

    Can AI crawlers read this site? GPTBot/ClaudeBot verdicts, robots vs edge blocking, 47k-domain index

    от lumnika.com · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • QueryRev AI Readiness

    Checks a site for AI crawler access, robots.txt and llms.txt. Runs locally, no telemetry.

    от queryrev.com · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • Unrendered: AI Crawler Checker

    AI crawler checker: shows which page content GPTBot and ClaudeBot can't read without JavaScript.

    от missiongrowth · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • Siteiz

    Check which AI crawlers a site allows and see pages the way AI crawlers do. Free, read-only.

    от siteiz.com · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • crawl-readiness io.github.Grubbomatic/crawl-readiness

    Check what AI crawlers may read and what a page permits, generate llms.txt and schema.

    от Grubbomatic · MCP-сервер

    Опубликован: Official MCP Registry, npm registry (MCP servers) · Решает почти ту же задачу

  • ActableSite AI Crawler Monitor

    Check AI crawler robots.txt policy and monitor public-site policy, sitemap, and llms.txt changes.

    от actablesite.com · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

Похожие плагины по витринам

Тот же вопрос к каждой витрине по отдельности: есть ли там аналог этого плагина?

Есть на витрине Claude Code: claude-plugins-community (5)

  • browser-act

    A Claude Code skill that lets Claude drive the browser-act CLI from natural-language prompts — navigating, interacting with, extracting from, and screenshotting webpages…

    от browser-act · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-community · Решает почти ту же задачу

  • skyvern-browser-automation

    Skyvern browser automation skills for web scraping and interaction via remote MCP.

    от mark1ian · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-community · Решает почти ту же задачу

  • freshprobe

    Data freshness and endpoint liveness verification for AI agents. Probes external APIs and endpoints before agents act on their data, returning deterministic FRESH/STALE/UNKNOWN…

    от Sudhan30 · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-community · Решает почти ту же задачу

  • agentic-beta-testers

    AI-powered browser testing against any URL using personality-driven agents -- speedrunners, chaos gremlins, skeptical executives -- each surfacing different categories of…

    от rjspence3 · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-community · Решает почти ту же задачу

  • TinyFish

    The complete web toolkit for your agent. Search the web and get answers in milliseconds. Fetch any URL and get clean markdown content back. Send a browser agent to navigate sites…

    от tinyfish-io · Пакет плагинов

    Опубликован: Claude: knowledge-work-plugins, Claude Code: claude-plugins-community, Community GitHub marketplaces · Решает почти ту же задачу

Есть на витрине Claude Code: claude-plugins-official (5)

  • browser-use

    Give Claude a real browser — your Chrome or a Browser Use Cloud browser. Use it whenever a task involves a website or web app: browsing, scraping and data extraction, filling…

    от browser-use · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Claude: knowledge-work-plugins · Решает почти ту же задачу

  • playwright-mcp io.github.microsoft/playwright-mcp

    Playwright Tools for MCP

    от microsoft · MCP-сервер

    Опубликован: Official MCP Registry, Claude Code: claude-plugins-official, Cursor: cursor/plugins, Docker MCP Catalog, Community GitHub marketplaces · Решает почти ту же задачу

  • zyte-web-data

    Web scraping skills for Claude Code powered by the Zyte API — scrape sites, generate and run Scrapy spiders, define extraction schemas, and ship to Scrapy Cloud.

    от zytedata · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Claude Code: claude-plugins-community · Решает почти ту же задачу

  • brightdata-plugin

    Web scraping, Google search, structured data extraction, and MCP server integration powered by Bright Data. Includes 7 skills: scrape any webpage as markdown (with bot…

    от brightdata · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Claude: knowledge-work-plugins, Claude Code: claude-plugins-community · Решает почти ту же задачу

  • exa

    Exa AI web search, deep research, and content extraction. Provides MCP tools and research skills for comprehensive web search, people discovery, company research, academic papers…

    от exa-labs · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Official MCP Registry, Docker MCP Catalog, Claude: knowledge-work-plugins · Решает почти ту же задачу

Есть на витрине Claude: knowledge-work-plugins (5)

  • browser-use

    Give Claude a real browser — your Chrome or a Browser Use Cloud browser. Use it whenever a task involves a website or web app: browsing, scraping and data extraction, filling…

    от browser-use · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Claude: knowledge-work-plugins · Решает почти ту же задачу

  • TinyFish

    The complete web toolkit for your agent. Search the web and get answers in milliseconds. Fetch any URL and get clean markdown content back. Send a browser agent to navigate sites…

    от tinyfish-io · Пакет плагинов

    Опубликован: Claude: knowledge-work-plugins, Claude Code: claude-plugins-community, Community GitHub marketplaces · Решает почти ту же задачу

  • brightdata-plugin

    Web scraping, Google search, structured data extraction, and MCP server integration powered by Bright Data. Includes 7 skills: scrape any webpage as markdown (with bot…

    от brightdata · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Claude: knowledge-work-plugins, Claude Code: claude-plugins-community · Решает почти ту же задачу

  • exa

    Exa AI web search, deep research, and content extraction. Provides MCP tools and research skills for comprehensive web search, people discovery, company research, academic papers…

    от exa-labs · Пакет плагинов

    Опубликован: Claude Code: claude-plugins-official, Official MCP Registry, Docker MCP Catalog, Claude: knowledge-work-plugins · Решает почти ту же задачу

  • SearchFit SEO

    Free AI-powered SEO toolkit — audit websites, plan content strategy, optimize pages, generate schema markup, cluster keywords, and track AI visibility. Works with any website or…

    от searchfit · Пакет плагинов

    Опубликован: Claude: knowledge-work-plugins, Claude Code: claude-plugins-community · Решает почти ту же задачу

Есть на витрине Codex: openai-curated (openai/plugins) (5)

  • Cloudflare

    Cloudflare platform plugin with curated skills for Workers, Wrangler, and Agents SDK plus the official Cloudflare API MCP server.

    от Cloudflare · Пакет плагинов

    Опубликован: Codex: openai-curated (openai/plugins) · Решает почти ту же задачу

  • Plugin Eval

    Evaluate Codex skills and plugins from chat with a beginner-friendly start command, local-first reports, token budget explanations, and guided benchmarking.

    от OpenAI Codex · Пакет плагинов

    Опубликован: Codex: openai-curated (openai/plugins) · Решает почти ту же задачу

  • Codex Security

    Codex Security workflows for security scans, analysis, and investigation.

    от OpenAI · Пакет плагинов

    Опубликован: Codex: openai-curated (openai/plugins) · Решает почти ту же задачу

  • Datadog (Preview)

    Available for US1 customers only. Analyze, investigate, and act on your Datadog telemetry directly from ChatGPT using natural language. Ask questions about your production…

    от Datadog · Пакет плагинов

    Опубликован: Codex: openai-curated (openai/plugins) · Решает почти ту же задачу

  • OpenAI Developers

    Build with OpenAI APIs, Agents SDK, and ChatGPT Apps, and create and save OpenAI API keys from Codex.

    от OpenAI · Пакет плагинов

    Опубликован: Codex: openai-curated (openai/plugins) · Решает почти ту же задачу

Есть на витрине Community GitHub marketplaces (3)

  • Limelit AI Search Audit

    Free AI search audits with no account: which AI crawlers your robots.txt lets in, and whether your llms.txt is present and well formed.

    от Limelit · Пакет плагинов

    Опубликован: Community GitHub marketplaces · Решает почти ту же задачу

  • web

    Browser automation and web page analysis skills using playwright-cli: connect via CDP, probe bot protection, dismiss overlays, capture DOM trees, reduce pages to skeletons…

    от Adobe · Пакет плагинов

    Опубликован: Community GitHub marketplaces · Решает почти ту же задачу

  • pydoll-antibot-bypasser

    Stealth browser automation skill using Pydoll, specialized in bypassing Cloudflare WAF, Turnstile CAPTCHA, and other bot detection systems.

    от Esonhugh · Пакет плагинов

    Опубликован: Community GitHub marketplaces · Решает почти ту же задачу

Есть на витрине Copilot CLI: github/awesome-copilot (5)

  • apify

    Helps devs extract data from any website with thousands of trusted scrapers, crawlers, and automations from Apify Store. Integrate ready-made Actors to access all popular social…

    от apify · Пакет плагинов

    Опубликован: Copilot CLI: github/awesome-copilot · Решает почти ту же задачу

  • Chrome DevTools MCP

    MCP server for Chrome DevTools

    от ChromeDevTools · MCP-сервер

    Опубликован: Official MCP Registry, Claude Code: claude-plugins-official, Copilot CLI: github/awesome-copilot, Community GitHub marketplaces, Claude Code: claude-plugins-community · Решает почти ту же задачу

  • doublecheck

    Three-layer verification pipeline for AI output. Extracts claims, finds sources, and flags hallucination risks so humans can verify before acting.

    от Awesome Copilot Community · Пакет плагинов

    Опубликован: Copilot CLI: github/awesome-copilot · Решает почти ту же задачу

  • BLEA

    Safe BLE diagnostics, evidence workflows, and guarded automation for AI agents.

    от Nitmi · MCP-сервер

    Опубликован: Official MCP Registry, Copilot CLI: github/awesome-copilot · Решает почти ту же задачу

  • agent-radar

    See a live map of the Copilot agents on your computer, their sub-agents, their commands, and where their data goes.

    от Annika Wickert · Пакет плагинов

    Опубликован: Copilot CLI: github/awesome-copilot · Решает почти ту же задачу

Есть на витрине Copilot CLI: github/copilot-plugins (5)

  • advanced-security

    Advanced Security plugin for GitHub Copilot.

    от github · Пакет плагинов

    Опубликован: Copilot CLI: github/copilot-plugins · Решает почти ту же задачу

  • microsoft-365-agents-toolkit

    Toolkit for building Microsoft 365 Copilot declarative agents — scaffolding, JSON manifest development, and capability configuration.

    от microsoft · Пакет плагинов

    Опубликован: Copilot CLI: github/copilot-plugins · Решает почти ту же задачу

  • azure-devops-copilot-plugin

    Bring Azure DevOps work-item, repository, and pull-request workflows into GitHub Copilot.

    от microsoft · Пакет плагинов

    Опубликован: Copilot CLI: github/copilot-plugins · Решает почти ту же задачу

  • workiq

    Query Microsoft 365 data with natural language — emails, meetings, documents, Teams messages, and more.

    от microsoft · Пакет плагинов

    Опубликован: Copilot CLI: github/copilot-plugins, npm registry (MCP servers) · Решает почти ту же задачу

  • canvas-apps

    Build Power Apps Canvas Apps using the Canvas Authoring MCP server.

    от microsoft · Пакет плагинов

    Опубликован: Copilot CLI: github/copilot-plugins · Решает почти ту же задачу

Есть на витрине Cursor: cursor/plugins (5)

  • TinyFish

    Browse and automate the web with TinyFish: run multi-step web automations, search the web, extract clean page content, and drive remote stealth browser sessions.

    от Cursor · Пакет плагинов

    Опубликован: Cursor: cursor/plugins · Решает почти ту же задачу

  • playwright-mcp io.github.microsoft/playwright-mcp

    Playwright Tools for MCP

    от microsoft · MCP-сервер

    Опубликован: Official MCP Registry, Claude Code: claude-plugins-official, Cursor: cursor/plugins, Docker MCP Catalog, Community GitHub marketplaces · Решает почти ту же задачу

  • Similarweb

    Analyze website traffic, audiences, and competitors.

    от Cursor · Пакет плагинов

    Опубликован: Cursor: cursor/plugins · Решает похожую задачу

  • Tailscale

    Let Grok Bot reach MCP servers on your private Tailscale network: connect your own tailnet, or your team's company tailnets turned on by a team admin, with each member using their…

    от Cursor · Пакет плагинов

    Опубликован: Cursor: cursor/plugins · Решает похожую задачу

  • Agent Compatibility

    CLI-backed repo compatibility scans plus agents that audit startup, validation, and docs against reality.

    от Cursor · Пакет плагинов

    Опубликован: Cursor: cursor/plugins · Решает похожую задачу

Есть на витрине Docker MCP Catalog (5)

  • mcp-server-browserbase io.github.browserbase/mcp-server-browserbase

    MCP server for AI web browser automation using Browserbase and Stagehand

    от browserbase · MCP-сервер

    Опубликован: Official MCP Registry, Docker MCP Catalog · Решает почти ту же задачу

  • playwright-mcp io.github.microsoft/playwright-mcp

    Playwright Tools for MCP

    от microsoft · MCP-сервер

    Опубликован: Official MCP Registry, Claude Code: claude-plugins-official, Cursor: cursor/plugins, Docker MCP Catalog, Community GitHub marketplaces · Решает почти ту же задачу

  • Apify

    Apify is the world's largest marketplace of tools for web scraping, data extraction, and web automation. You can extract structured data from social media, e-commerce, search…

    от apify · MCP-сервер

    Опубликован: Docker MCP Catalog · Решает почти ту же задачу

  • Firecrawl MCP Server

    Firecrawl, the context API for AI agents: search, scrape, interact with the web, plus paper search.

    от firecrawl · MCP-сервер

    Опубликован: Official MCP Registry, Docker MCP Catalog, Community GitHub marketplaces · Решает почти ту же задачу

  • oxylabs-mcp io.oxylabs/oxylabs-mcp

    Fetch and process content from specified URLs & sources using the Oxylabs Web Scraper API.

    от oxylabs.io · MCP-сервер

    Опубликован: Official MCP Registry, Docker MCP Catalog, PyPI (MCP servers) · Решает почти ту же задачу

Есть на витрине Official MCP Registry (5)

  • AI Crawler Access Checker

    Shows if GPTBot, ClaudeBot, PerplexityBot and other AI crawlers can read each site in a list.

    от Nero-Engine · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • AI Crawler Access Check

    Can GPTBot, ClaudeBot and PerplexityBot reach a site? Real fetch per crawler, firewall/CDN blocks.

    от hamzawamiqhq · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • Atalaya AI crawler check

    Which AI crawlers (GPTBot, OAI-SearchBot, ClaudeBot, PerplexityBot) a website allows, and why.

    от atalaya-ai.com · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • NM Signals: AI crawler audit

    Audit webpage access for AI crawlers. API key and Premium or Partner plan required.

    от newmediamadman · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • ai-crawler-readiness com.lumnika/ai-crawler-readiness

    Can AI crawlers read this site? GPTBot/ClaudeBot verdicts, robots vs edge blocking, 47k-domain index

    от lumnika.com · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

Есть на витрине PyPI (MCP servers) (5)

  • Screaming Frog SEO Spider MCP Server (headless)

    Headless Screaming Frog SEO Spider via its CLI: run crawls, export and filter data, no GUI needed.

    от bzsasson · MCP-сервер

    Опубликован: Official MCP Registry, PyPI (MCP servers) · Решает почти ту же задачу

  • stealth-chrome-devtools-mcp

    Undetectable browser automation for AI agents via the Model Context Protocol — one shared backend built for 50+ concurrent Claude Code sessions.

    от DevinoSolutions · MCP-сервер

    Опубликован: PyPI (MCP servers) · Решает почти ту же задачу

  • firecrawl com.mcparmory/firecrawl

    Scrape, crawl, and extract structured data from websites at scale

    от mcparmory.com · MCP-сервер

    Опубликован: Official MCP Registry · Решает почти ту же задачу

  • Bing Webmaster AI CLI MCP

    Read Bing Webmaster data and change it, directly or through a reviewed plan.

    от stufently · MCP-сервер

    Опубликован: Official MCP Registry, PyPI (MCP servers) · Решает почти ту же задачу

  • mcp-stealth-chrome

    MCP server with 173 tools: a real Chrome browser over CDP with nodriver, HTTP with Chrome's TLS fingerprint, Cloudflare Turnstile handling, session reuse, and web research without…

    от RobithYusuf · MCP-сервер

    Опубликован: PyPI (MCP servers) · Решает почти ту же задачу

Есть на витрине npm registry (MCP servers) (5)

  • crawl-readiness io.github.Grubbomatic/crawl-readiness

    Check what AI crawlers may read and what a page permits, generate llms.txt and schema.

    от Grubbomatic · MCP-сервер

    Опубликован: Official MCP Registry, npm registry (MCP servers) · Решает почти ту же задачу

  • Scrape-LE

    Analyse robots.txt content and report whether a path may be crawled.

    от nolindnaidoo · MCP-сервер

    Опубликован: Official MCP Registry, npm registry (MCP servers) · Решает почти ту же задачу

  • Website Auditor

    AI visibility in ChatGPT, Gemini, Claude, Perplexity, Copilot & AI Overviews, plus site audits.

    от SpikeyCoder · MCP-сервер

    Опубликован: Official MCP Registry, npm registry (MCP servers) · Решает похожую задачу

  • camofox-mcp

    Anti-detection browser MCP server for AI agents — navigate, interact, and automate the web without getting blocked

    от redf0x1 · MCP-сервер

    Опубликован: npm registry (MCP servers) · Решает похожую задачу

  • zenrows-mcp io.github.ZenRows/zenrows-mcp

    Zenrows MCP server: Fetch, Extract, Batch, and Browser Sessions for AI agents

    от ZenRows · MCP-сервер

    Опубликован: Official MCP Registry, npm registry (MCP servers) · Решает похожую задачу

Найдено по смыслу, а не по общему коду или репозиторию: похожие плагины остаются разными продуктами, и это не обзор и не рекомендация.

Хотите такой знак у своего плагина в нашем каталоге?

Докажите, что поддерживаете его, файлом в репозитории, файлом на вашем домене или DNS-записью, и сможете показать этот знак на карточке, а ещё живые баннеры для сайта и README. Как проходит подтверждение

Ещё вы будете получать уведомления, когда витрина добавит плагин, снимет его, изменит отметку verified или список того, что он просит, а его удалённый endpoint встанет на мониторинг как веб-сервис.

Добавить в свои проекты Что умеет панель

Данные витрины Official MCP Registry. Числа взяты из наших регулярных обходов витрин, последняя проверка . Контакты издателей плагинов мы не публикуем.

Откуда данные: как устроен каталог