mcp
v1.6.0
io.github.crawlbrulee/mcp
EU-native web scraping for AI agents. scrape pages, map sites, run background jobs, check usage.
“Crawl” 共 236 个结果
v1.6.0
io.github.crawlbrulee/mcp
EU-native web scraping for AI agents. scrape pages, map sites, run background jobs, check usage.
v2.4.0
dev.workers.b2bintel-edge.agent-web-x402-gateway/web-scrape-search-firecrawl-x402-mcp
Keyless Firecrawl/Exa alternative: URL to LLM Markdown, live web search & $4.90 30d pass.
v1.0.0
io.github.saulius876-lgtm/website-content-crawler
Web pages and whole sites to clean Markdown for RAG and AI agents. Crawls links and sitemaps.
v5.0.1
io.clawhub.robbyczgw-cla/web-search-plus
统一的多提供商网页搜索与 URL 抽取技能,可在 Serper、Brave、Tavily、Querit、Linkup、Exa、Firecrawl、Perple…… 之间智能自动路由(原文截断)。
v1.0.0
io.clawhub.shaharsha/tavily-search-pro
Tavily AI 搜索平台,含 5 种模式:Search(网页/新闻/财经)、Extract(URL 内容)、Crawl(网站抓取)、Map(站点图发现)和 Research(带引用的深度研究)。用于:带 LLM 答案的网页搜索、内容提取、站点抓取、深度研究。
v2.1.4
io.clawhub.zjianru/web-search-pro
面向智能体的网页搜索与检索:实时网页搜索、新闻搜索、文档查询、代码查询、公司调研、站点抓取。
v19.0.0
io.clawhub.aaron-he-zhu/technical-seo-checker
当用户要求“检查技术 SEO”时使用;审计可抓取性、索引、Core Web Vitals、robots.txt、站点地图、规范链接。
v0.1.30
io.clawhub.mineru-extract/mineru-document-extractor
MinerU 文档抽取——将 PDF、扫描文档、图片、Word(DOC/DOCX)、PowerPoint(PPT/PPTX)。
v1.1.0
com.perfbee/mcp
Crawl your sites and read broken links, SEO and AI readiness issues with their HTML element.
v2.28.0
io.github.Sriram-PR/doc-scraper
Crawl documentation sites into local corpora agents can search, read, and diff fully offline.
v1.2.1
app.seobolt/seobolt
Crawl a site, audit Google and AI-search readiness, get a fix plan your coding agent applies.
v1.0.1
dev.datasetworks/website-seo-audit
Crawl a site for SEO issues per page and broken links. Respects robots.txt.
v0.18.0
io.github.dtkmn/mcp-zap-server
安全、自托管的 OWASP ZAP 操作器,用于引导式 AI 安全扫描与报告。
v1.0.0
io.github.leonkrs/mira
Crawl a website and get its colors, fonts, logos, images and a Tailwind theme.
v1.0.0
io.github.LernowaAdmin/rag-docs-scraper
Crawl any documentation site and return heading-bounded, LLM-ready chunks with source metadata.
v1.0.0
io.github.lintlab/seo-site-qa
Crawl a site for broken links, redirects and missing SEO tags. Pay per page on Apify.
v1.1.0
io.github.pavel-tashev/broken-link-checker
Crawl a site for broken links, 404s, dead images, redirect chains and slow pages, with sources
v1.0.1
one.aisa/seo-onpage
Crawl a site: pages, resources, links, duplicates, tags, Lighthouse and raw HTML.
v0.1.2
io.github.mouhabmzibra-rgb/seo-backlinks
Backlinks, Domain Rating & expired-domain drops via seo-backlinks.net (Common Crawl)
v1.0.0
cloud.spider/mcp
大规模爬取、抓取与搜索网页,并提供带反爬破解能力的浏览器自动化。
v1.0.0
io.github.abhibavishi/rankparse-mcp
SEO MCP 服务器——反链、域名权重、技术栈识别,基于 Common Crawl 的 18 个以上工具。
io.github.coreyhaines31/marketingskills/seo-audit
对网站进行 SEO 审查与诊断,排查排名下降、索引与技术性问题。
io.github.scrapegraphai/just-scrape/just-scrape
通过 ScrapeGraph AI CLI 搜索、抓取、爬取网页并提取结构化数据。
v1.0.6
io.clawhub.ivangdavila/seo
用搜索引擎优化提升 Google 排名:站点审计、关键词研究、内容优化、技术修复、结构化数据与链接。不适用于付费搜索广告(PPC/SEM)或应用商店优化。当自然流量或排名下滑、页面未被收录或被除名、Search Console 出现抓取错误,或计划迁移/改版/换域名时使用;也适用于为排名撰写或更新内容、挑选目标关键词、修复标题、canonical、站点地图、robots.txt、重定向、hreflang、重复内容与 Core Web Vitals、添加 schema 标记;还包括争取精选摘要或 AI Overview 引用、从 Google 处罚/核心更新/人工措施中恢复、优化本地/电商/SaaS/内容发布站点,以及配置 Bing Webmaster Tools 与 IndexNow。