网页抓取 MCP 推荐

从 AI News Oracle API 获取实时 AI 新闻简报（Hacker News、TechCrunch、The Verge），通过 a10m.work 注册表做服务发现，并使用 Paymaster 完成无 gas 交易。

使用 baoyu-fetch CLI（基于 Chrome CDP 和站点适配器）抓取任意 URL 并转换为 Markdown。内置 X/Twitter、YouTube 字幕等适配器。

Context7

把最新的、对应具体版本的文档与代码示例直接拉进你的提示词，消除过期信息与凭幻觉编造的 API，提升编码体验。只需在提问时加上 use context7，即可获得准确相关的回答。

通过 Tushare API 获取中国股票与期货市场数据。支持股票行情、期货数据、公司基本面与宏观经济指标。当用户需要中国市场的金融数据时使用。需要配置 TUSHARE_TOKEN 环境变量。

按需抓取并发送 Hacker News 首页帖子。当用户提到 HN、说“hn”“pull HN”“hn 10”，或指定话题如“hn health”“hn hacking”“hn tech”时使用。以单条消息发送 N 条（默认 5）帖子，格式为标题 + 链接。排除加密货币内容。

与 arXiv Crawler API 交互，拉取论文、阅读评审、提交评论、检索论文并导入论文。在处理 arXiv 论文、抓取相关内容时使用（原文截断）。

从主流 RSS 源（BBC、路透、美联社、半岛电视台、NPR、卫报、德国之声）获取最新新闻标题，无需 API Key。

epl-mcp

# EPL Language MCP Server The official Model Context Protocol (MCP) server for the EPL (English Programming Language) ecosystem. This server provides AI coding assistants with direct access to the EPL runtime, compiler, and documentation. It empowers AI models to securely run EPL code, execute test suites, analyze Abstract Syntax Trees (ASTs), and fetch real-time syntax documentation. **Key Capabilities:** - **Code Execution:** Run EPL scripts dynamically and return standard output and errors. - **AST Generation:** Parse EPL source code into structural JSON trees for deep analysis. - **Documentation Retrieval:** Fetch the latest EPL language rules and standard library documentation. - **Test Harness:** Run and evaluate EPL test suites programmatically.

使用 API token 通过 REST API 从 Miniflux 实例拉取并分类最新的未读 RSS/新闻条目。当用户要求获取 Miniflux 最新未读项、列出带标题和链接的近期条目，或对某个 Miniflux 条目生成简短摘要时使用。内置查询 Miniflux（/v1/entries 与 /v1/entries/{id}）的脚本，凭据读取自 ~/.config/clawdbot/miniflux-news.json（可用 MINIFLUX_URL 与 MINIFLUX_TOKEN 覆盖）。

丝路赞 TSO 广告平台（Google/Bing/Yandex/TikTok/MetaAd），凡涉及丝路赞/TSO、投广告、出价预算、广告账户管理，或需要做行业分析/市场分析/行业分析报告（含「写一份 XX 行业报告」「电商/制造/医疗等行业报告」「市场调查/战略市场/KA 市场报告」「竞品/GTM/市场格局/行业趋势」等，无论是否提及丝路赞/广告/客户）须加载本 skill。【§零·最高优先】网址/域名/官网+诊断/检测/监测/评估/体检/报告/符合投放要求/能不能投（含「网络诊断」混说）→P8 website-diagnosis collect（禁纯WebFetch/肉眼看页），禁止P9/P1/W3、禁止A/B/C/D追问；细则见 intent-routing.md §零。【§零·B·次高优先】未命中§零时，行业/市场分析报告类话术→必走P9 market-analysis collect+render出HTML，禁止纯WebSearch/WebFetch在对话里写Markdown/HTML当终稿、禁止改走P8/P1/P4/W5/google-analysis；细则见 references/core/intent-routing.md §零·B。【§零·C·关键词规划】Google Ads/谷歌广告拓词、关键词规划/推荐、Keyword Planner、长尾关键词、月搜索量/搜索量、竞争度、核心词/种子词扩词（含「阅读网址/文章/页面后针对核心词出带搜索量词表」，无论是否提及丝路赞/TSO/账户）→必走W5 keyword -k … --google-only --json-out，禁止WebSearch/WebFetch编造搜索量当终稿；细则见 references/core/intent-routing.md §零·C。【报告/诊断消歧】其余报告类话术禁止默认某一CLI——行业/市场/战略/行业分析报告→P9 market-analysis（必走collect+render，禁止纯WebSearch代替）；Google账户ID+健康诊断→P1 google-ads-diagnosis；账户ID+周期/月度→P4；Meta/TikTok/Bing周期→P4/P4-FB；多账户对比→P3/P5；OKKI周报→P6；Google询盘→P7；官网+明确要搜索广告方案/campaign JSON→W3；Meta I

从 aviationweather.gov 获取航空气象数据（METAR、TAF、PIREP 飞行员报告）。适用于飞行计划、天气简报、机场状况查询及各类飞行员相关天气问题。触发词包括“METAR”“TAF”“flight weather”“airport weather”“PIREP”或具体 ICAO 机场代码。

从 AI 智能体访问芬兰 Wilma 学校系统。通过 wilma CLI 获取课表、作业、考试、成绩、出勤/课堂记录（merkinnät）、消息、新闻及关联新闻资源。以 wilma summary --json 起步，用 news read --json 深入阅读新闻，并用 news resource download 下载任意关联资源。

通过 Quodd API 获取实时股票报价。提供美股当前价格、当日最高/最低价和盘后数据。适用于用户询问股票价格时。

使用 Google Tasks API 获取、显示、创建和删除 Google 任务。当用户要求查看、列出、获取、添加、创建、移除或删除其 Google Tasks、待办清单或任务项时使用。通过 bash 脚本调用 curl 与 jq 自动完成 OAuth 认证。

通过 MTProto 用户 API（Telethon）抓取 Telegram 聊天历史。

run.pay 智能体服务市场

基于 Stripe 的市场，AI 智能体可在其中自主发现并购买 API 服务。按次付费，无需注册账号。已上线 6 个服务：号码校验、网页抓取、PDF 生成、截图 API 等。基于 Stripe Agent Toolkit 构建。

从主流 RSS 源抓取最新新闻标题（BBC、Reuters、AP、Al Jazeera、NPR、The Guardian、DW）。

通过 Jina AI API 阅读与搜索网页。从 URL 抓取干净 markdown（r.jina.ai）、网页搜索（s.jina.ai）或多步深度研究（DeepSearch）。

使用 Ultrahuman MCP server（经 mcporter）在 OpenClaw 内获取并汇总 Ultrahuman 戒指/CGM 指标。当用户询问 Ultrahuman 数据（睡眠评分、总睡眠、睡眠分期、HR/HRV/静息心率、步数、恢复指数、活动指数、最大摄氧量）或想要每日/每周 Ultrahuman 摘要时使用。

商品评论摘要

v1.0.0

从多个平台（Amazon、Google、Yelp、TripAdvisor）抓取、分析并总结商品评论。提取关键洞察、情感分析、优缺点与建议。在为选品套利做调研、撰写联盟营销内容或做购买决策时使用。

使用 Naver Finance 获取文本形式的实时股价（韩国 KRX 与海外市场）。

从 Simplywall.st 获取全面的股票数据。当用户询问股价、估值、财务、分红，或任何全球…股票的投资分析时使用。

RSS 阅读器

轻松跟踪与浏览 RSS 订阅源。从任意 feed URL 拉取最新条目，并提取文章全文，获得干净无干扰的阅读体验。以一致的结构化格式保存或分析文章。

bls-labor-mcp-server

Fetch US Bureau of Labor Statistics data — CPI, unemployment, wages, JOLTS, and more via MCP.

Fetch, validate, and permission-check Agent Manifest Protocol (AMP) manifests for API discovery.

Zenrows MCP 服务器——为 AI 编码助手提供抓取、提取、批量任务与浏览器会话。

Fetch your own Delhaize (Belgium) till receipts and weekly promotions with a headless browser.

Fetch transcripts, subtitles, chapters, metadata and frames from YouTube and 10+ video platforms

抓取 AI 问答引擎与 Google 搜索/新闻结果，支持国家级与州级的地理定向。

Fetch, crawl, and search the web: Google, Amazon, Walmart, Booking.com, Agoda, and YouTube data.

通过 MCP 获取美国劳工统计局数据——CPI、失业率、工资、JOLTS 等。

Scrape Google Maps business leads (phones, websites, emails, socials) with Hubertino.

Crawl a site for broken links, redirects and missing SEO tags. Pay per page on Apify.

Oxylabs MCP — Oxylabs Web Scraper API (oxylabs.io)

从美国国家气象局航空气象中心获取 METAR、TAF、飞行员报告与国内 SIGMET。

Fetch any public web page through managed proxies, with optional JS rendering and extraction rules.

Scrape Google Maps business leads, reviews, and photos via hosted Remote MCP.

Fetch a URL and report its status, headers, and size. Runs locally.

Fetch satellite TLE orbital elements and catalog data from CelesTrak. No key required.

Crawl a site for broken links, 404s, dead images, redirect chains and slow pages, with sources

Any web page -> clean markdown. Firecrawl-lite, 0.001 USDC/extract (x402, Base), free demo.

Auditable deep-research MCP server powered by TinyFish Search and Fetch.

Crawl a site: pages, resources, links, duplicates, tags, Lighthouse and raw HTML.

Fetch and extract data from any public web page, even JS-rendered or anti-bot protected

Fetch a public robots.txt and return group counts only.

通过 MCP 获取美国劳工统计局数据——CPI、失业率、工资、JOLTS 等。

Fetch any web page to clean Markdown with Litmus trust signals. No account or API key needed.

获取任意 YouTube 视频的完整转写文本，干净可读，无需 API key，无需注册。