察元AI能力广场 · MCP 服务器

Web Scraper — Clean Markdown from Any URL

作者 axel-belfort

网页抓取API，将任意URL转换为纯净Markdown，支持JS渲染。

详细介绍

Web Scraper 是一个面向 AI 代理的网页内容提取 API，能够将任何 URL 转换为干净的 Markdown 格式。它会自动去除导航、广告和脚本，并通过无头 Chromium 实现完整的 JavaScript 渲染。支持单条和批量（10 个 URL）模式，专为 RAG 管道和 AI 研究设计。适合构建知识图谱、进行网络数据分析的 AI 开发人员使用。

智能体编排 自动化 编程开发 数据分析 知识管理 Node.js RAG 检索增强 研究调研 联网搜索

安装方式

npx -y @smithery/cli install axel-belfort/web-scraper

同类MCP 服务器推荐

• pdf-mcp — MCP服务器，为PDF提供混合检索、OCR及图表解析等RAG功能
• rea — 使用智能体逆向工程任何目标，从应用行为到原生二进制文件。
• n8n — 拥有原生AI能力的公平代码工作流自动化平台，支持400多种集成与自托管。
• markitdown —
• gemini-cli — 将Gemini大模型能力直接引入终端的开源AI代理工具。
• servers —
• storybook —
• Scrapling — 自适应网页爬虫框架，支持从单次请求到大规模爬取

浏览全部MCP 服务器 · 返回察元AI首页