Scrapfly MCP Server
官方Scrapfly MCP Server 为 AI 代理提供了一种简单、统一的方式来抓取实时网页数据,并内置了反机器人处理功能。
文档
Scrapfly MCP 服务器入门指南
模型上下文协议(MCP) 是一项开放标准,允许 AI 模型与外部工具和数据源进行交互。Scrapfly MCP 服务器将您的 AI 从受限于训练数据,转变为能够实时访问任何网站——赋予您的 AI 按需抓取实时网络数据的能力。
这能解锁什么
您的 AI 不再回答“我没有当前信息”,而是可以:
抓取实时数据
实时获取当前价格、列表、新闻或任何网页内容
绕过反爬系统
自动处理验证码、代理、JavaScript 渲染和速率限制
提取结构化数据
使用 AI 驱动的提取功能,将复杂网站解析为清晰的 JSON
捕获截图
对页面或特定元素进行可视化快照以供分析
为什么选择 Scrapfly MCP 服务器?
基于数千名开发者使用过的久经考验的基础设施构建:
始终可靠
您的 AI 永远不会被拦截
快速设置
60 秒内即可运行
安全
OAuth2 + 企业级身份验证
MCP 连接器的强大功能
MCP 是一个通用连接器,可将任何 AI 客户端转变为网页抓取利器。无需为每个 AI 平台构建自定义集成,MCP 提供了单一标准接口。
与您喜爱的 AI 工具配合使用:
- Claude Desktop、Cursor、Cline、Windsurf
- LangChain、LlamaIndex、CrewAI
- OpenAI 函数调用、自定义代理
- n8n、Make、Zapier 工作流
一次集成,无限可能:
配置一次,随处使用。同一个 MCP 服务器可在所有平台上运行——无需为您采用的每个 AI 工具重建集成。
如何使用 Scrapfly MCP
入门很简单——选择您的 AI 客户端并按照设置指南操作:
[###### 为您的 AI 客户端设置
15+ 集成:Claude Desktop、Cursor、Cline、Windsurf、LangChain、n8n 等
](https://scrapfly.io/docs/mcp/integrations) [###### 可用工具
9 个工具:抓取、截图、带有动态 WebMCP 工具发现的云浏览器
](https://scrapfly.io/docs/mcp/tools) [###### 身份验证选项
API 密钥、OAuth2 或基于标头的身份验证——选择适合您需求的方式
](https://scrapfly.io/docs/mcp/authentication)
后续步骤
查看真实示例 - 职位聚合、价格监控、数据提取等 客户端特定设置指南 - Cursor、Cline、LangChain、n8n 及所有支持的平台 工具和 API 规范 - 完整的参数文档和使用指南 设置 OAuth2 身份验证 - 适用于生产环境的安全、企业级身份验证 阅读常见问题解答 - 常见问题和故障排除
验证您的设置
配置完成后,验证一切是否正常工作:
-
检查工具可用性 在您的 AI 客户端中查找锤子图标 (🔨) 或检查工具列表,以确认 Scrapfly 工具已加载。
-
测试一个简单请求 尝试询问:“现在 Hacker News 上的热门帖子是什么?”
您的 AI 应自动使用 Scrapfly 工具来获取并显示当前结果。
-
检查账户使用情况 询问:“我还剩多少 Scrapfly 积分?”
AI 将使用
info_account来显示您当前的使用量和配额。
故障排除
如果您遇到问题,以下是常见问题和解决方案:
未检测到工具
- 验证 JSON 配置 - 确保您的配置没有语法错误(缺少逗号、括号)
- 重启您的 AI 客户端 - 许多客户端需要完全重启才能加载新的 MCP 服务器
- 检查
npx可用性 - 在终端中运行npx --version以验证其已安装 - 验证 API 密钥 - 确保您的 Scrapfly API 密钥正确且具有可用积分
身份验证错误
- 无效的 API 密钥 - 在 仪表板 → 项目设置 中仔细检查您的密钥
- OAuth2 问题 - 确保您已完成 OAuth 流程并且令牌已刷新
- 凭据过期 - 如果您的会话已过期,请重新进行身份验证
需要更多帮助?
查看我们详细的故障排除资源:
- MCP 常见问题解答 - 常见问题和详细解答
- Discord 社区 - 从社区获取帮助
- 联系支持 - 直接联系我们的团队