Decodo
chính thứcTruy cập dữ liệu web dễ dàng. Truy xuất thông tin đơn giản từ các trang web và nguồn trực tuyến.
Bạn có thể làm gì với Decodo MCP?
- 抓取任意网页为 Markdown — 让您的助手获取一个 URL,并通过
scrape_as_markdown返回干净、适合 LLM 使用的内容。 - 捕获网页截图 — 使用
screenshot工具请求任何网站的 PNG 截图,可选指定国家。 - 搜索 Google 和 Bing — 获取任何查询的解析搜索引擎结果,包括广告、AI 模式和 Google Lens,通过
google_search、bing_search及相关工具。 - 跟踪电商产品和价格 — 从 Amazon、Walmart、Target 和 TikTok Shop 提取产品详情、定价、卖家和畅销商品。
- 收集社交媒体数据 — 从 Reddit、TikTok 和 YouTube 检索帖子、用户资料、频道视频和字幕。
- 查询 AI 搜索引擎 — 通过
ai工具集向 ChatGPT 或 Perplexity 询问 AI 生成的答案和对话。
Tài liệu
Máy chủ MCP Decodo
Kết nối LLM và tác tử AI với dữ liệu web trực tiếp bằng MCP (Model Context Protocol). Máy chủ MCP Decodo cho phép bạn thu thập dữ liệu từ website, công cụ tìm kiếm, nền tảng thương mại điện tử và mạng xã hội trực tiếp từ các công cụ AI như Claude, Cursor và Windsurf, tất cả mà không cần phải xây dựng hạ tầng thu thập dữ liệu từ đầu.
- Đầu ra có cấu trúc ở định dạng JSON, Markdown và ảnh chụp màn hình
- Xử lý JavaScript phía máy chủ và xử lý chống bot
- Hơn 125 triệu IP tại hơn 195 vị trí
Máy chủ MCP Decodo là gì?
Máy chủ MCP Decodo là lớp thu thập dữ liệu web dành cho tác tử AI. Nó kết nối các ứng dụng khách tương thích MCP với API Thu thập dữ liệu Web của Decodo, cho phép:
- Thu thập dữ liệu web cho LLM
- Truy xuất dữ liệu thời gian thực cho RAG
- Duyệt web và nghiên cứu bằng tác tử AI
- Trích xuất dữ liệu có cấu trúc từ các website động
Thay vì phải duy trì proxy, trình phân tích cú pháp và logic thử lại, bạn có một điểm tích hợp duy nhất để truy cập dữ liệu web đáng tin cậy.
Tại sao nên dùng MCP để thu thập dữ liệu web?
Model Context Protocol (MCP) là tiêu chuẩn mới nổi để kết nối tác tử AI với các công cụ bên ngoài và nguồn dữ liệu. Với MCP:
- Tác tử có thể gọi công cụ một cách linh hoạt
- Tích hợp luôn được chuẩn hóa
- Quy trình làm việc mở rộng được trên nhiều môi trường
Máy chủ MCP Decodo mang lại cho tác tử của bạn quyền truy cập web đáng tin cậy, sẵn sàng cho sản xuất thông qua tiêu chuẩn này.
Tính năng chính
Thu thập dữ liệu web cho tác tử AI, không cần hạ tầng. Thu thập bất kỳ website nào, bao gồm cả các trang nặng JavaScript, mà không cần xử lý xoay vòng proxy, giải CAPTCHA hoặc hệ thống chống bot.
Đầu ra có cấu trúc cho quy trình LLM. Markdown (sẵn sàng cho LLM), JSON (cho pipeline có cấu trúc) và ảnh chụp màn hình (cho ngữ cảnh trực quan), được xây dựng cho pipeline RAG, tác tử nghiên cứu AI và luồng tự động hóa.
Hỗ trợ sẵn cho các mục tiêu phổ biến. Các công cụ có sẵn cho Google và Bing (SERP), Amazon, Walmart và Target (thương mại điện tử), Reddit, TikTok và YouTube (mạng xã hội), cùng ChatGPT và Perplexity (tìm kiếm AI).
Hạ tầng proxy toàn cầu. Hơn 125 triệu IP dân cư, hơn 195 vị trí địa lý và tỷ lệ thành công 99,99% ngay cả với những mục tiêu được bảo vệ chặt chẽ nhất.
Bộ công cụ MCP dạng mô-đun. Chỉ bật những gì bạn cần: web, search, ecommerce, social_media,
ai để chọn công cụ gọn gàng hơn và hiệu suất tác tử tốt hơn.
Nhanh chóng đạt giá trị. Từ khóa API đến lần thu thập đầu tiên chỉ trong vài phút, không cần thiết lập thêm.
Trường hợp sử dụng
Sử dụng Máy chủ MCP Decodo khi bạn cần thu thập dữ liệu web cho tác tử AI, trích xuất dữ liệu có cấu trúc ở quy mô lớn, truy cập đáng tin cậy vào các website động, dữ liệu thời gian thực cho RAG hoặc một giải pháp thay thế cho việc xây dựng hạ tầng thu thập dữ liệu từ đầu. Các tình huống phổ biến:
- Thu thập dữ liệu web bằng AI – cho LLM khả năng thu thập dữ liệu mới thay vì dựa vào dữ liệu huấn luyện tĩnh.
- RAG với dữ liệu trực tiếp – đưa kết quả tìm kiếm Google, Bing và AI theo thời gian thực vào pipeline truy xuất.
- Thông tin tình báo thương mại điện tử – theo dõi giá sản phẩm, danh sách và người bán trên các sàn mà không bị chặn.
- Thu thập dữ liệu mạng xã hội – thu thập bài đăng, kênh và dữ liệu tương tác từ Reddit, TikTok và YouTube.
- Tổng hợp du lịch và giá – xây dựng công cụ thu thập giá và tình trạng còn hàng trực tiếp trên các website.
Bắt đầu nhanh
- Tạo tài khoản miễn phí tại dashboard.decodo.com – lên đến 2K yêu cầu miễn phí, không cần thẻ tín dụng.
- Lấy khóa API của bạn. Nhận mã thông báo xác thực cơ bản của API Thu thập dữ liệu Web từ bảng điều khiển.
- Tải Node.js 18+ từ https://nodejs.org.
- Cài ứng dụng khách MCP như Claude Desktop, Cursor, Windsurf hoặc các công cụ tương thích MCP khác.
- Cấu hình máy chủ MCP trong ứng dụng khách AI của bạn (xem ví dụ cấu hình bên dưới).
Kết nối với máy chủ MCP của Decodo
Mở ứng dụng khách MCP bạn ưa thích và thêm cấu hình sau (xem ví dụ cho Claude Code, Cursor, Windsurf bên dưới):
{
"mcpServers": {
"Decodo": {
"url": "https://mcp.decodo.com/mcp",
"headers": {
"Authorization": "Basic <basic_auth_token>"
}
}
}
}
Claude Desktop
- Mở Claude Desktop → Cài đặt → Nhà phát triển → Chỉnh sửa cấu hình.
- Thêm vào claude_desktop_config.json:
{
"mcpServers": {
"Decodo": {
"command": "npx",
"args": ["-y", "@decodo/mcp-server"],
"env": {
"SCRAPER_API_TOKEN": "<basic_auth_token>",
"TOOLSETS": "web,ai"
}
}
}
}
- Lưu và khởi động lại Claude Desktop.
Cursor
- Mở Cài đặt → MCP.
- Nhấp vào Thêm máy chủ MCP toàn cục mới (mở mcp.json).
- Thêm cấu hình tương tự như trên.
- Lưu — tìm chỉ báo trạng thái màu xanh lá cây bên cạnh Decodo.
Windsurf
- Mở Cài đặt → Cài đặt Windsurf.
- Cuộn đến Cascade → Thêm máy chủ tùy chỉnh + (mở mcp_config.json).
- Thêm cấu hình tương tự như trên.
- Lưu và khởi động lại Windsurf.
Kiểm tra thiết lập của bạn
Sau khi kết nối, hãy thử lời nhắc này trong ứng dụng khách của bạn:
▎ "Thu thập tiêu đề của 5 bài viết hàng đầu từ Hacker News"
Bạn sẽ nhận được danh sách có cấu trúc trong vài giây. Nếu thấy lỗi xác thực, hãy kiểm tra lại mã thông báo từ bảng điều khiển.
Tùy chọn: bật các bộ công cụ cụ thể
Chạy máy chủ MCP cục bộ
Điều kiện tiên quyết
- Node.js 18.0+
- Ứng dụng khách MCP - các lựa chọn phổ biến là Claude Desktop và Cursor
Hướng dẫn từng bước
- Sao chép kho lưu trữ này:
git clone https://github.com/Decodo/mcp-server
- Chạy các lệnh sau trong terminal:
cd decodo-mcp-server
npm install
npm run build
- Ghi chú vị trí bản dựng của bạn:
cd build/
pwd
Thêm index.js vào cuối thư mục này, vị trí tệp bản dựng của bạn sẽ trông giống như
thế này:
/Users/your.user/projects/decodo-mcp/build/index.js
- Cập nhật ứng dụng khách MCP của bạn với thông tin máy chủ:
{
"mcpServers": {
"decodo-mcp": {
"command": "node",
"args": ["/Users/your.user/projects/decodo-mcp/build/index.js"],
"env": {
"SCRAPER_API_TOKEN": "<web_scraping_api_base64_token>"
}
}
}
}
Bộ công cụ
Các công cụ được tổ chức thành các bộ công cụ. Bạn có thể chọn bật các bộ công cụ cụ thể bằng cách truyền
danh sách phân tách bằng dấu phẩy qua tham số truy vấn toolsets:
"Decodo MCP Server": {
"url": "https://mcp.decodo.com/mcp?toolsets=web,ai",
"headers": {
"Authorization": "Basic <your_auth_token>"
}
}
Khi không chỉ định bộ công cụ nào, tất cả các công cụ sẽ được đăng ký.
| Bộ công cụ | Công cụ |
|---|---|
web | scrape_as_markdown, screenshot |
search | google_search, google_ads, google_lens, google_travel_hotels, bing_search |
ecommerce | amazon_search, amazon_product, amazon_pricing, amazon_sellers, amazon_bestsellers, walmart_search, walmart_product, target_search, target_product, tiktok_shop_search, tiktok_shop_product, tiktok_shop_url |
social_media | reddit_post, reddit_subreddit, reddit_user, tiktok_post, youtube_metadata, youtube_channel, youtube_subtitles, youtube_search |
ai | chatgpt, perplexity, google_ai_mode |
Công cụ
Máy chủ hiển thị các công cụ sau:
| Công cụ | Mô tả | Ví dụ câu lệnh |
|---|---|---|
scrape_as_markdown | Thu thập dữ liệu từ bất kỳ URL nào, yêu cầu cung cấp URL qua câu lệnh. Trả về kết quả dạng Markdown. | Thu thập peacock.com từ địa chỉ IP Hoa Kỳ và cho tôi biết giá. |
screenshot | Chụp ảnh màn hình của bất kỳ trang web nào và trả về dưới dạng ảnh PNG. | Chụp ảnh màn hình github.com từ địa chỉ IP Hoa Kỳ. |
google_search | Thu thập dữ liệu Google Search cho một truy vấn nhất định và trả về kết quả đã phân tích. | Thu thập Google Search cho giày dép và cho tôi biết vị trí hàng đầu. |
google_ads | Thu thập dữ liệu kết quả tìm kiếm Google Ads. | Thu thập Google Ads cho laptop và hiển thị cho tôi các quảng cáo hàng đầu. |
google_lens | Thu thập dữ liệu kết quả tìm kiếm hình ảnh Google Lens. | Tìm kiếm Google Lens cho hình ảnh này: https://example.com/image.jpg |
google_ai_mode | Thu thập dữ liệu kết quả Google AI Mode (Tìm kiếm với AI). | Hỏi Google AI Mode: Ba giống chó hàng đầu là gì? |
google_travel_hotels | Thu thập dữ liệu kết quả tìm kiếm khách sạn Google Travel. | Tìm kiếm Google Travel Hotels cho khách sạn ở Paris. |
amazon_search | Thu thập dữ liệu Amazon Search cho một truy vấn nhất định và trả về kết quả đã phân tích. | Thu thập Amazon Search cho bàn phím không dây. |
amazon_product | Thu thập dữ liệu trang sản phẩm Amazon. | Thu thập sản phẩm Amazon B09H74FXNW và hiển thị cho tôi chi tiết. |
amazon_pricing | Thu thập dữ liệu thông tin giá sản phẩm Amazon. | Lấy giá cho sản phẩm Amazon B09H74FXNW. |
amazon_sellers | Thu thập dữ liệu thông tin người bán Amazon. | Lấy thông tin về người bán Amazon A1R0Z7FJGTKESH. |
amazon_bestsellers | Thu thập dữ liệu danh sách sản phẩm bán chạy nhất Amazon. | Hiển thị cho tôi sản phẩm bán chạy nhất Amazon trong lĩnh vực điện tử. |
walmart_search | Thu thập dữ liệu Walmart Search cho một truy vấn nhất định và trả về kết quả đã phân tích. | Thu thập Walmart Search cho lều cắm trại. |
walmart_product | Thu thập dữ liệu trang sản phẩm Walmart. | Thu thập sản phẩm Walmart 15296401808. |
target_search | Thu thập dữ liệu Target Search cho một truy vấn nhất định và trả về kết quả đã phân tích. | Thu thập Target Search cho thiết bị nhà bếp. |
target_product | Thu thập dữ liệu trang sản phẩm Target. | Thu thập sản phẩm Target 92186007. |
tiktok_post | Thu thập dữ liệu có cấu trúc từ URL bài đăng TikTok (ví dụ: mức độ tương tác, chú thích, hashtag). | Thu thập bài đăng TikTok này: https://www.tiktok.com/@nba/video/7393013274725403950 |
tiktok_shop_search | Thu thập dữ liệu TikTok Shop Search cho một truy vấn nhất định và trả về kết quả đã phân tích. | Thu thập TikTok Shop Search cho ốp điện thoại. |
tiktok_shop_product | Thu thập dữ liệu trang sản phẩm TikTok Shop. | Thu thập sản phẩm TikTok Shop 1731541214379741272. |
tiktok_shop_url | Thu thập dữ liệu trang TikTok Shop theo URL. | Thu thập URL TikTok Shop này: https://www.tiktok.com/shop/s?q=HEADPHONES |
youtube_metadata | Thu thập dữ liệu siêu dữ liệu video YouTube. | Lấy siêu dữ liệu cho video YouTube dFu9aKJoqGg. |
youtube_channel | Thu thập dữ liệu video của kênh YouTube. | Thu thập kênh YouTube @decodo_official. |
youtube_subtitles | Thu thập dữ liệu phụ đề video YouTube. | Lấy phụ đề cho video YouTube L8zSWbQN-v8. |
youtube_search | Tìm kiếm video YouTube. | Tìm kiếm YouTube cho "Cách chăm sóc chinchillas". |
reddit_post | Thu thập dữ liệu một bài đăng Reddit cụ thể. | Thu thập bài đăng Reddit sau: https://www.reddit.com/r/horseracing/comments/1nsrn3/ |
reddit_subreddit | Thu thập dữ liệu kết quả subreddit Reddit. | Thu thập 5 bài đăng hàng đầu trên r/Python tuần này. |
reddit_user | Thu thập dữ liệu hồ sơ người dùng Reddit cùng bài đăng và bình luận của họ. | Thu thập người dùng Reddit này: https://www.reddit.com/user/IWasRightOnce/ |
bing_search | Thu thập dữ liệu kết quả tìm kiếm Bing. | Tìm kiếm Bing cho đánh giá laptop. |
chatgpt | Tìm kiếm và tương tác với ChatGPT để nhận phản hồi và hội thoại hỗ trợ bởi AI. | Yêu cầu ChatGPT giải thích điện toán lượng tử bằng ngôn ngữ đơn giản. |
perplexity | Tìm kiếm và tương tác với Perplexity để nhận phản hồi và hội thoại hỗ trợ bởi AI. | Hỏi Perplexity về xu hướng mới nhất trong phát triển web là gì. |
Tham số
Các tham số sau được suy ra từ câu lệnh của người dùng:
| Tham số | Mô tả |
|---|---|
jsRender | Hiển thị URL mục tiêu trong trình duyệt headless. |
geo | Đặt quốc gia mà từ đó yêu cầu sẽ được khởi tạo. |
locale | Đặt ngôn ngữ địa phương của yêu cầu. |
tokenLimit | Cắt bớt nội dung phản hồi đến giới hạn này. Hữu ích nếu cửa sổ ngữ cảnh nhỏ. |
prompt | Câu lệnh gửi đến các công cụ AI (chatgpt, perplexity). |
search | Kích hoạt chức năng tìm kiếm web của ChatGPT (chỉ dành cho chatgpt). |
xhr | Khi đúng, bao gồm phản hồi XHR hoặc fetch trong kết quả thu thập nếu được hỗ trợ (ví dụ: tiktok_post). |
deviceType | Loại thiết bị để mô phỏng (desktop, mobile, tablet). Các mục tiêu đã phân tích chặt chẽ hơn: công cụ Amazon chỉ dành cho máy tính để bàn nên bỏ qua tham số này, và bing_search/google_ai_mode chỉ chấp nhận desktop và mobile. |
domain | Tên miền sử dụng cho yêu cầu (ví dụ: amazon.com, amazon.co.uk, bing.com). |
pageFrom | Số trang bắt đầu cho phân trang. |
deliveryZip | Mã ZIP cho vị trí giao hàng (Target, Walmart). |
storeId | ID cửa hàng cho hàng tồn kho địa phương (Walmart). |
country | Quốc gia cho yêu cầu TikTok Shop. |
limit | Số lượng kết quả tối đa để trả về (ví dụ: video kênh YouTube). |
language_code | Mã ngôn ngữ cho phụ đề (ví dụ: en, es). |
Ví dụ
Thu thập nội dung bị giới hạn theo khu vực
Hỏi tác nhân AI của bạn bằng câu lệnh sau:
Scrape peacock.com from a German IP address and tell me the pricing.
Câu lệnh này sẽ cho biết peacock.com bị giới hạn theo khu vực. Để vượt qua giới hạn khu vực:
Scrape peacock.com from a US IP address and tell me the pricing.
Giới hạn số lượng token phản hồi
Nếu tác nhân của bạn có cửa sổ ngữ cảnh nhỏ, nội dung trả về từ quá trình thu thập sẽ tự động bị cắt bớt để tránh tràn ngữ cảnh. Bạn có thể tăng số lượng token được trả về trong câu lệnh của mình:
Scrape hacker news, return 50k tokens.
Nếu tác nhân của bạn có cửa sổ ngữ cảnh lớn, hãy yêu cầu nó trả về full content:
Scrape hacker news, return full content.
Sử dụng với kỹ năng tác nhân Decodo
Máy chủ này cung cấp cho tác nhân của bạn các công cụ thu thập dữ liệu. Decodo/agent-skills
dạy nó khi nào nên sử dụng chúng, bề mặt nào để sử dụng và cách gọi — để tác nhân
tự chọn đúng công cụ và tham số thay vì phải đoán.
Các kỹ năng định tuyến qua CLI decodo, máy chủ MCP được lưu trữ này và API HTTP thô, đồng thời tự động chuyển sang
máy chủ MCP khi không có shell khả dụng. Kết hợp cả hai mang lại cho tác nhân của bạn cả
lớp thực thi (máy chủ này) và lớp quyết định (các kỹ năng) trong một thiết lập duy nhất.
Bắt đầu nhanh (Claude Code):
/plugin marketplace add Decodo/agent-skills
/plugin install decodo@decodo-skills
Xem README agent-skills để cài đặt thủ công và các tác nhân khác (Cursor, Codex, Gemini CLI, Windsurf).
Kho lưu trữ liên quan
Web Scraping API, Decodo agent skills, Decodo OpenClaw skill
Dùng thử
Kết nối Decodo MCP Server vào quy trình làm việc AI của bạn chỉ trong vài cú nhấp chuột và trang bị cho tác nhân AI của bạn dữ liệu thời gian thực từ bất kỳ trang web nào.
Bắt đầu miễn phí | Tài liệu | Discord
Giấy phép
Toàn bộ mã nguồn được phát hành theo Giấy phép MIT.