Scrapfly

ทางการ

Scrapfly MCP Server ช่วยให้ AI agent มีวิธีที่เรียบง่ายและเป็นหนึ่งเดียวในการดึงข้อมูลเว็บแบบเรียลไทม์ พร้อมการจัดการป้องกันบอทในตัว

คุณทำอะไรได้บ้างด้วย Scrapfly MCP?

  • ดึงข้อมูลจากหน้าเว็บแบบเรียลไทม์ — ขอให้ผู้ช่วยดึงราคาปัจจุบัน รายการประกาศ หรือข่าวจากหน้าเว็บใดก็ได้แบบเรียลไทม์
  • ข้ามการป้องกันบอต — ดึงข้อมูลจากหน้าเว็บโดยให้ Scrapfly จัดการ CAPTCHA พร็อกซี การเรนเดอร์ JavaScript และการจำกัดอัตราการเรียกใช้งาน
  • ดึงข้อมูลแบบมีโครงสร้าง — แปลงเว็บไซต์ที่ซับซ้อนให้เป็น JSON ที่สะอาดด้วยการดึงข้อมูลที่ขับเคลื่อนด้วย AI
  • จับภาพหน้าจอ — บันทึกภาพหน้าจอของทั้งหน้าเว็บหรือองค์ประกอบเฉพาะเพื่อใช้วิเคราะห์
  • ตรวจสอบการใช้งานบัญชี — ถามว่าคุณเหลือเครดิต Scrapfly เท่าไร และตรวจสอบโควตาปัจจุบันของคุณ

เอกสาร

เริ่มต้นใช้งาน Scrapfly MCP Server

Model Context Protocol (MCP) เป็นมาตรฐานเปิดที่ช่วยให้โมเดล AI โต้ตอบกับเครื่องมือและแหล่งข้อมูลภายนอกได้ Scrapfly MCP Server เปลี่ยน AI ของคุณจากระบบที่ถูกจำกัดด้วยข้อมูลฝึกสอน ให้เข้าถึงเว็บไซต์ใดก็ได้แบบเรียลไทม์ ทำให้ AI ของคุณสามารถดึงข้อมูลเว็บสดได้ตามต้องการ

MCP Cloud หรือโฮสต์เอง

Scrapfly MCP server ทำงานได้สองรูปแบบ โดยใช้เครื่องมือชุดเดียวกัน เลือกแบบใดแบบหนึ่ง:

MCP Cloud (มีผู้จัดการให้)โฮสต์เอง
ทำงานที่ไหนScrapfly เป็นผู้โฮสต์ที่ https://mcp.scrapfly.io/mcpเครื่องหรือเซิร์ฟเวอร์ของคุณ โดยใช้ เซิร์ฟเวอร์โอเพนซอร์ส
ติดตั้งไม่ต้องติดตั้ง: เพิ่ม URL ลงในไคลเอ็นต์ AI ของคุณสร้าง Go binary หรือ Docker image
การยืนยันตัวตนลงชื่อเข้าใช้ด้วย OAuth2 จากไคลเอ็นต์ หรือใช้ API keyAPI key ของคุณ
การอัปเดตเป็นเวอร์ชันล่าสุดเสมอคุณเป็นผู้ดึงและสร้างใหม่
เหมาะสำหรับผู้ใช้ส่วนใหญ่: Claude, Cursor, VS Code, ChatGPT และไคลเอ็นต์อื่น ๆเครื่องมือแบบกำหนดเอง สภาพแวดล้อมที่แยกจากเครือข่ายภายนอกหรือผ่านการตรวจสอบ

MCP Cloud

เพิ่ม URL ของเซิร์ฟเวอร์ลงในไคลเอ็นต์ AI ของคุณ ไคลเอ็นต์ที่รองรับ OAuth2 จะเปิดหน้าเข้าสู่ระบบ Scrapfly เมื่อใช้งานครั้งแรก ส่วนไคลเอ็นต์อื่น ๆ จะให้คุณป้อน API key (ดู การยืนยันตัวตน)

{
  "mcpServers": {
    "scrapfly-cloud-mcp": {
      "type": "http",
      "url": "https://mcp.scrapfly.io/mcp"
    }
  }
}

ไคลเอ็นต์ที่เริ่มทำงานได้เฉพาะโปรเซสในเครื่องจะเชื่อมต่อผ่าน mcp-remote:

{
  "mcpServers": {
    "scrapfly": {
      "command": "npx",
      "args": ["mcp-remote", "https://mcp.scrapfly.io/mcp"]
    }
  }
}

ไคลเอ็นต์แต่ละตัวมีขั้นตอนของตัวเอง ดู คู่มือการตั้งค่า (Claude Code, Claude Desktop, Cursor, VS Code, ChatGPT และอื่น ๆ)

โฮสต์เอง

สร้างเซิร์ฟเวอร์โอเพนซอร์สที่เขียนด้วย Go:

git clone https://github.com/scrapfly/scrapfly-mcp
cd scrapfly-mcp
go build -o scrapfly-mcp ./cmd/scrapfly-mcp

ไคลเอ็นต์ในเครื่อง (stdio): ไคลเอ็นต์จะเริ่ม binary โดยใช้ API key ของคุณในสภาพแวดล้อมของโปรเซส

{
  "mcpServers": {
    "scrapfly": {
      "command": "/path/to/scrapfly-mcp",
      "env": { "SCRAPFLY_API_KEY": "" }
    }
  }
}

เซิร์ฟเวอร์ HTTP: เริ่มทำงานโดยไม่มี key ผู้เรียกแต่ละรายจะส่ง key ของตนเองผ่าน Authorization: Bearer <key> หรือ ?key= บน http://<host>:8080/mcp

./scrapfly-mcp -http :8080

# or with Docker
docker build -t scrapfly-mcp .
docker run -p 8080:8080 scrapfly-mcp

การกำหนด key ใน SCRAPFLY_API_KEY พร้อมกับ -http จะทำให้ผู้เรียกทุกรายใช้ key นั้นได้โดยไม่ต้องยืนยันตัวตน ดังนั้นเซิร์ฟเวอร์จะ bind กับ 127.0.0.1 เว้นแต่คุณจะส่ง -allow-remote ดูตัวเลือกทั้งหมดได้ใน README

สิ่งที่ทำได้

แทนที่ AI ของคุณจะตอบว่า "ฉันไม่มีข้อมูลล่าสุด" ตอนนี้ AI สามารถ:

ดึงข้อมูลสด

ดึงราคา รายการ ข่าว หรือเนื้อหาจากหน้าเว็บใด ๆ ในปัจจุบันแบบเรียลไทม์

ข้ามระบบป้องกันบอต

จัดการ CAPTCHA, พร็อกซี, การเรนเดอร์ JavaScript และการจำกัดอัตราการใช้งานโดยอัตโนมัติ

ดึงข้อมูลแบบมีโครงสร้าง

แยกวิเคราะห์เว็บไซต์ที่ซับซ้อนให้เป็น JSON ที่สะอาดด้วยการดึงข้อมูลที่ขับเคลื่อนด้วย AI

จับภาพหน้าจอ

บันทึกภาพหน้าจอของหน้าเว็บหรือองค์ประกอบเฉพาะเพื่อใช้วิเคราะห์

ทำไมต้องใช้ Scrapfly MCP Server?

สร้างบนโครงสร้างพื้นฐานที่ผ่านการพิสูจน์แล้วจากการใช้งานของนักพัฒนาหลายพันคน:

เชื่อถือได้เสมอ

AI ของคุณจะไม่ถูกบล็อก

ตั้งค่าได้รวดเร็ว

เริ่มทำงานได้ภายในไม่ถึง 60 วินาที

ปลอดภัย

OAuth2 + การยืนยันตัวตนระดับองค์กร

พลังของ MCP Connectors

MCP เป็นตัวเชื่อมต่อสากลที่เปลี่ยน ไคลเอ็นต์ AI ใดก็ได้ ให้เป็นเครื่องมือดึงข้อมูลเว็บประสิทธิภาพสูง แทนที่จะสร้างการเชื่อมต่อแบบกำหนดเองสำหรับแพลตฟอร์ม AI แต่ละแห่ง MCP มีอินเทอร์เฟซมาตรฐานเพียงชุดเดียว

ใช้งานร่วมกับเครื่องมือ AI ที่คุณชื่นชอบ:
  • Claude Desktop, Cursor, Cline, Windsurf
  • LangChain, LlamaIndex, CrewAI
  • การเรียกใช้ฟังก์ชันของ OpenAI, เอเจนต์แบบกำหนดเอง
  • เวิร์กโฟลว์ n8n, Make, Zapier
เชื่อมต่อครั้งเดียว ใช้งานได้ไม่จำกัด:

ตั้งค่าเพียงครั้งเดียว ใช้ได้ทุกที่ MCP server เดียวกันทำงานได้บนทุกแพลตฟอร์ม ไม่จำเป็นต้องสร้างการเชื่อมต่อใหม่สำหรับเครื่องมือ AI แต่ละตัวที่คุณเลือกใช้

วิธีใช้ Scrapfly MCP

เริ่มต้นได้ง่าย ๆ เพียงเลือกไคลเอ็นต์ AI ของคุณแล้วทำตามคู่มือการตั้งค่า:

[###### ตั้งค่าสำหรับไคลเอ็นต์ AI ของคุณ

การเชื่อมต่อกว่า 15 แบบ: Claude Desktop, Cursor, Cline, Windsurf, LangChain, n8n และอื่น ๆ

](https://scrapfly.io/docs/mcp/integrations) [###### เครื่องมือที่มีให้ใช้

เครื่องมือ 9 รายการ: การดึงข้อมูล ภาพหน้าจอ และ Cloud Browser พร้อมการค้นพบเครื่องมือ WebMCP แบบไดนามิก

](https://scrapfly.io/docs/mcp/tools) [###### ตัวเลือกการยืนยันตัวตน

API key, OAuth2 หรือการยืนยันตัวตนผ่าน header เลือกแบบที่เหมาะกับความต้องการของคุณ

](https://scrapfly.io/docs/mcp/authentication)

ขั้นตอนถัดไป

ดูตัวอย่างการใช้งานจริง - การรวบรวมประกาศงาน การติดตามราคา การดึงข้อมูล และอื่น ๆ คู่มือการตั้งค่าเฉพาะไคลเอ็นต์ - Cursor, Cline, LangChain, n8n และแพลตฟอร์มที่รองรับทั้งหมด เครื่องมือและข้อกำหนด API - เอกสารพารามิเตอร์และคู่มือการใช้งานฉบับสมบูรณ์ ตั้งค่าการยืนยันตัวตน OAuth2 - การยืนยันตัวตนที่ปลอดภัยระดับองค์กรสำหรับใช้งานจริง อ่านคำถามที่พบบ่อย - คำถามทั่วไปและวิธีแก้ปัญหา

ตรวจสอบการตั้งค่า

หลังจากกำหนดค่าแล้ว ให้ตรวจสอบว่าทุกอย่างทำงานถูกต้อง:

  1. ตรวจสอบความพร้อมใช้งานของเครื่องมือมองหาไอคอนค้อน (🔨) ในไคลเอ็นต์ AI ของคุณ หรือตรวจสอบรายการเครื่องมือเพื่อยืนยันว่าโหลดเครื่องมือ Scrapfly แล้ว

  2. ทดสอบคำขออย่างง่ายลองถามว่า: "ตอนนี้โพสต์ยอดนิยมบน Hacker News มีอะไรบ้าง?"

    AI ของคุณควรใช้เครื่องมือ Scrapfly โดยอัตโนมัติเพื่อดึงและแสดงผลลัพธ์ล่าสุด

  3. ตรวจสอบการใช้งานบัญชีถามว่า: "ฉันเหลือเครดิต Scrapfly อีกเท่าไร?"

    AI จะใช้ info_account เพื่อแสดงการใช้งานและโควตาปัจจุบันของคุณ

การแก้ไขปัญหา

หากพบปัญหา ต่อไปนี้คือปัญหาที่พบบ่อยและวิธีแก้ไข:

ตรวจไม่พบเครื่องมือ

  • ตรวจสอบการกำหนดค่า JSON - ตรวจสอบว่าการกำหนดค่าไม่มีข้อผิดพลาดทางไวยากรณ์ (เช่น ลืมใส่จุลภาคหรือวงเล็บ)
  • เริ่มไคลเอ็นต์ AI ใหม่ - ไคลเอ็นต์หลายตัวต้องเริ่มใหม่ทั้งหมดเพื่อโหลด MCP server ใหม่
  • ตรวจสอบว่า npx พร้อมใช้งาน - เรียกใช้ npx --version ในเทอร์มินัลเพื่อตรวจสอบว่าติดตั้งแล้ว
  • ตรวจสอบ API key - ตรวจสอบว่า Scrapfly API key ของคุณถูกต้องและมีเครดิตเหลืออยู่

ข้อผิดพลาดในการยืนยันตัวตน

  • API key ไม่ถูกต้อง - ตรวจสอบ key ของคุณอีกครั้งที่ แดชบอร์ด → การตั้งค่าโปรเจกต์
  • เครือข่ายไม่ได้รับอนุญาต / โปรเจกต์ของคุณจำกัดการเข้าถึง - โปรเจกต์ยอมรับเฉพาะที่อยู่ IP บางรายการ และ key ใช้งานได้ ดู การแก้ไขปัญหา
  • ปัญหา OAuth2 - ตรวจสอบว่าคุณดำเนินการ OAuth flow เสร็จแล้วและมีการรีเฟรชโทเค็น
  • ข้อมูลรับรองหมดอายุ - ยืนยันตัวตนอีกครั้งหากเซสชันของคุณหมดอายุ

ต้องการความช่วยเหลือเพิ่มเติม?

ดูแหล่งข้อมูลการแก้ไขปัญหาโดยละเอียดของเรา: