Scrapfly MCP Server

공식

Scrapfly MCP 서버는 AI 에이전트가 내장된 안티봇 처리를 통해 라이브 웹 데이터를 간단하고 통일된 방식으로 스크래핑할 수 있게 해줍니다.

문서

Scrapfly MCP 서버 시작하기

**모델 컨텍스트 프로토콜(MCP)**은 AI 모델이 외부 도구 및 데이터 소스와 상호 작용할 수 있게 해주는 개방형 표준입니다. Scrapfly MCP 서버는 여러분의 AI가 학습 데이터에 국한되지 않고 모든 웹사이트에 실시간으로 접근할 수 있도록 변화시켜, 필요할 때마다 실시간 웹 데이터를 스크래핑할 수 있는 능력을 부여합니다.

이를 통해 가능해지는 것

이제 여러분의 AI는 "현재 정보가 없습니다"라고 답변하는 대신 다음을 수행할 수 있습니다:

실시간 데이터 스크래핑

현재 가격, 목록, 뉴스 또는 모든 웹페이지 콘텐츠를 실시간으로 가져옵니다

안티봇 시스템 우회

CAPTCHA, 프록시, 자바스크립트 렌더링, 속도 제한을 자동으로 처리합니다

구조화된 데이터 추출

AI 기반 추출을 사용하여 복잡한 웹사이트를 깔끔한 JSON으로 파싱합니다

스크린샷 캡처

분석을 위해 페이지나 특정 요소의 시각적 스냅샷을 찍습니다

Scrapfly MCP 서버를 선택해야 하는 이유

수천 명의 개발자가 사용하는 검증된 인프라를 기반으로 구축되었습니다:

항상 신뢰할 수 있음

AI가 차단되지 않습니다

빠른 설정

60초 이내에 실행 가능

안전함

OAuth2 + 엔터프라이즈 인증

MCP 커넥터의 강력함

MCP는 모든 AI 클라이언트를 웹 스크래핑 강자로 바꿔주는 범용 커넥터입니다. 각 AI 플랫폼마다 맞춤형 통합을 구축하는 대신, MCP는 단일 표준 인터페이스를 제공합니다.

선호하는 AI 도구와 함께 작동:
  • Claude Desktop, Cursor, Cline, Windsurf
  • LangChain, LlamaIndex, CrewAI
  • OpenAI 함수 호출, 커스텀 에이전트
  • n8n, Make, Zapier 워크플로우
하나의 통합, 무한한 가능성:

한 번 구성하면 어디서나 사용할 수 있습니다. 동일한 MCP 서버가 모든 플랫폼에서 작동하므로, 각 AI 도구를 도입할 때마다 통합을 다시 구축할 필요가 없습니다.

Scrapfly MCP 사용 방법

시작은 간단합니다. AI 클라이언트를 선택하고 설정 가이드를 따르세요:

[###### AI 클라이언트별 설정

15개 이상의 통합: Claude Desktop, Cursor, Cline, Windsurf, LangChain, n8n 등

](https://scrapfly.io/docs/mcp/integrations) [###### 사용 가능한 도구

9가지 도구: 스크래핑, 스크린샷, 동적 WebMCP 도구 검색 기능이 있는 클라우드 브라우저

](https://scrapfly.io/docs/mcp/tools) [###### 인증 옵션

API 키, OAuth2 또는 헤더 기반 인증 - 필요에 맞게 선택하세요

](https://scrapfly.io/docs/mcp/authentication)

다음 단계

실제 사용 사례 보기 - 채용 정보 집계, 가격 모니터링, 데이터 추출 등 클라이언트별 설정 가이드 - Cursor, Cline, LangChain, n8n 및 지원되는 모든 플랫폼 도구 및 API 사양 - 전체 매개변수 문서 및 사용 가이드 OAuth2 인증 설정 - 프로덕션을 위한 안전한 엔터프라이즈급 인증 FAQ 읽기 - 일반적인 질문 및 문제 해결

설정 확인

구성 후 모든 것이 올바르게 작동하는지 확인하세요:

  1. 도구 가용성 확인AI 클라이언트에서 망치 아이콘(🔨)을 찾거나 도구 목록을 확인하여 Scrapfly 도구가 로드되었는지 확인하세요.

  2. 간단한 요청 테스트다음과 같이 질문해 보세요: "지금 Hacker News의 인기 게시물은 무엇인가요?"

    AI가 자동으로 Scrapfly 도구를 사용하여 현재 결과를 가져와 표시할 것입니다.

  3. 계정 사용량 확인질문: "Scrapfly 크레딧이 얼마나 남았나요?"

    AI가 info_account을(를) 사용하여 현재 사용량과 할당량을 보여줄 것입니다.

문제 해결

문제가 발생하면 다음과 같은 일반적인 문제와 해결책을 참고하세요:

도구가 감지되지 않음

  • JSON 구성 확인 - 구성에 구문 오류(쉼표 누락, 괄호 누락)가 없는지 확인하세요
  • AI 클라이언트 재시작 - 많은 클라이언트에서 새 MCP 서버를 로드하려면 전체 재시작이 필요합니다
  • npx 가용성 확인 - 터미널에서 npx --version을(를) 실행하여 설치되었는지 확인하세요
  • API 키 유효성 검사 - Scrapfly API 키가 올바르고 사용 가능한 크레딧이 있는지 확인하세요

인증 오류

  • 잘못된 API 키 - 대시보드 → 프로젝트 설정에서 키를 다시 확인하세요
  • OAuth2 문제 - OAuth 흐름을 완료하고 토큰이 갱신되었는지 확인하세요
  • 만료된 자격 증명 - 세션이 만료된 경우 다시 인증하세요

도움이 더 필요하신가요?

자세한 문제 해결 리소스를 확인하세요: