Scrapfly

officiel

Le serveur MCP Scrapfly offre aux agents IA un moyen simple et unifié d'extraire des données web en direct avec une gestion intégrée anti-bot.

Que pouvez-vous faire avec Scrapfly MCP ?

  • Extraire des données de pages en direct — Demandez à votre assistant de récupérer en temps réel les prix, les annonces ou les actualités actuels sur n’importe quelle page Web.
  • Contourner les protections anti-bots — Récupérez des pages pendant que Scrapfly gère les CAPTCHA, les proxys, le rendu JavaScript et les limites de débit.
  • Extraire des données structurées — Faites analyser des sites complexes pour obtenir des données JSON propres grâce à l’extraction par IA.
  • Capturer des captures d’écran — Prenez des instantanés visuels de pages entières ou d’éléments spécifiques à des fins d’analyse.
  • Vérifier l’utilisation de votre compte — Demandez combien de crédits Scrapfly il vous reste et consultez votre quota actuel.

Documentation

Bien démarrer avec le serveur MCP Scrapfly

Le Model Context Protocol (MCP) est une norme ouverte qui permet aux modèles d’IA d’interagir avec des outils et des sources de données externes. Le serveur MCP Scrapfly fait passer votre IA d’un fonctionnement limité par ses données d’entraînement à un accès en temps réel à n’importe quel site web, lui permettant ainsi d’extraire des données web en direct à la demande.

MCP Cloud ou auto-hébergé

Le serveur MCP Scrapfly peut fonctionner de deux façons, avec les mêmes outils. Choisissez-en une :

MCP Cloud (géré)Auto-hébergé
Où il fonctionneHébergé par Scrapfly à l’adresse https://mcp.scrapfly.io/mcpSur votre machine ou vos serveurs, à partir du serveur open source
InstallationAucune : ajoutez l’URL à votre client d’IACompilez le binaire Go ou l’image Docker
AuthentificationConnexion OAuth2 depuis le client, ou votre clé APIVotre clé API
Mises à jourToujours la dernière versionVous récupérez les mises à jour et recompilez
Idéal pourLa plupart des utilisateurs : Claude, Cursor, VS Code, ChatGPT et d’autres clientsLes outils personnalisés, les environnements isolés ou audités

MCP Cloud

Ajoutez l’URL du serveur à votre client d’IA. Les clients compatibles avec OAuth2 ouvrent une page de connexion Scrapfly lors de la première utilisation ; les autres utilisent votre clé API (voir Authentification).

{
  "mcpServers": {
    "scrapfly-cloud-mcp": {
      "type": "http",
      "url": "https://mcp.scrapfly.io/mcp"
    }
  }
}

Un client qui ne démarre qu’un processus local se connecte via mcp-remote :

{
  "mcpServers": {
    "scrapfly": {
      "command": "npx",
      "args": ["mcp-remote", "https://mcp.scrapfly.io/mcp"]
    }
  }
}

Chaque client a ses propres étapes : consultez les guides de configuration (Claude Code, Claude Desktop, Cursor, VS Code, ChatGPT et plus encore).

Auto-hébergé

Compilez le serveur open source, écrit en Go :

git clone https://github.com/scrapfly/scrapfly-mcp
cd scrapfly-mcp
go build -o scrapfly-mcp ./cmd/scrapfly-mcp

Client local (stdio) : le client démarre le binaire avec votre clé API dans son environnement.

{
  "mcpServers": {
    "scrapfly": {
      "command": "/path/to/scrapfly-mcp",
      "env": { "SCRAPFLY_API_KEY": "" }
    }
  }
}

Serveur HTTP : démarré sans clé, il demande à chaque appelant de fournir la sienne, sous la forme Authorization: Bearer <key> ou ?key= sur http://<host>:8080/mcp.

./scrapfly-mcp -http :8080

# or with Docker
docker build -t scrapfly-mcp .
docker run -p 8080:8080 scrapfly-mcp

Une clé définie dans SCRAPFLY_API_KEY avec -http permet à tous les appelants d’utiliser cette clé sans authentification ; le serveur se lie donc à 127.0.0.1, sauf si vous transmettez -allow-remote. Toutes les options sont dans le README.

Ce que cela vous permet de faire

Au lieu de répondre « Je n’ai pas d’informations à jour », votre IA peut désormais :

Extraire des données en direct

Récupérer en temps réel les prix, les annonces, les actualités ou le contenu de n’importe quelle page web

Contourner les systèmes anti-bots

Gérer automatiquement les CAPTCHA, les proxys, le rendu JavaScript et les limites de débit

Extraire des données structurées

Analyser des sites web complexes pour obtenir du JSON propre grâce à l’extraction assistée par l’IA

Capturer des captures d’écran

Prendre des instantanés visuels de pages ou d’éléments spécifiques à des fins d’analyse

Pourquoi le serveur MCP Scrapfly ?

Reposant sur une infrastructure éprouvée, utilisée par des milliers de développeurs :

Toujours fiable

Votre IA n’est jamais bloquée

Configuration rapide

Opérationnel en moins de 60 secondes

Sécurisé

OAuth2 et authentification d’entreprise

La puissance des connecteurs MCP

MCP est un connecteur universel qui transforme n’importe quel client d’IA en un puissant outil d’extraction de données web. Au lieu de créer des intégrations personnalisées pour chaque plateforme d’IA, MCP fournit une interface standard unique.

Compatible avec vos outils d’IA préférés :
  • Claude Desktop, Cursor, Cline, Windsurf
  • LangChain, LlamaIndex, CrewAI
  • Appels de fonctions OpenAI, agents personnalisés
  • Workflows n8n, Make, Zapier
Une intégration, des possibilités infinies :

Configurez une fois, utilisez partout. Le même serveur MCP fonctionne sur toutes les plateformes : inutile de recréer des intégrations pour chaque outil d’IA que vous adoptez.

Comment utiliser Scrapfly MCP

La prise en main est simple : choisissez votre client d’IA et suivez le guide de configuration :

[###### Configurer votre client d’IA

Plus de 15 intégrations : Claude Desktop, Cursor, Cline, Windsurf, LangChain, n8n et plus encore

](https://scrapfly.io/docs/mcp/integrations) [###### Outils disponibles

9 outils : extraction de données, captures d’écran, Cloud Browser avec découverte dynamique des outils WebMCP

](https://scrapfly.io/docs/mcp/tools) [###### Options d’authentification

Clé API, OAuth2 ou authentification par en-tête : choisissez la méthode qui vous convient

](https://scrapfly.io/docs/mcp/authentication)

Étapes suivantes

Voir des exemples concrets - Agrégation d’offres d’emploi, suivi des prix, extraction de données et plus encore Guides de configuration par client - Cursor, Cline, LangChain, n8n et toutes les plateformes prises en charge Outils et spécification de l’API - Documentation complète des paramètres et guides d’utilisation Configurer l’authentification OAuth2 - Authentification sécurisée de niveau entreprise pour la production Lire la FAQ - Questions fréquentes et dépannage

Vérifier votre configuration

Après la configuration, vérifiez que tout fonctionne correctement :

  1. Vérifier la disponibilité des outilsRecherchez l’icône de marteau (🔨) dans votre client d’IA ou consultez la liste des outils pour confirmer que les outils Scrapfly sont chargés.

  2. Tester une requête simpleEssayez de demander : « Quels sont les principaux posts sur Hacker News en ce moment ? »

    Votre IA devrait automatiquement utiliser les outils Scrapfly pour récupérer et afficher les résultats actuels.

  3. Vérifier l’utilisation de votre compteDemandez : « Combien de crédits Scrapfly me reste-t-il ? »

    L’IA utilisera info_account pour afficher votre utilisation et votre quota actuels.

Dépannage

Si vous rencontrez des problèmes, voici les problèmes courants et leurs solutions :

Outils non détectés

  • Vérifiez la configuration JSON - Assurez-vous que votre configuration ne contient aucune erreur de syntaxe (virgules ou crochets manquants)
  • Redémarrez votre client d’IA - De nombreux clients nécessitent un redémarrage complet pour charger les nouveaux serveurs MCP
  • Vérifiez la disponibilité de npx - Exécutez npx --version dans votre terminal pour vérifier qu’il est installé
  • Validez la clé API - Assurez-vous que votre clé API Scrapfly est correcte et que votre compte dispose de crédits

Erreurs d’authentification

  • Clé API invalide - Vérifiez votre clé dans Dashboard → Project Settings
  • Réseau non autorisé / Accès restreint par votre projet - Le projet n’accepte que certaines adresses IP et la clé est valide. Consultez Dépannage
  • Problèmes OAuth2 - Assurez-vous d’avoir terminé le flux OAuth et que les jetons sont actualisés
  • Identifiants expirés - Authentifiez-vous à nouveau si votre session a expiré

Besoin d’aide supplémentaire ?

Consultez nos ressources détaillées de dépannage :