Scrapfly
officielLe serveur MCP Scrapfly offre aux agents IA un moyen simple et unifié d'extraire des données web en direct avec une gestion intégrée anti-bot.
Que pouvez-vous faire avec Scrapfly MCP ?
- Extraire des données de pages en direct — Demandez à votre assistant de récupérer en temps réel les prix, les annonces ou les actualités actuels sur n’importe quelle page Web.
- Contourner les protections anti-bots — Récupérez des pages pendant que Scrapfly gère les CAPTCHA, les proxys, le rendu JavaScript et les limites de débit.
- Extraire des données structurées — Faites analyser des sites complexes pour obtenir des données JSON propres grâce à l’extraction par IA.
- Capturer des captures d’écran — Prenez des instantanés visuels de pages entières ou d’éléments spécifiques à des fins d’analyse.
- Vérifier l’utilisation de votre compte — Demandez combien de crédits Scrapfly il vous reste et consultez votre quota actuel.
Documentation
Bien démarrer avec le serveur MCP Scrapfly
Le Model Context Protocol (MCP) est une norme ouverte qui permet aux modèles d’IA d’interagir avec des outils et des sources de données externes. Le serveur MCP Scrapfly fait passer votre IA d’un fonctionnement limité par ses données d’entraînement à un accès en temps réel à n’importe quel site web, lui permettant ainsi d’extraire des données web en direct à la demande.
MCP Cloud ou auto-hébergé
Le serveur MCP Scrapfly peut fonctionner de deux façons, avec les mêmes outils. Choisissez-en une :
| MCP Cloud (géré) | Auto-hébergé | |
|---|---|---|
| Où il fonctionne | Hébergé par Scrapfly à l’adresse https://mcp.scrapfly.io/mcp | Sur votre machine ou vos serveurs, à partir du serveur open source |
| Installation | Aucune : ajoutez l’URL à votre client d’IA | Compilez le binaire Go ou l’image Docker |
| Authentification | Connexion OAuth2 depuis le client, ou votre clé API | Votre clé API |
| Mises à jour | Toujours la dernière version | Vous récupérez les mises à jour et recompilez |
| Idéal pour | La plupart des utilisateurs : Claude, Cursor, VS Code, ChatGPT et d’autres clients | Les outils personnalisés, les environnements isolés ou audités |
MCP Cloud
Ajoutez l’URL du serveur à votre client d’IA. Les clients compatibles avec OAuth2 ouvrent une page de connexion Scrapfly lors de la première utilisation ; les autres utilisent votre clé API (voir Authentification).
{
"mcpServers": {
"scrapfly-cloud-mcp": {
"type": "http",
"url": "https://mcp.scrapfly.io/mcp"
}
}
}
Un client qui ne démarre qu’un processus local se connecte via mcp-remote :
{
"mcpServers": {
"scrapfly": {
"command": "npx",
"args": ["mcp-remote", "https://mcp.scrapfly.io/mcp"]
}
}
}
Chaque client a ses propres étapes : consultez les guides de configuration (Claude Code, Claude Desktop, Cursor, VS Code, ChatGPT et plus encore).
Auto-hébergé
Compilez le serveur open source, écrit en Go :
git clone https://github.com/scrapfly/scrapfly-mcp
cd scrapfly-mcp
go build -o scrapfly-mcp ./cmd/scrapfly-mcp
Client local (stdio) : le client démarre le binaire avec votre clé API dans son environnement.
{
"mcpServers": {
"scrapfly": {
"command": "/path/to/scrapfly-mcp",
"env": { "SCRAPFLY_API_KEY": "" }
}
}
}
Serveur HTTP : démarré sans clé, il demande à chaque appelant de fournir la sienne, sous la forme Authorization: Bearer <key> ou ?key= sur http://<host>:8080/mcp.
./scrapfly-mcp -http :8080
# or with Docker
docker build -t scrapfly-mcp .
docker run -p 8080:8080 scrapfly-mcp
Une clé définie dans SCRAPFLY_API_KEY avec -http permet à tous les appelants d’utiliser cette clé sans authentification ; le serveur se lie donc à 127.0.0.1, sauf si vous transmettez -allow-remote. Toutes les options sont dans le README.
Ce que cela vous permet de faire
Au lieu de répondre « Je n’ai pas d’informations à jour », votre IA peut désormais :
Extraire des données en direct
Récupérer en temps réel les prix, les annonces, les actualités ou le contenu de n’importe quelle page web
Contourner les systèmes anti-bots
Gérer automatiquement les CAPTCHA, les proxys, le rendu JavaScript et les limites de débit
Extraire des données structurées
Analyser des sites web complexes pour obtenir du JSON propre grâce à l’extraction assistée par l’IA
Capturer des captures d’écran
Prendre des instantanés visuels de pages ou d’éléments spécifiques à des fins d’analyse
Pourquoi le serveur MCP Scrapfly ?
Reposant sur une infrastructure éprouvée, utilisée par des milliers de développeurs :
Toujours fiable
Votre IA n’est jamais bloquée
Configuration rapide
Opérationnel en moins de 60 secondes
Sécurisé
OAuth2 et authentification d’entreprise
La puissance des connecteurs MCP
MCP est un connecteur universel qui transforme n’importe quel client d’IA en un puissant outil d’extraction de données web. Au lieu de créer des intégrations personnalisées pour chaque plateforme d’IA, MCP fournit une interface standard unique.
Compatible avec vos outils d’IA préférés :
- Claude Desktop, Cursor, Cline, Windsurf
- LangChain, LlamaIndex, CrewAI
- Appels de fonctions OpenAI, agents personnalisés
- Workflows n8n, Make, Zapier
Une intégration, des possibilités infinies :
Configurez une fois, utilisez partout. Le même serveur MCP fonctionne sur toutes les plateformes : inutile de recréer des intégrations pour chaque outil d’IA que vous adoptez.
Comment utiliser Scrapfly MCP
La prise en main est simple : choisissez votre client d’IA et suivez le guide de configuration :
[###### Configurer votre client d’IA
Plus de 15 intégrations : Claude Desktop, Cursor, Cline, Windsurf, LangChain, n8n et plus encore
](https://scrapfly.io/docs/mcp/integrations) [###### Outils disponibles
9 outils : extraction de données, captures d’écran, Cloud Browser avec découverte dynamique des outils WebMCP
](https://scrapfly.io/docs/mcp/tools) [###### Options d’authentification
Clé API, OAuth2 ou authentification par en-tête : choisissez la méthode qui vous convient
](https://scrapfly.io/docs/mcp/authentication)
Étapes suivantes
Voir des exemples concrets - Agrégation d’offres d’emploi, suivi des prix, extraction de données et plus encore Guides de configuration par client - Cursor, Cline, LangChain, n8n et toutes les plateformes prises en charge Outils et spécification de l’API - Documentation complète des paramètres et guides d’utilisation Configurer l’authentification OAuth2 - Authentification sécurisée de niveau entreprise pour la production Lire la FAQ - Questions fréquentes et dépannage
Vérifier votre configuration
Après la configuration, vérifiez que tout fonctionne correctement :
-
Vérifier la disponibilité des outilsRecherchez l’icône de marteau (🔨) dans votre client d’IA ou consultez la liste des outils pour confirmer que les outils Scrapfly sont chargés.
-
Tester une requête simpleEssayez de demander : « Quels sont les principaux posts sur Hacker News en ce moment ? »
Votre IA devrait automatiquement utiliser les outils Scrapfly pour récupérer et afficher les résultats actuels.
-
Vérifier l’utilisation de votre compteDemandez : « Combien de crédits Scrapfly me reste-t-il ? »
L’IA utilisera
info_accountpour afficher votre utilisation et votre quota actuels.
Dépannage
Si vous rencontrez des problèmes, voici les problèmes courants et leurs solutions :
Outils non détectés
- Vérifiez la configuration JSON - Assurez-vous que votre configuration ne contient aucune erreur de syntaxe (virgules ou crochets manquants)
- Redémarrez votre client d’IA - De nombreux clients nécessitent un redémarrage complet pour charger les nouveaux serveurs MCP
- Vérifiez la disponibilité de
npx- Exécuteznpx --versiondans votre terminal pour vérifier qu’il est installé - Validez la clé API - Assurez-vous que votre clé API Scrapfly est correcte et que votre compte dispose de crédits
Erreurs d’authentification
- Clé API invalide - Vérifiez votre clé dans Dashboard → Project Settings
- Réseau non autorisé / Accès restreint par votre projet - Le projet n’accepte que certaines adresses IP et la clé est valide. Consultez Dépannage
- Problèmes OAuth2 - Assurez-vous d’avoir terminé le flux OAuth et que les jetons sont actualisés
- Identifiants expirés - Authentifiez-vous à nouveau si votre session a expiré
Besoin d’aide supplémentaire ?
Consultez nos ressources détaillées de dépannage :
- FAQ MCP - Questions fréquentes et réponses détaillées
- Communauté Discord - Obtenez de l’aide auprès de la communauté
- Contacter l’assistance - Contactez directement notre équipe