Web Content & URL Tools
Servidor MCP remoto com 26 ferramentas: páginas web para Markdown, metadados, stack tecnológica, SSL, cabeçalhos de segurança, SEO, WHOIS/DNS, autenticação de e-mail (SPF/DMARC/DKIM) e verificações de SSO.
Servidor MCP hospedado
npx add-mcp 'https://avalonai--web-content-url-tools-mcp.apify.actor/mcp'Instala no Claude Code, Codex, Cursor e outros
Documentação
Servidor MCP Web Content & URL Tools
Um servidor remoto Model Context Protocol que dá a agentes de IA 26 ferramentas para ler e verificar a web — sem navegador, sem configuração, pague apenas por chamadas bem-sucedidas.
Leia qualquer página como Markdown limpo, extraia seus metadados ou estrutura, detecte sua stack de tecnologia e verifique redirecionamentos, certificados TLS, cabeçalhos de segurança, robots.txt, sitemaps, feeds, domínios (WHOIS/DNS), SEO, links quebrados, autenticação de e-mail (SPF, DMARC, DKIM) e single sign-on (SAML, OpenID Connect). Também inclui utilitários de desenvolvimento do dia a dia (cron, regex, cor, Unicode, fusos horários) e dados de mercado de perpétuos da Hyperliquid.
- Apify Store: https://apify.com/avalonai/web-content-url-tools-mcp
- Documentação para desenvolvedores: https://avaloncompany.ai/developers/
- Transporte: HTTP Streamable (remoto, hospedado no Apify Standby)
Conectar
Opção 1 — URL Standby + token da API Apify
Use seu token da API Apify como token Bearer. Funciona no Claude Desktop, Claude Code, Cursor, VS Code, Windsurf e em qualquer cliente MCP que suporte servidores remotos com cabeçalhos.
{
"mcpServers": {
"web-content-url-tools": {
"url": "https://avalonai--web-content-url-tools-mcp.apify.actor/mcp",
"headers": { "Authorization": "Bearer <YOUR_APIFY_TOKEN>" }
}
}
}
Opção 2 — OAuth via mcp.apify.com (sem token para copiar)
Clientes que suportam OAuth MCP podem se conectar pelo gateway MCP hospedado da Apify e entrar com sua conta Apify no navegador:
https://mcp.apify.com?tools=avalonai/web-content-url-tools-mcp
Exemplo no Claude Code:
claude mcp add --transport http web-content-url-tools "https://mcp.apify.com?tools=avalonai/web-content-url-tools-mcp"
Ferramentas
Páginas web e URLs
| Ferramenta | O que retorna | Preço por chamada |
|---|---|---|
to_markdown | Markdown limpo e pronto para LLM do conteúdo principal (menus, anúncios e rodapés removidos), contagem de palavras/caracteres, idioma | $0,003 |
get_metadata | Título, descrição, imagem de pré-visualização, nome do site, URL canônica, favicon, autor, data de publicação, tags Open Graph / Twitter | $0,003 |
extract_structure | Estrutura de cabeçalhos, links internos/externos, imagens, tabelas e JSON-LD | $0,003 |
detect_technologies | CMS, framework, plataforma de e-commerce, CDN, ferramentas de analytics e pagamento, com evidências | $0,003 |
trace_redirects | Cada salto de redirecionamento (HTTP e meta refresh) até a URL final — expande links curtos | $0,001 |
check_ssl | Emissor do certificado, expiração, dias restantes, SANs e se os navegadores confiam nele | $0,001 |
grade_security_headers | Nota de A+ a F para cabeçalhos de segurança, vazamentos de informação e cookies inseguros | $0,001 |
parse_robots | Regras do robots.txt por user agent, sitemaps e se um caminho pode ser rastreado | $0,001 |
parse_sitemap | URLs de um sitemap ou índice de sitemaps (descoberta automática, suporte a gzip) | $0,001 |
read_feed | Feed RSS, Atom ou RDF como JSON (descoberta automática a partir da URL do site) | $0,001 |
lookup_domain | Registrador WHOIS (RDAP), datas, idade do domínio, servidores de nomes, registros DNS, MX/SPF/DMARC | $0,001 |
audit_seo | Pontuação e nota de SEO na página com problemas priorizados e correções | $0,003 |
check_broken_links | Até 100 links verificados: quebrados, redirecionados e bloqueados por bot relatados separadamente | $0,003 |
Diagnósticos de e-mail e identidade
| Ferramenta | O que retorna | Preço por chamada |
|---|---|---|
check_email_domain | MX, SPF (limite de 10 consultas), DMARC, DKIM, MTA-STS, TLS-RPT e BIMI com nota passou/avisou/falhou, correções e pontuação de 0 a 100 | $0,003 |
analyze_saml_metadata | Metadados SAML (XML ou URL): ID da entidade, endpoints e bindings, formatos NameID, expiração do certificado de assinatura e problemas | $0,001 |
check_oidc_provider | Descoberta OpenID Connect e JWKS: correspondência do emissor, HTTPS, PKCE S256, algoritmos de token ID, tamanhos de chave, expiração do certificado | $0,001 |
Utilitários para desenvolvedores
| Ferramenta | O que retorna | Preço por chamada |
|---|---|---|
parse_cron | Validade, explicação em linguagem simples, horários anteriores e próximos de execução em qualquer fuso horário | $0,001 |
test_regex | Cada correspondência com posições e grupos, além de localizar e substituir; padrões descontrolados param em 0,1 s | $0,001 |
convert_color | HEX, RGB, HSL, HSV, CMYK, melhor cor de texto, contraste e paletas | $0,001 |
check_color_contrast | Razão de contraste WCAG 2 com aprovação/reprovação AA/AAA | $0,001 |
inspect_unicode | Code point, nome e bytes por caractere; contagem de grafemas; formas de normalização | $0,001 |
convert_timezone | Um horário em várias zonas IANA com offsets, abreviações e horário de verão | $0,001 |
list_timezones | Nomes de fusos horários IANA, opcionalmente por região | $0,001 |
Dados de mercado de perpétuos da Hyperliquid
| Ferramenta | O que retorna | Preço por chamada |
|---|---|---|
hyperliquid_markets | Preço mark/oráculo, variação em 24h, funding horário e anualizado, juros em aberto, volume | $0,001 |
hyperliquid_funding_history | Histórico de funding horário (até 30 dias) com taxa média e anualizada | $0,001 |
hyperliquid_candles | Velas OHLCV de 1 minuto a 1 semana | $0,001 |
Os dados da Hyperliquid vêm dos dados públicos de mercado da Hyperliquid. Este servidor não é afiliado à Hyperliquid, e nada do que ele retorna é aconselhamento financeiro.
Preços
Pague por chamada de ferramenta bem-sucedida pela sua conta Apify: $0,001 para ferramentas de verificação e utilitários, $0,003 para ferramentas de página. Chamadas com falha (URL inválida, site bloqueado, timeout) são gratuitas e retornam um motivo de erro claro.
Bom saber
- As páginas são lidas do HTML que o servidor envia; sites que renderizam tudo no navegador retornam
pouco texto e informam isso em um campo
warning. - Alguns sites bloqueiam acesso automatizado; essas chamadas retornam
target_blockede não são cobradas. - Apenas endereços
http/httpspúblicos são buscados; endereços privados e internos são recusados.
Este repositório
Esta é a fonte do Apify Actor que hospeda o servidor MCP. É um conector leve: cada ferramenta encaminha a solicitação para a API Web Content e retorna o resultado JSON.
.actor/ Apify Actor definition (Standby mode, MCP path /mcp, pay-per-event pricing)
src/main.py MCP server (FastMCP, Streamable HTTP) and tool definitions
Dockerfile Container image
Você não precisa executá-lo você mesmo — conecte-se ao endpoint hospedado acima.
Licença
MIT © Avalon Company