Web Content & URL Tools

Servidor MCP remoto com 26 ferramentas: páginas web para Markdown, metadados, stack tecnológica, SSL, cabeçalhos de segurança, SEO, WHOIS/DNS, autenticação de e-mail (SPF/DMARC/DKIM) e verificações de SSO.

Servidor MCP hospedado

npx add-mcp 'https://avalonai--web-content-url-tools-mcp.apify.actor/mcp'

Instala no Claude Code, Codex, Cursor e outros

Documentação

Servidor MCP Web Content & URL Tools

Um servidor remoto Model Context Protocol que dá a agentes de IA 26 ferramentas para ler e verificar a web — sem navegador, sem configuração, pague apenas por chamadas bem-sucedidas.

Leia qualquer página como Markdown limpo, extraia seus metadados ou estrutura, detecte sua stack de tecnologia e verifique redirecionamentos, certificados TLS, cabeçalhos de segurança, robots.txt, sitemaps, feeds, domínios (WHOIS/DNS), SEO, links quebrados, autenticação de e-mail (SPF, DMARC, DKIM) e single sign-on (SAML, OpenID Connect). Também inclui utilitários de desenvolvimento do dia a dia (cron, regex, cor, Unicode, fusos horários) e dados de mercado de perpétuos da Hyperliquid.

Conectar

Opção 1 — URL Standby + token da API Apify

Use seu token da API Apify como token Bearer. Funciona no Claude Desktop, Claude Code, Cursor, VS Code, Windsurf e em qualquer cliente MCP que suporte servidores remotos com cabeçalhos.

{
  "mcpServers": {
    "web-content-url-tools": {
      "url": "https://avalonai--web-content-url-tools-mcp.apify.actor/mcp",
      "headers": { "Authorization": "Bearer <YOUR_APIFY_TOKEN>" }
    }
  }
}

Opção 2 — OAuth via mcp.apify.com (sem token para copiar)

Clientes que suportam OAuth MCP podem se conectar pelo gateway MCP hospedado da Apify e entrar com sua conta Apify no navegador:

https://mcp.apify.com?tools=avalonai/web-content-url-tools-mcp

Exemplo no Claude Code:

claude mcp add --transport http web-content-url-tools "https://mcp.apify.com?tools=avalonai/web-content-url-tools-mcp"

Ferramentas

Páginas web e URLs

FerramentaO que retornaPreço por chamada
to_markdownMarkdown limpo e pronto para LLM do conteúdo principal (menus, anúncios e rodapés removidos), contagem de palavras/caracteres, idioma$0,003
get_metadataTítulo, descrição, imagem de pré-visualização, nome do site, URL canônica, favicon, autor, data de publicação, tags Open Graph / Twitter$0,003
extract_structureEstrutura de cabeçalhos, links internos/externos, imagens, tabelas e JSON-LD$0,003
detect_technologiesCMS, framework, plataforma de e-commerce, CDN, ferramentas de analytics e pagamento, com evidências$0,003
trace_redirectsCada salto de redirecionamento (HTTP e meta refresh) até a URL final — expande links curtos$0,001
check_sslEmissor do certificado, expiração, dias restantes, SANs e se os navegadores confiam nele$0,001
grade_security_headersNota de A+ a F para cabeçalhos de segurança, vazamentos de informação e cookies inseguros$0,001
parse_robotsRegras do robots.txt por user agent, sitemaps e se um caminho pode ser rastreado$0,001
parse_sitemapURLs de um sitemap ou índice de sitemaps (descoberta automática, suporte a gzip)$0,001
read_feedFeed RSS, Atom ou RDF como JSON (descoberta automática a partir da URL do site)$0,001
lookup_domainRegistrador WHOIS (RDAP), datas, idade do domínio, servidores de nomes, registros DNS, MX/SPF/DMARC$0,001
audit_seoPontuação e nota de SEO na página com problemas priorizados e correções$0,003
check_broken_linksAté 100 links verificados: quebrados, redirecionados e bloqueados por bot relatados separadamente$0,003

Diagnósticos de e-mail e identidade

FerramentaO que retornaPreço por chamada
check_email_domainMX, SPF (limite de 10 consultas), DMARC, DKIM, MTA-STS, TLS-RPT e BIMI com nota passou/avisou/falhou, correções e pontuação de 0 a 100$0,003
analyze_saml_metadataMetadados SAML (XML ou URL): ID da entidade, endpoints e bindings, formatos NameID, expiração do certificado de assinatura e problemas$0,001
check_oidc_providerDescoberta OpenID Connect e JWKS: correspondência do emissor, HTTPS, PKCE S256, algoritmos de token ID, tamanhos de chave, expiração do certificado$0,001

Utilitários para desenvolvedores

FerramentaO que retornaPreço por chamada
parse_cronValidade, explicação em linguagem simples, horários anteriores e próximos de execução em qualquer fuso horário$0,001
test_regexCada correspondência com posições e grupos, além de localizar e substituir; padrões descontrolados param em 0,1 s$0,001
convert_colorHEX, RGB, HSL, HSV, CMYK, melhor cor de texto, contraste e paletas$0,001
check_color_contrastRazão de contraste WCAG 2 com aprovação/reprovação AA/AAA$0,001
inspect_unicodeCode point, nome e bytes por caractere; contagem de grafemas; formas de normalização$0,001
convert_timezoneUm horário em várias zonas IANA com offsets, abreviações e horário de verão$0,001
list_timezonesNomes de fusos horários IANA, opcionalmente por região$0,001

Dados de mercado de perpétuos da Hyperliquid

FerramentaO que retornaPreço por chamada
hyperliquid_marketsPreço mark/oráculo, variação em 24h, funding horário e anualizado, juros em aberto, volume$0,001
hyperliquid_funding_historyHistórico de funding horário (até 30 dias) com taxa média e anualizada$0,001
hyperliquid_candlesVelas OHLCV de 1 minuto a 1 semana$0,001

Os dados da Hyperliquid vêm dos dados públicos de mercado da Hyperliquid. Este servidor não é afiliado à Hyperliquid, e nada do que ele retorna é aconselhamento financeiro.

Preços

Pague por chamada de ferramenta bem-sucedida pela sua conta Apify: $0,001 para ferramentas de verificação e utilitários, $0,003 para ferramentas de página. Chamadas com falha (URL inválida, site bloqueado, timeout) são gratuitas e retornam um motivo de erro claro.

Bom saber

  • As páginas são lidas do HTML que o servidor envia; sites que renderizam tudo no navegador retornam pouco texto e informam isso em um campo warning.
  • Alguns sites bloqueiam acesso automatizado; essas chamadas retornam target_blocked e não são cobradas.
  • Apenas endereços http/https públicos são buscados; endereços privados e internos são recusados.

Este repositório

Esta é a fonte do Apify Actor que hospeda o servidor MCP. É um conector leve: cada ferramenta encaminha a solicitação para a API Web Content e retorna o resultado JSON.

.actor/        Apify Actor definition (Standby mode, MCP path /mcp, pay-per-event pricing)
src/main.py    MCP server (FastMCP, Streamable HTTP) and tool definitions
Dockerfile     Container image

Você não precisa executá-lo você mesmo — conecte-se ao endpoint hospedado acima.

Licença

MIT © Avalon Company