Open Crawler MCP Server

Веб-краулер и извлекатель текста с соблюдением robots.txt, ограничением скорости и защитой размера страницы.

Документация

Документация недоступна.