Open Crawler MCP Server

robots.txtに準拠し、レート制限とページサイズ保護機能を備えたWebクローラーおよびテキスト抽出ツールです。