Open Crawler MCP Server

เว็บครอว์เลอร์และตัวแยกข้อความที่ปฏิบัติตาม robots.txt มีการจำกัดอัตรา และป้องกันขนาดหน้า