Skills Веб-скрейпинг

Автоматизация браузера для AI-агентов через inference.sh. Навигация по веб-страницам, взаимодействие с элементами с помощью @e-ссылок, создание скриншотов, запись видео. Возможности: веб-скрапинг, заполнение форм, клики, ввод текста, перетаскивание, загрузка файлов, выполнение JavaScript. Используется для: веб-автоматизации, извлечения данных, тестирования, просмотра страниц агентом, исследований. Триггеры: браузер, веб-автоматизация, скрапинг, навигация, клик, заполнение формы, скриншот, просмотр веб-страниц, playwright, headless-браузер, веб-агент, серфинг в интернете, запись видео

Запуск и управление антидетект-браузерами с уникальными отпечатками реальных устройств для многопрофильной работы, веб-скрапинга, проверки рекламы и автоматизации AI-агентов. Используйте, когда пользователю нужно запускать несколько сессий браузера с разными идентичностями, управлять постоянными профилями браузера, автоматизировать задачи между аккаунтами или создавать агентные рабочие процессы, требующие изоляции отпечатков браузера. Также используйте, когда пользователь упоминает antibrow, антидетект-браузер или браузер с отпечатками.

CLI для автоматизации браузера для AI-агентов. НИКОГДА не запускайте команды browser-act напрямую через Bash — сначала вызывайте этот навык. Используйте browser-act, когда пользователь упоминает его по имени, включает или просит выполнить команду CLI browser-act (например, browser-act browser list), или для: получения, просмотра или извлечения отрендеренного содержимого из URL, доступа к страницам, требующим JavaScript, обработки запросов подтверждения, поддержания аутентифицированных сессий, заполнения форм и прохождения рабочих процессов с кликами, ввода текста, выбора, загрузки, создания скриншотов,...

Исследует веб-сайты с помощью автоматизации browser-act и упаковывает обнаруженные данные в вызываемые пакеты навыков (SKILL.md + скрипты) — выполняет надежно и эффективно без повторного исследования. Используйте, когда: пользователь хочет получить переиспользуемый навык для любого веб-сайта ('создать/сделать/построить навык для X'), необходимо понять внутренние API сайта ('какой эндпоинт использует X', 'как X загружает данные') или требуется массовое извлечение данных в большом объеме (сотни+ записей — сначала создайте навык, затем выполняйте надежно). Отличается от browser-act:...

Навык глубокого исследования — широкие параллельные веб-поиски, многопоточная валидация, отслеживание уверенности, цитируемый отчёт в Markdown. Поддерживает 11 типов исследований: рыночные (TAM/SAM, сегменты, ценообразование, тренды), доменные (структура отрасли, экосистема, нормативная среда), технические (архитектура, инструменты, бенчмарки), конкурентные (анализ конкурентов, позиционирование, выигрыш/проигрыш), продуктовые (анализ функций, отзывы, сигналы дорожной карты), академические (обзор литературы, сети цитирования, ключевые авторы), персональные/организационные (дью...

Извлекайте чистый markdown-контент с веб-страниц с помощью Defuddle CLI, удаляя мусор и навигацию для экономии токенов. Используйте вместо WebFetch, когда пользователь предоставляет URL для чтения или анализа, для онлайн-документации, статей, записей в блогах или любых стандартных веб-страниц. НЕ используйте для URL, заканчивающихся на .md — это уже markdown, используйте WebFetch напрямую.

Используйте при сборке, отладке, упаковке или публикации пользовательских скриптов для браузера под Tampermonkey или ScriptCat, включая GM API, блоки метаданных, проблемы с разрешениями, настройку @match/@grant/@connect, фоновые или запланированные скрипты ScriptCat, блоки UserConfig или рабочие процессы подписки.

Когда пользователь хочет отправить свой продукт в стартап-, SaaS-, AI-, агентские, MCP-, no-code- или обзорные каталоги для получения обратных ссылок, рейтинга домена и обнаружения. Также используйте, когда пользователь упоминает «directory submissions», «submit to directories», «backlinks from directories», «list my product», «submit to Product Hunt», «BetaList», «TAAFT», «Futurepedia», «G2 listing», «Capterra listing», «AlternativeTo», «SaaSHub», «AI directories», «MCP registry», «agent directory», «dofollow backlinks», «launch...

Извлекайте структурированные списки компаний из каталогов с помощью Firecrawl. Используйте для сбора данных с YC, Crunchbase, Product Hunt, G2, стартап-каталогов, тематических справочников или пользовательских баз компаний в формате JSON, CSV, списков, готовых для CRM, или исследовательских таблиц.

Мониторинг цен конкурентов, функций, журналов изменений, панелей управления и изменений продуктов с помощью Firecrawl. Используется для регулярного сбора конкурентной информации, извлечения ценовых уровней, отслеживания изменений функций или структурированных оповещений о конкурентах.

Извлекайте метрики из аналитических панелей и внутренних веб-инструментов с помощью браузера Firecrawl. Используйте, когда пользователю нужна отчетность по панелям, сводки метрик с разных платформ, извлечение аналитики с аутентификацией, отчеты за период или структурированные метрики из веб-панелей.

Запустить многопоточное глубокое исследование с помощью Firecrawl. Используйте, когда пользователь просит исследовать тему, сравнить точки зрения, подготовить обзор с источниками, изучить технический или рыночный вопрос или обобщить веб-данные из множества источников.

Проведите обзор ключевых потоков продукта с помощью браузера Firecrawl и создайте структурированное описание UX/продукта. Используйте для регистрации, онбординга, ценообразования, документации, панели управления, подготовки демонстрации продукта, анализа UX и анализа первого опыта использования.

Создайте базу знаний из веб-контента с помощью Firecrawl. Используйте для локальной справочной документации, чанков, готовых для RAG, наборов данных для тонкой настройки, зеркал документации, тематических корпусов или размеченного в формате Markdown, готового для LLM, организованного из веб-источников.

Ингрестируйте публичные или аутентифицированные базы знаний и порталы документации с помощью браузера Firecrawl. Используйте для документации с интенсивным использованием JavaScript, порталов с входом по логину, постраничных справочных центров, баз знаний поддержки или структурированного извлечения JSON/markdown с сайтов документации.

Генерируйте структурированные списки лидов из баз данных потенциальных клиентов и веб-каталогов с помощью браузера Firecrawl. Используйте для поиска потенциальных клиентов по должности, типу компании, отрасли, стадии, местоположению, технологиям или другим критериям и экспортируйте JSON или CSV, готовые для CRM.

Создавайте краткие разведывательные сводки о лидах перед встречами с помощью Firecrawl. Используйте, когда пользователю нужно исследование компании, исследование человека, последние новости, темы для обсуждения, болевые точки или подготовка к обращению перед продажным звонком, встречей о партнерстве, разговором с инвестором или интервью с клиентом.

Извлекайте рыночные, финансовые, показатели прибыли, отраслевые и корпоративные метрики с помощью Firecrawl. Используйте, когда пользователь запрашивает маркетинговые исследования, отраслевые тренды, данные публичных компаний, финансовые сравнения, анализ прибыли или структурированные рыночные отчеты.

Обнаруживайте изменения содержимого на веб-сайте и получайте уведомления через вебхук или электронную почту — без cron-задач, парсеров или скриптов сравнения. Используйте этот навык, когда пользователь хочет отслеживать изменения на странице, следить за ценами конкурентов, получать оповещения о новых вакансиях или записях в блоге, мониторить страницы документации/списка изменений/статуса, или говорит «отслеживать», «наблюдать», «мониторить», «уведомить меня, когда», «сообщить, когда X изменится», «напомнить мне, если», «отправить письмо, когда» или «отправить вебхук, когда». Встроенный AI-судья отфильтровывает форматирование, временные метки и...

Провести QA-тестирование живого сайта с помощью браузера Firecrawl и собрать доказательства. Используйте, когда пользователю нужно исследовательское QA, тестирование форм, проверка навигации/ссылок, проверка адаптивности, наблюдение за производительностью, отчёты об ошибках или предрелизная проверка качества.

Находить и обобщать исследовательские статьи, технические отчёты, PDF-документы и академические источники с помощью Firecrawl. Используйте, когда пользователю нужен литературный обзор, краткое содержание статьи, обзор исследований или обобщение с источниками из PDF и научных/отраслевых публикаций.

Провести SEO-аудит сайта с помощью Firecrawl. Используйте, когда пользователь запрашивает SEO-аудит, проверку метаданных и заголовков, анализ карты сайта/структуры сайта, возможности по ключевым словам, сравнение SERP конкурентов или приоритетные рекомендации по поисковой оптимизации.

Исследуйте товары в интернете с помощью Firecrawl и создайте рекомендацию по покупкам или сводку, готовую для корзины. Используйте, когда пользователь хочет сравнить товары, найти лучший вариант, оценить отзывы, учесть бюджет/предпочтения или совершить покупки с сохранённой сессией браузера.

Извлеките дизайн-систему любого веб-сайта в файл DESIGN.md, готовый для агентов, используя данные скрапинга Firecrawl. Используйте, когда пользователю нужны цвета, шрифты, отступы, компоненты, шаблоны макетов или рекомендации по бренду/UI с веб-сайта, чтобы AI-агенты могли создавать новые сайты, клонировать внешний вид или строить страницы, вдохновлённые этим дизайном.

Запускайте ориентированные на результат рабочие процессы Firecrawl, которые создают такие результаты, как исследовательские отчеты, SEO-аудиты, отчеты по контролю качества, списки лидов, базы знаний, системы дизайна веб-сайтов и другие структурированные артефакты веб-данных. Используйте, когда пользователь хочет, чтобы Firecrawl выполнил бизнес-, маркетинговый, продуктовый или творческий рабочий процесс, а не просто просканировал страницу или интегрировал вызовы API в код.

Поиск, скрапинг, краулинг, извлечение структурированных данных и мониторинг веб-страниц через ScrapeGraph AI CLI. Используйте, когда пользователь просит выполнить поиск в интернете, спарсить веб-страницу, получить содержимое по URL, извлечь JSON с сайта, просканировать документацию или разделы сайта, отслеживать изменения на странице, проверить историю запросов, узнать баланс ScrapeGraph или проверить настройки API.

Исследует, что люди на самом деле говорят на любую тему за последние 30 дней. Извлекает посты и вовлеченность из Reddit, X, YouTube, TikTok, Hacker News, Polymarket, GitHub и веба.

Когда пользователь хочет массово создавать SEO-ориентированные страницы с использованием шаблонов и данных. Также используйте, когда пользователь упоминает «программное SEO», «страницы по шаблонам», «массовое создание страниц», «страницы каталогов», «страницы локаций», «страницы [ключевое слово] + [город]», «страницы сравнения», «страницы интеграций», «создание множества страниц для SEO», «pSEO», «сгенерировать 100 страниц», «страницы на основе данных» или «шаблонные лендинги». Используйте это всякий раз, когда кто-то хочет создать множество похожих страниц, нацеленных на разные ключевые слова или локации. Для...

Execute Python code in a safe sandboxed environment via [inference.sh](https://inference.sh). Pre-installed: NumPy, Pandas, Matplotlib, requests, BeautifulSoup, Selenium, Playwright, MoviePy, Pillow, OpenCV, trimesh, and 100+ more libraries. Use for: data processing, web scraping, image manipulation, video creation, 3D model processing, PDF generation, API calls, automation scripts. Triggers: python, execute code, run script, web scraping, data analysis, image processing, video editing, 3D...

Когда пользователь хочет добавить, исправить или оптимизировать разметку schema и структурированные данные на своем сайте. Также используйте, когда пользователь упоминает «разметка schema», «структурированные данные», «JSON-LD», «rich snippets», «schema.org», «схема FAQ», «схема товара», «схема отзыва», «схема хлебных крошек», «расширенные результаты Google», «панель знаний», «звездные рейтинги в поиске» или «добавить структурированные данные». Используйте это всякий раз, когда кто-то хочет, чтобы его страницы отображали улучшенные результаты в Google. Для более широких вопросов SEO см. seo-audit. Для AI...

Используйте, когда работа зависит от активного сеанса браузера пользователя или видимого отрисованного состояния, а не от статических запросов, особенно в контекстах отладки браузера или выбранных элементов или запросов в DevTools, панелей управления или CMS-процессов с авторизацией, приложений на localhost, форм, загрузок, скачиваний, проверки медиа, DOM или iframe, теневого DOM, или сбоев браузера, которые выглядят как мягкие 404, стены аутентификации, антибот-проверки или ограничения скорости.

Веб-поиск и извлечение контента с помощью Tavily и Exa через CLI inference.sh. Приложения: Tavily Search, Tavily Extract, Exa Search, Exa Answer, Exa Extract. Возможности: поиск на основе ИИ, извлечение контента, прямые ответы, исследования. Используется для: исследований, RAG-пайплайнов, проверки фактов, агрегации контента, агентов. Триггеры: веб-поиск, tavily, exa, search api, извлечение контента, исследование, интернет-поиск, ИИ-поиск, поисковый ассистент, веб-скрапинг, rag, альтернатива perplexity