Извлечение текста с веб-страниц с обходом антибота

# Извлечение текста с веб-страниц через Scrape.do с обходом антибота для AI

Этот воркфлоу автоматически извлекает чистый текст с любой веб-страницы по переданной ссылке, корректно обрабатывая сайты с антибот-защитой (например, Cloudflare). Результат адаптирован для использования в AI-агентах и системах автоматизации — в зависимости от параметра `fulltext` возвращается полный текст или краткое содержание.

## Кому подойдёт
- Разработчики AI-агентов, которым нужен надёжный источник очищенного текста.
- Автоматизаторы, строящие воркфлоу с анализом контента сайтов.
- Аналитики, собирающие данные с публичных источников без программирования.

## Что делает автоматизация
- Принимает URL страницы как входной параметр.
- Пытается извлечь контент напрямую через HTTP-запрос.
- При блокировке автоматически переключается на Scrape.do API.
- Очищает текст от эмодзи, лишних пробелов и мусора.
- Возвращает либо полный текст, либо краткий экскурс с заголовком и URL.
- Интегрируется в другие процессы через вызов воркфлоу.

## Что входит в пакет
- Готовый workflow для n8n.
- Логика триггеров и обработчиков на основе execute_workflow_trigger.
- Интеграции с HTTP Request, Webpage Content Extractor и Scrape.do API.
- Базовая текстовая инструкция по запуску и адаптации.

## Что нужно для запуска
- Self-hosted экземпляр n8n.
- Аккаунт на Scrape.do с активным API-ключом.
- Доступ к управлению нодами и переменными окружения в n8n.

## Польза и эффекты
- Надёжное получение контента даже с защищённых сайтов.
- Экономия времени на ручной сбор данных.
- Поддержка AI-обработки за счёт структурированного вывода.
- Гибкость: режимы полного и краткого извлечения.
- Возможность встраивания в более сложные воркфлоу.
- Минимизация рисков блокировки при парсинге.

## Важное о формате продукта и поддержке
**Важно:** вы приобретаете именно готовый шаблон сценария автоматизации. Разворот под вашу инфраструктуру, интеграция с конкретными аккаунтами и сервисами, индивидуальная помощь в настройке, доработки под нестандартные стеки и любая консультационная поддержка оказываются отдельно и оплачиваются по индивидуальному тарифу. Для обсуждения доработок и индивидуальной помощи вы можете связаться с нами через чат.