Web Parser Pro

Основне

Запити

Селектори

Пагінація

Розклад

Деталі

Додатково

Правила

Майстер налаштування

Простий режим приховує технічні вкладки. Розширений режим відкриває весь функціонал для складних сценаріїв.

1. Заповніть назву та URL сторінки.

2. На вкладці "Селектори" натисніть "Вибрати".

3. Додайте поля, які треба зберігати.

Назва задачі *

Рушій

Цільовий URL (якщо не використовуються множинні запити)

HTTP-метод

Формат тіла (лише для POST)

Тіло запиту (для POST)

JSON-об'єкт, рядок form-encoded або довільний текст — залежно від обраного формату

Список запитів

Кожен запит має власний URL, метод і тіло. Використовується замість єдиного URL на вкладці «Основне».

Якщо список порожній — використовується URL і метод з вкладки «Основне».
Для кожного запиту можна вказати власні селектори, або залишити порожніми — тоді використовуватимуться загальні з вкладки «Селектори».

Селектор контейнера елементів * (повторюваний елемент на запис)

CSS-селектор, що відповідає кожному рядку/картці/елементу у списку

Ключове поле для трекінгу змін

Назва поля (з таблиці нижче), яке унікально ідентифікує товар. При повторному парсингу — порівнює значення всіх monitored полів з попереднім запуском і зберігає зміни.

Поля для витягування

Назва поляCSS селекторАтрибутТрансформаціяМонітор

Атрибут: залиште порожнім для тексту, або вкажіть src, href, data-price тощо.
Трансформація: trim, number, lowercase, regex:(\d+):1

Увімкнути пагінацію

Тип пагінації

Макс. сторінок

Селектор кнопки / шаблон URL

Увімкнути автоматичний розклад

Простий розклад

Оберіть простий варіант, і поле cron заповниться автоматично. Якщо хочете точний розклад, оберіть «Ввести cron самостійно».

Cron-вираз

Формат: хвилини години день-місяця місяць день-тижня.
Приклади: */1 * * * * — кожну хвилину, 0 */6 * * * — кожні 6 годин, 0 9 * * 1-5 — будні о 9:00, 0 0 * * * — щодня опівночі.
/1 означає «кожен 1-ий крок» в полі. Тобто */1 = «кожний».

CSS-селектор посилання на деталі

Парсер зайде на кожне таке посилання і зберігатиме поля разом із записом списку.

Поля зі сторінки деталей

Назва поляCSS селекторАтрибутТрансформація

Автоматично створювати підзадачі для кожного знайденого посилання

Підзадача буде повторно парсити сторінку деталей через заданий інтервал і зберігати історію змін.

Інтервал (хвилин)

Cron (необов'язково) перекриває інтервал

Таймаут (мс)

Повторні спроби

Затримка між сторінками (мс)

Затримка між follow-запитами (мс)

Паралельних follow-запитів

Захист від ботів (випадковий User-Agent та реалістичні заголовки)

Надіслати X-Requested-With: XMLHttpRequest

Увімкніть якщо сайт повертає JSON тільки на AJAX-запити

JSON → HTML поле (якщо відповідь JSON)

Вкажіть назву поля в JSON-відповіді, яке містить HTML з товарами

JSON-шлях до масиву (JSON API)

Крапковий шлях до масиву об'єктів у JSON-відповіді. Після цього селектор елемента = .json-item, поля — за назвою класу: .name, .brand_name, .url і т.д.

Рекурсивний обхід посилань (Spider)

Після парсингу кожної сторінки — знаходить всі посилання, відкриває їх і парсить так само, рекурсивно.

Авторизація сайту

Cookies з вибраної авторизації автоматично додаються до запитів

Використовувати ротацію проксі

Відправляти сповіщення про новий контент

Коли парсер знайде новий або змінений контент, відправить дані на зовнішній webhook URL.

Правила застосовуються до кожного зібраного запису після парсингу. Умови перевіряються по черзі. При збігу — виконується дія.

🚀 Швидкий старт

Створіть завдання: Натисніть "Завдання" → "Створити завдання"
Налаштуйте URL: Введіть адресу веб-сайту для парсингу
Оберіть селектори: Використовуйте візуальний селектор або введіть CSS селектори вручну
Запустіть: Натисніть "Запустити негайно" або налаштуйте розклад
Перегляньте результати: Вкладка "Результати" містить витягнуті дані

🎯 Візуальний селектор

Для легкого вибору елементів на сторінці:

Натисніть "🎯 Вибрати" поруч із полем селектора
Введіть URL цільового сайту
Наведіть курсор на елемент — він підсвітиться
Клікніть для вибору елемента
Селектор автоматично згенерується

⚙️ Основні налаштування завдання

Рушій: "Статичний" для звичайних сайтів, "Динамічний" для сайтів з JavaScript
Контейнер елементів: CSS селектор, що містить список товарів/елементів
Поля: Додайте назви полів (title, price, image) та їх селектори
Пагінація: Налаштуйте, як переходити між сторінками
Проксі: Увімкніть для обходу блокувань

📊 Експорт даних

Після завершення парсингу експортуйте дані:

JSON: Структуровані дані для розробників
CSV: Табличний формат для Excel
Excel: Файл .xlsx з форматуванням

🔧 Управління проксі

Перейдіть до розділу "Проксі"
Додайте проксі вручну або імпортуйте списком
Натисніть "Перевірити всі" для тестування
Використовуйте активні проксі в завданнях

⏰ Планувальник

Автоматичний запуск завдань:

Увімкніть планувальник у налаштуваннях завдання
Введіть cron вираз (наприклад: "0 */6 * * *" — кожні 6 годин)
Використовуйте "Пауза"/"Відновити" для керування

❓ Поширені проблеми

Завдання не запускається: Перевірте URL та селектори
Неправильні дані: Оновіть селектори — HTML структура могла змінитися
Повільне виконання: Зменшіть кількість одночасних завдань
Блокування: Додайте проксі або збільште затримки

📚 Додаткові ресурси

API Документація — для розробників
CSS Селектори — довідка
Cron Generator — для планувальника

💡 Порада: Почніть з простого завдання на тестовому сайті, щоб освоїти інтерфейс.

Історія змін

Налаштування полів експорту