Мониторинг цен конкурентов

• сопоставление с каталогом
• история цен
• оповещения об изменении
• выгрузка в таблицу

Цифры выше это пакет, на котором это стоит: Парсинг, реверс-инжиниринг источника. Всё, что выходит за его границы, калькулятор добавит до начала работ, а не после.

1. 01

   Обход идёт по расписанию

   В назначенное время сборщик открывает каждый источник и читает страницу так, как её читает покупатель.

2. 02

   Сопоставляется с вашим каталогом

   Цена бесполезна, пока не встанет рядом с вашей позицией, и сопоставление это и есть основная работа.

3. 03

   Вам приходит изменение, а не таблица

   Таблица, которую никто не открывает, это не результат; результат это сообщение, какие позиции сдвинулись и насколько.

• Источники меняются без предупреждения

  Смена вёрстки ломает сборщик молча, а молчание выглядит как «цены не двигались», поэтому каждый источник проверяется на правдоподобие.

• Вежливость это техническое требование

  Частота, время и объём настроены так, чтобы сбор не отличался от обычного трафика: блокировка стоит дороже медленного сбора.

• Что законно собирать

  Публичные цены это одно, персональные данные другое: первое берём, от второго отказываемся и говорим до старта, что есть что.

• источников собрано без пропусков
• позиций сопоставлено автоматически
• время до вашего оповещения
• убранных часов ручной проверки

Форма этой задачи известна: состояния, крайние случаи и то, что обычно ломается, здесь уже продуманы. Шаблоном при этом ничего не делается, и экономия идёт не из вашей половины работы. Она уходит в ваш процесс, ваш контент и системы, с которыми это должно разговаривать, то есть в ту часть, которую заранее решить нельзя.

• СборPythonPlaywrightGoDocker
• Хранение и сопоставлениеPostgreSQLClickHouseRedisS3
• Расписание и оповещенияn8nTemporalTelegram Bot APIGrafana

• Хостинг и серверы сборщика
• Прокси и обход антибот-защиты
• Обращения к AI-моделям при сопоставлении
• Платный доступ к источникам за подпиской

Это законно?

Сбор публично опубликованных цен как правило да; границы это условия использования источника и персональные данные. Конкретные источники проверяем до сметы и прямо говорим, если по какому-то ответ отрицательный.

Что будет, когда источник поменяет вёрстку или начнёт блокировать?

Это не авария, а обычная жизнь сборщика, поэтому починка входит в оплаченное сопровождение, а не приходит отдельным счётом, и о поломке вы узнаёте от нас.

Данные останутся у нас?

База лежит в вашем аккаунте, история цен выгружается в обычные форматы с первой версии, и забрать её можно без нас. Копию у себя мы не держим.

• Парсинг цен маркетплейсовот $1,400
• Мониторинг тендеровот $1,400
• Парсинг каталогов поставщиковот $1,400