Мониторинг цен конкурентов и автоматический сбор данных
Цены собираются сами, по расписанию, и попадают туда, где вы на них смотрите. Без вкладок, копирования и таблицы, которая устаревает быстрее, чем заполняется.
Какую задачу это закрывает
Цены конкурентов обычно проверяют руками: открывают десяток сайтов, выписывают позиции в таблицу, сравнивают. На двадцати позициях это терпимо. На пятистах — отдельная работа, которую кто-то делает вместо своей.
К моменту, когда таблица собрана, часть цен уже изменилась. Решение принимается по данным, которые успели устареть, пока их собирали.
Что можно отслеживать
- Цену
- Цену со скидкой
- Наличие и остатки
- Название и артикул
- Характеристики
- Фотографии
- Раздел каталога
- Факт изменения
Откуда берутся данные
- Сайты конкурентов и поставщиков — в пределах того, что открыто обычному посетителю.
- Карточки товаров и прайс-листы на страницах каталога.
- Агрегаторы и площадки, если нужные позиции представлены там.
- Выгрузки, которые вы уже получаете, но сводите вручную.
Куда попадает результат
- Excel
- Google Таблицы
- CSV
- JSON
- Запись в вашу базу
- Сообщение в Telegram
- Письмо по расписанию
Как идёт работа
Сначала разбираемся, какие позиции и с каких источников нужны и в каком виде вы с ними работаете. От этого зависит всё остальное.
Дальше собираю инструмент под конкретные источники и проверяю его на реальных данных, а не на паре примеров.
Настраиваю расписание и выгрузку туда, где вы смотрите цифры. Передаю исходники и доступы.
Как часто обновлять
Раз в сутки, раз в час или по запросу — зависит от того, как быстро меняются цены и как срочно вам нужно об этом знать.
Чаще не значит лучше. Частые обращения заметнее для источника и бессмысленны, если цены обновляются раз в неделю. Периодичность подбираем под задачу, а не по максимуму.
Из практики
Сколько это стоит
- Парсер каталога или ценот 15 000 ₽
Сбор цен, остатков и характеристик с сайтов конкурентов или поставщиков. Регулярная выгрузка в Excel или Google Таблицы.
Срок: 2-4 дня
- Выгрузка отчётов из разрозненных источниковот 20 000 ₽
Данные из нескольких таблиц, сайтов и выгрузок сводятся в один отчёт по расписанию.
Срок: до недели
Точную сумму называю после того, как посмотрю на источники и объём. Она фиксируется в смете до начала работы.
Вопросы
Соседние задачи
Мониторинг — частный случай сбора данных: те же источники, но с расписанием и сравнением. Если данные нужны разово или задача шире цен, начните с общей страницы направления.
Посчитаем мониторинг под ваши источники
Пришлите список сайтов и позиций, которые нужно отслеживать. Скажу, что из этого собирается и сколько займёт.