Парсинг сайтов и маркетплейсов: Wildberries, Ozon, Авито
Собираем открытые данные: цены, остатки, позиции в выдаче, объявления.
Данные приходят по расписанию в таблицу, базу или Telegram. Руками ничего копировать не нужно.
Каждое утро менеджер вручную проверяет цены конкурентов на Wildberries и Ozon.
У конкурента закончился товар, а мы узнаём об этом через неделю.
Нужна выгрузка объявлений с Авито по нашей нише, чтобы понимать рынок.
Купили готовый сервис аналитики, а нужных полей там нет.
Что делаем
Цены и остатки
Цены, скидки, наличие, рейтинг и число отзывов по списку товаров или поисковым запросам.
Позиции в выдаче
На каком месте товар по нужным запросам и как это меняется.
Выгрузка
В Google Таблицу, Excel, базу данных или через API.
Уведомления
Сообщение в Telegram, когда изменилась цена, закончился товар или появился новый продавец.
Работа по расписанию
Парсер работает на вашем сервере, ведёт лог и повторяет запрос при сбое.
История
Данные хранятся по датам, по ним строятся графики.
Что собираем, а что нет
Собираем только общедоступные данные, которые видит любой посетитель без входа в аккаунт. Персональные данные (имена, телефоны, контакты продавцов и покупателей) не собираем и не храним: их обработку регулирует 152-ФЗ.
Правила площадок часто ограничивают автоматический сбор. Перед стартом читаем пользовательское соглашение, ставим щадящую частоту запросов и берём официальный API там, где он есть. Задачи с обходом авторизации или защиты не берём.
Как это выглядит
В Бровке парсер регулярно забирает новости из двенадцати изданий, убирает дубли и расставляет теги клубов и турниров. Мониторинг цен устроен так же: сбор по расписанию, очистка, выдача в удобном виде.
Цена и сроки
Стоимость
Парсер одной площадки
Сбор, очистка и выгрузка в таблицу или базу
от 15 000 ₽
Сроки
Демо через 1-2 недели, запуск через 2-3 недели
Цены ориентировочные. Точную сумму называем после разговора и фиксируем до старта.
Как работаем
-
Оплата после демо
Счёт выставляем, когда покажем демо, где готово около 40% функционала.
-
Оценка на нас
Сложность задачи и процент готовности оцениваем сами и объясняем, как посчитали.
-
Месяц правок бесплатно
После запуска месяц бесплатно правим мелочи, которые не добавляют новых функций.
-
Код и доступы ваши
Передаём исходный код и доступы к серверу, боту и админке. Проект не привязан к нам.
Вопросы
Это законно?
Сбор общедоступной информации сам по себе не запрещён. Ограничения дают правила площадки, авторское право на контент и закон о персональных данных. Мы работаем внутри этих ограничений и заранее говорим, если задача за них выходит. Юридическую оценку вашего случая лучше получить у юриста.
Что будет, если площадка поменяет вёрстку?
Парсер перестанет находить часть полей, это будет видно в логе. Если правка небольшая, в первый месяц после запуска чиним бесплатно. Дальше работа почасовая, 1 500 ₽ в час.
Как часто можно собирать данные?
Зависит от площадки и объёма. Для цен обычно хватает нескольких раз в сутки. Чаще собираем, только если это не создаёт заметной нагрузки на сайт.
У маркетплейсов есть официальный API?
Для своих товаров есть: у Wildberries и Ozon открыт API для продавцов, через него данные получать надёжнее. Для данных о конкурентах такого API нет, там нужен парсинг открытых страниц.
Можно собрать телефоны продавцов с Авито?
Нет. Это персональные данные, их сбор без согласия владельцев нарушает 152-ФЗ. Такие задачи не берём.
Расскажите о задаче
Своими словами, без ТЗ. Ответим в течение рабочего дня и назовём цену.
Обсудить проект