Парсер сайтов в Челябинске под задачу

Мониторинг цен как ежедневная рутина

В торговле прокатом и материалами цена живёт неделями, а иногда днями, и держать её в голове невозможно. Ручной обход двадцати сайтов занимает у менеджера часы, причём результат нигде не фиксируется и через месяц сравнить не с чем. Парсер делает это каждую ночь: проходит по согласованному списку открытых страниц, снимает цену и наличие, пишет в базу с датой. Утром у вас таблица с текущими значениями и колонкой изменения относительно прошлого прогона. Отдельно настраивается уведомление: если по важной позиции цена ушла за порог, в Telegram приходит сообщение, а не письмо, которое прочитают к обеду.

• 1ночной прогон по согласованному списку открытых страниц
• 2цена, наличие, единица измерения, условия отгрузки
• 3колонка изменения относительно прошлого прогона
• 4уведомление в Telegram при выходе за порог
• 5история по датам для разбора динамики

Два часа вперёд: расписание под местное утро

Челябинск опережает Москву на два часа, и это влияет на расписание сбора. Прогон я ставлю так, чтобы к началу вашей смены данные были уже собраны, а не собирались в это время. Созвоны ставим на вашу первую половину дня, у меня это утро, пересечение рабочих часов широкое. Вопросы по ходу работы решаются перепиской в Telegram в течение дня.

Кто будет работать с таблицей

Формат выгрузки зависит от того, кто её откроет. Снабженцу нужны фильтры и сортировка по цене, руководителю одна страница с отклонениями, аналитику выгрузка в базу. Я спрашиваю об этом до начала, потому что переделывать формат в конце дороже, чем договориться вначале. Нередко выясняется, что нужны два вывода сразу: рабочая таблица для отдела и короткое уведомление для руководителя по нескольким ключевым позициям.

• 1рабочая таблица с фильтрами для отдела
• 2короткая сводка отклонений для руководителя
• 3выгрузка в базу для аналитики
• 4согласование формата до начала разработки

Что остаётся за рамками

Я собираю открытые страницы, которые источник показывает без авторизации. Логины, закрытые разделы, партнёрские прайсы под чужими учётными записями и снятие технических ограничений в работу не входят. Персональные данные частных лиц не собираю. Если нужен закрытый прайс, разумный путь это получить его у поставщика напрямую: файл или доступ к API, и я подключу этот канал вместо парсинга.

Куда уходит результат и сколько это стоит

Выгрузка делается в том формате, который уже используется в работе: таблица Excel под ваш шаблон, база PostgreSQL для отчётов, передача в 1С, Google Таблицы для общего доступа. Парсер стоит от 33 000 ₽ за один источник с понятной структурой, итог растёт с числом источников и частотой запусков. Работа по этапам, оплата по факту сдачи. Исходники и доступы остаются у вас с инструкцией по обновлению, поддержка потом отдельными задачами. Публичные работы: ParserPro, Parser2GIS, ИНКОМ-БЕТОН. Telegram @inter1ark, vitoscarasel@gmail.com.

• 1Excel по вашему шаблону
• 2база PostgreSQL с историей
• 3передача данных в 1С
• 4Google Таблицы для совместного доступа