Клиент занимается поиском коммерческой недвижимости в Москве и Московской области для сдачи в аренду. Ему необходимо ежедневно отслеживать новые предложения на двух крупнейших площадках. Однако ручной просмотр сотен объявлений занимает несколько часов в день, а самое главное — клиенту требуются только те объекты, которые на картах Ozon отмечены цветом, что означает возможность открытия ПВЗ.
Клиент поставил следующие задачи:
Полностью автоматизировать сбор объявлений
Отфильтровывать только те предложения, где можно открыть ПВЗ
Исключить дублирование при повторных проверках
Настроить отправку валидных объявлений в Telegram-каналы с мгновенными уведомлениями
Сделать систему устойчивой к блокировкам и сбоям
Обеспечить простой запуск и минимальное вмешательство в работу
Важным требованием было сохранение истории проверок, чтобы при каждом запуске парсер не отправлял уже обработанные объявления. Также требовалась возможность параллельной работы с несколькими чатами Telegram.
1. Разработка мониторинга крупнейших площадок
2. Разработка системы проверки адресов на Ozon
3. Хранение состояния и защита от дублей
4. Отправка в Телекграм
5. Устойчивость к сбоям и автоматическое восстановление
В результате разработана полностью автономная система мониторинга коммерческой недвижимости, которая работает в бесконечном цикле с заданным интервалом. Парсер успешно обрабатывает все источники одновременно
Пожаловаться
