Нужно было регулярно получать витрину каталога целиком: название, артикул, цена, наличие, характеристики и ссылка на карточку. Вручную это несколько часов в неделю, и всё равно терялись позиции, которые появились между выборками.
Требование: на выходе один файл с актуальными данными и понятная история изменений, а не папка со скриншотами.
Python + Playwright: страница открывается в реальном браузере, дожидаюсь готовности блоков, читаю карточки из разметки, а не из текста экрана.
Собрал данные в таблицу с нормализацией: цену привёл к числу, характеристики развернул в отдельные колонки, пустые поля оставил пустыми, а не нулями.
На выходе два файла: CSV со срезом на текущий момент и Excel-отчёт с динамикой цен и списком того, чего не было в прошлый раз.
Повторный запуск кладёт файл рядом с предыдущим: база сравнения хранится локально, добираются только новые позиции. Добавил журнал прогона: сколько страниц пройдено, сколько карточек собрано, где данные не сошлись.
Один запуск скрипта вместо ручного обхода витрины: таблица с полными характеристиками и отчёт по изменениям готовы за минуты.
Дальше этот же скрипт можно переставить на другой раздел или другой сайт: разбор страницы и сборка отчёта лежат в разных модулях.
Сдал исходники, пример выходного файла и инструкцию запуска с описанием, что менять, если разметка на сайте поменялась.