Данила Дома › DanyaDoma
Программист: код, базы данных, автоматизация и Excel
Рейтинг
64
№ 64 392 в каталоге
Отзывы
0
Профессионализм
-/10
Коммуникация
- /10
Опыт работы
7 лет
На сайте с
2026 года
Юридический статус
Самозанятый

Парсер каталога: карточки товаров в CSV и Excel со сводным отчётом

Используемые навыки Excel MySQL Python Selenium Сбор данных

Описание

Нужно было регулярно получать витрину каталога целиком: название, артикул, цена, наличие, характеристики и ссылка на карточку. Вручную это несколько часов в неделю, и всё равно терялись позиции, которые появились между выборками.

Требование: на выходе один файл с актуальными данными и понятная история изменений, а не папка со скриншотами.

Решение

Python + Playwright: страница открывается в реальном браузере, дожидаюсь готовности блоков, читаю карточки из разметки, а не из текста экрана.

Собрал данные в таблицу с нормализацией: цену привёл к числу, характеристики развернул в отдельные колонки, пустые поля оставил пустыми, а не нулями.

На выходе два файла: CSV со срезом на текущий момент и Excel-отчёт с динамикой цен и списком того, чего не было в прошлый раз.

Повторный запуск кладёт файл рядом с предыдущим: база сравнения хранится локально, добираются только новые позиции. Добавил журнал прогона: сколько страниц пройдено, сколько карточек собрано, где данные не сошлись.

Результат

Один запуск скрипта вместо ручного обхода витрины: таблица с полными характеристиками и отчёт по изменениям готовы за минуты.

Дальше этот же скрипт можно переставить на другой раздел или другой сайт: разбор страницы и сборка отчёта лежат в разных модулях.

Сдал исходники, пример выходного файла и инструкцию запуска с описанием, что менять, если разметка на сайте поменялась.

Оценили проект:

Другие проекты

Все проекты →
Веб-разработка и IT Схема базы данных: 12 таблиц, связи, индексы, дамп и инструкция развёртывания
Схема базы данных: 12 таблиц, связи, индексы, дамп и инструкция развёртывания
23
Веб-разработка и IT Учётная программа на C# / WPF с MySQL: склад, роли, отчёты
Учётная программа на C# / WPF с MySQL: склад, роли, отчёты
24
Веб-разработка и IT Excel-отчёт по выгрузкам: три листа, Power Query, сводные по товарам и продажам
Excel-отчёт по выгрузкам: три листа, Power Query, сводные по товарам и продажам
26