Спарсить список страниц в ВК и Инст и обогатить базу данных
Задача
Есть база данных - список страниц Инстаграм и ВК. Страницы в большинстве своем публичные, т.к. это страницы компаний.
Нужно по каждой странице (ВК и Инстаграм раздельно) спарсить
- Даты последних 10 постов
- Тип каждого поста (рилсы /видео или фотографии) (последние 10)
- Количество подписчиков в ВК
- Количество подписчиков в Инстаграм
Дополнительно обработать спарсенные данные
- Среднее количество дней между публикацией постов
- Процент видео постов
База содержит 2883 аккаунтов инсты и 1860 ВК
Итогом задания будет сама база обогащенная, а так же сам парсер, который в будущем я могу использовать самостоятельно. те кто откликнулся просьба писать свой ник в телеге
Оставлять заявки могут только авторизованные пользователи.
Я готов выполнить парсинг страниц Instagram и ВКонтакте, обогатить базу данных, а также предоставить вам сам инструмент для последующего использования. Вот план работы:
Что будет сделано:
Парсинг данных:
Получение 10 последних постов (отдельно для Instagram и ВКонтакте)
Определение типа поста (Reels, видео, фото)
Подсчет количества подписчиков в каждой соцсети
Анализ данных:
Расчет среднего количества дней между публикациями
Вычисление процента видео постов от общего числа публикаций
Обогащение базы данных (все собранные данные будут добавлены к исходной базе)
Разработка парсера – удобного инструмента, который вы сможете использовать в будущем.
Как это будет реализовано:
Instagram – парсинг через API / веб-скрейпинг (в зависимости от доступности данных)
ВКонтакте – получение данных через VK API (официальный метод)
Хранение данных – формат базы данных будет согласован (MySQL, PostgreSQL, SQLite, CSV)
Язык реализации – PHP\Symfony
Документация – инструкция по использованию парсера
Полностью автоматизированный инструмент
Возможность доработки в будущем
Добрый день, Станислав! Являюсь разработчиком на языке Python с хорошим стажем. Имею большой опыт парсинга, парсил такие сайты как: YouTube, Instagram, Twitter. Библиотеки: requests, aiohttp, selenium, selenium-wire, instaloader, yt-dlp. Напишу парсер для ВК, Instagram и наполню БД. Пишите, буду рад сотрудничеству!
Привет, имею большой опыт в разработке скриптов, сайтов, парсеров и просто програм на python, одним словом пишу всо, также пишу приложения на Андроид, с удовольствием возьмусь за работу, сделаю всо в лучшем виде и в кратчайшие сроки, также помогу запустить и разобраться.
Спарсить список страниц в ВК и Инст и обогатить базу данных
Реклама
Спарсить список страниц в ВК и Инст и обогатить базу данных
Есть база данных - список страниц Инстаграм и ВК. Страницы в большинстве своем публичные, т.к. это страницы компаний.
Нужно по каждой странице (ВК и Инстаграм раздельно) спарсить
- Даты последних 10 постов
- Тип каждого поста (рилсы /видео или фотографии) (последние 10)
- Количество подписчиков в ВК
- Количество подписчиков в Инстаграм
Дополнительно обработать спарсенные данные
- Среднее количество дней между публикацией постов
- Процент видео постов
База содержит 2883 аккаунтов инсты и 1860 ВК
Итогом задания будет сама база обогащенная, а так же сам парсер, который в будущем я могу использовать самостоятельно. те кто откликнулся просьба писать свой ник в телеге