Парсер, собрать около 1 300 000 ссылок 

  • 13
  • Опубликовано: 2021-08-01
Условия задания:
1. Требуется зайти на сайт http://www.sbup.com/country/
2. Потом "пройтись" по всем странам, которые даны (их 100)
3. Затем в каждой загруженной странице взять все ссылки сайтов в каждой вкладке, между которыми можно переключаться сверху. В одной вкладке 25 ссылок.
4. Эти полученные ссылки нужно внести в таблицу Excel. Её название столбца - страна, из которой она была.

Основные библиотеки, которые используются в боте-парсере на Python: openpyxl; requests; fake_useragent;
Комментариев нет
оставить комментарий могут только авторизованные пользователи
Другие работы автора:
Telegram-bot, поиск информации по тикерам/хэштегам

Telegram-bot, поиск информации по тикерам/хэштегам Целью проекта являлось создание Телеграм-бота, в которого пользователь может добавлять/удалять хэштеги/тикеры компаний. Он собирает различную информацию с различных каналов, связанных с этим и отправляет новости пользователю, в зависимости от его нас…

Парсер YandexMarket

Парсер YandexMarket Целью проекта являлось создание парсинг-бота на языке Python, который парсил бы определённые сайты ЯМаркета, указанные в файле, и записывал бы все имена товаров в Excel документ, чтобы товары с каждой ссылки были на своём worksheet. Если сайт заподаз…

TelegramBot YoutubeVideoDownloader

TelegramBot YoutubeVideoDownloader Целью проекта являлось создание телерамм бота на языке Python, чтобы у того была возможность скачивания видео с платформы Youtube. Основные библиотеки, которые используются: aiogram и pytube. Команды, использующиеся в боте: /start, /help, /download_y…

Бэкенд для сайта по контролю игровых сессий

Бэкенд для сайта по контролю игровых сессий Информация о сайте (кратко): 1) Сайт предназначен для создания игровых сессий, к которым могут подключатся другие пользователи (но не через сайт, а через лицензированную игру, благодаря информации о сессии (например, session_id), которую вносит польз…

БД для сайта по контролю игровых сессий

БД для сайта по контролю игровых сессий Задание состояло в том, чтобы создать БД для сайта, связанного с контролем игровых сессий (в каждой сессии могли загружаться свои сохранения мира). БД находилась на сервере postgresql. БД хранит данные, такие как: - данные о пользователях - данные о …