Web-scraping 2Gis — 2023 

  • 11
  • Опубликовано: 2022-08-26
Используемый stack Python:
- Selenium (scroll, click, DOM-change),
- BeautifullSoup,
- re, os, datetime,
- urllib3.request,urllib3.urls, urllib.parser.unuquest,
- pandas

Приложение ориентированно на 2Gis и работу в любом городе/категории.

На входе как список городов и категорий, так и строка с ( единичным) городом/категорией.
На выходе csv-файл (с сырыми данными)

Ниже представлен код и дерево приложения
Web-scraping 2Gis — 2023

Прикрепленные файлы:

Комментариев нет
оставить комментарий могут только авторизованные пользователи
Другие работы автора:
Сертификаты

Сертификаты Здравствуйте. Сертификаты рынка Интернет-маркетинга. Цель - повышение квалификации. Основное направление с 2014 года Интернет-маркетинг- интернет-реклама, анализ конкурентов, usability клиента. С 2020 меняю профпригодность на прогрммирование вэб-и…

Class по принципу Stack

Class по принципу Stack **Stack LIFO** - домашнее задание на курсах Нетологии Реализовать класс Stack со следующими методами: - isEmpty - проверка стека на пустоту. Метод возвращает True или False. - push - добавляет новый элемент на вершину стека. Метод ничего не …

PostgreSQL и Python - 2022

PostgreSQL и Python - 2022 ### Создайте программу для управления клиентами на python. ### **Требуется** хранить персональную информацию о клиентах: - имя; - фамилия; - email; - телефон; **Сложность** в том, что телефон у клиента может быть не один, а два, три и даже бо…

App Debite card + luhna and unit / e2e tested

App Debite card + luhna and unit / e2e tested ### Credit Card Validator #### Легенда Задача: сделать виджет, позволяющий вводить номер карты (можете в качестве общего развития почитать про PCI DSS). Общий вид виджета должен выглядеть следующим образом: #### Описание Вам нужно провести иссле…

YandexDisk API

YandexDisk API #### Задача №1 unit-tests #### Необходимо протестировать программу по работе с бухгалтерией. Следует протестировать основные функции по получению информации о документах, добавлении и удалении элементов из словаря. **Реализовал за**, вместе с изуче…

Django-calculator from the  recipe's menu

Django-calculator from the recipe's menu Задание Ваша задача написать простой сервис-помощник для приготовления блюд. Сервис знает некоторое количество рецептов (см. файл calculator/views.py - переменная DATA). На запрос вида /omlet/ должен отобразиться список ингредиентов и их количество…

re-форматирование адресной книги

re-форматирование адресной книги ### Регулярные выражения ### В адресную книгу добавляем контакты не имея единого формата. В результате получается адресная книга, в которой совершенно невозможно кого-то нормально найти: мешает множество дублей и разная запись одних и тех же имен. …

Италия - В2С Google Реклама 02.2021 (не удачный)

Италия - В2С Google Реклама 02.2021 (не удачный) 1) Взял пример ключей на которые хотят показываться. 2) Собрал ключи, распределил по ключевым-фразам и минус-словам. Отправил на согласование. 3) Написал объявления. Так как рекламу подавать необходимо учитывая народный лексикон, отправили переводчик…