Web-scraping 2Gis — 2023 

  • 16
  • Опубликовано: 2022-08-26
Используемый stack Python:
- Selenium (scroll, click, DOM-change),
- BeautifullSoup,
- re, os, datetime,
- urllib3.request,urllib3.urls, urllib.parser.unuquest,
- pandas

Приложение ориентированно на 2Gis и работу в любом городе/категории.

На входе как список городов и категорий, так и строка с ( единичным) городом/категорией.
На выходе csv-файл (с сырыми данными)

Ниже представлен код и дерево приложения
Web-scraping 2Gis — 2023

Прикрепленные файлы:

Комментариев нет
оставить комментарий могут только авторизованные пользователи
Другие работы автора:
Сертификаты

Сертификаты Здравствуйте. Сертификаты рынка Интернет-маркетинга. Цель - повышение квалификации. Основное направление с 2014 года Интернет-маркетинг- интернет-реклама, анализ конкурентов, usability клиента. С 2020 меняю профпригодность на прогрммирование вэб-и…

Django-calculator from the  recipe's menu

Django-calculator from the recipe's menu Задание Ваша задача написать простой сервис-помощник для приготовления блюд. Сервис знает некоторое количество рецептов (см. файл calculator/views.py - переменная DATA). На запрос вида /omlet/ должен отобразиться список ингредиентов и их количество…

re-форматирование адресной книги

re-форматирование адресной книги ### Регулярные выражения ### В адресную книгу добавляем контакты не имея единого формата. В результате получается адресная книга, в которой совершенно невозможно кого-то нормально найти: мешает множество дублей и разная запись одних и тех же имен. …

Docker Server Django и API

Docker Server Django и API День добрый! Ниже банальный пример как выборку из коммерческого Django проекта упаковал в Docker. Всю работу разместить не могу. Пример развернут на сервере. - http://194.67.68.102/admin/ - рабочая база данных и админ панель. Могу дать доступ. -…

Class по принципу Stack

Class по принципу Stack **Stack LIFO** - домашнее задание на курсах Нетологии Реализовать класс Stack со следующими методами: - isEmpty - проверка стека на пустоту. Метод возвращает True или False. - push - добавляет новый элемент на вершину стека. Метод ничего не …

YandexDisk API

YandexDisk API #### Задача №1 unit-tests #### Необходимо протестировать программу по работе с бухгалтерией. Следует протестировать основные функции по получению информации о документах, добавлении и удалении элементов из словаря. **Реализовал за**, вместе с изуче…

App Debite card + luhna and unit / e2e tested

App Debite card + luhna and unit / e2e tested ### Credit Card Validator #### Легенда Задача: сделать виджет, позволяющий вводить номер карты (можете в качестве общего развития почитать про PCI DSS). Общий вид виджета должен выглядеть следующим образом: #### Описание Вам нужно провести иссле…

PostgreSQL и Python - 2022

PostgreSQL и Python - 2022 ### Создайте программу для управления клиентами на python. ### **Требуется** хранить персональную информацию о клиентах: - имя; - фамилия; - email; - телефон; **Сложность** в том, что телефон у клиента может быть не один, а два, три и даже бо…