Новостной паук с обработкой данных

Описание

Основные задачи приложения:
- Универсальный сбор данных с различных новостных источников
- REST-API для взаимодействия с собранными данными
- Бот для быстрого и простого отслеживания данных
- Обработка данных с помощью NLP, получение сущностей и тегов из новостных статей

Пример собранных данных (архив с 848 тысячами новостных статей за 1-2 квартал 2021 года)
https://disk.yandex.ru/d/X7xFr7IMlRo7bg

Ссылки на примеры реализации

 github.com/rokv1l/news_spider

Презентация проекта