Сделать универсальный парсер

Задание закрыто
Стоимость:Договорная
Срок выполнения:10 дней
Варианты оплаты:По договоренности
Дата публикации:2022-08-29 14:07
Был на сайте:2023-10-25 01:20

Сделать универсальный парсер

 
Задача

Мы пилим проект на котором собираемся публиковать новости по узкой теме. В связи с этим нам нужен парсер. Вот как мы это видим:

На нашем VPS (который мы арендуем в соответствии с вашими пожеланиями) нужно развернуть некую систему с максимально простым юзер-интерфейсом, закрытую от посторонних логином-паролем, в которой можно:

добавлять источники для парсинга, такие как сайты типа риа новости, лента.ру, интерфакс, какой-то блог в ЖЖ и т.п., а также телеграм-каналы и паблики в инсте;

ключевые слова (или их части, т.е. например «лужники» и/или «лужн*»).

Задача системы, в случае обнаружения новых постов/статей, содержащих данные ключи в заданных источниках будет уведомлять об этом в телеграме при помощи бота, а также нужно чтобы можно было зайти в интерфейс и посмотреть что она наобнаруживала и, кликнув по ссылке, перейти на источник.

Теоретически есть куча готовых решений, поэтому если вы внедрите какой-то готовый продукт (если его лицензия стоит денег - мы, в принципе, готовы оплатить ее) то м...

Видеть полную информацию и оставлять заявки могут только авторизованные пользователи.
Григорий Новиков
Специализация: Программирование и IT
  • 10 000 руб10 дней
Обращайтесь
Добрый вечер!

Есть опыт и готовые проекты по данному направлению.
Могу предложить админку на Django. Сбор постов с Telegram - pyrogram ( вы будете получать мгновенные оповещения в случае публикации интересующих постов ), новостные сайты - парсерами, синхронизированными с rss ( чтобы сразу выгружать всё тело статьи). Если есть возможность (дополнительная оплата доступа), то можно подключить какое либо из множеств API агрегаторов новостных сайтов.
Задача понятная, примерная архитектура приложения тоже.
Вам необходимо учесть, что качественный отказоустойчивый сбор требует постоянной поддержки. Это не простой телеграм-бот, запустить и чтобы стабильно работало на протяжении долгого времени не получится.
Буду рад начать сотрудничество.
Telegram: @bsfour
Dias Kussanbay
Специализация: Программирование и IT
  • 15 000 руб15 дней
Здравствуйте, Тимофей! Ваш проект заинтересовал меня, веб интерфейс сделаю на питон Джанго, от вас нужен будет список сайтов доноров и телеграмм каналов откуда будем парсить данные. Цена и сроки примерные, они буду варьироваться в зависимости от количества сайтов доноров и телеграмм каналов. Обращайтесь, буду рад с вами сотрудничать!

Оставлять заявки могут только авторизованные пользователи.