Что потребуется:
- обойти 1.5-2 млн. страниц с одного сайта;
- умение работать с прокси для обхода банов;
- достаточные ресурсы по железу для выполнения задачи или готовность/умение запустить в облаке;
- умение парсить в несколько потоков;
- хранить промежуточные результаты \ очередь страниц которые нужно спарсить в базе данных (большинство стандартных обходчиков страниц не подходят)
В отклике просьба указать:
1) На чем будете писать парсер
2) Контактные данные для связи (скайп или мессенджер)
Подробное ТЗ в личной переписке
Оставлять заявки могут только авторизованные пользователи.
Заявок нет
Оставлять заявки могут только авторизованные пользователи.
Сделать парсер
Реклама
Сделать парсер
Необходимо написать парсер страниц отелей
Что потребуется:
- обойти 1.5-2 млн. страниц с одного сайта;
- умение работать с прокси для обхода банов;
- достаточные ресурсы по железу для выполнения задачи или готовность/умение запустить в облаке;
- умение парсить в несколько потоков;
- хранить промежуточные результаты \ очередь страниц которые нужно спарсить в базе данных (большинство стандартных обходчиков страниц не подходят)
В отклике просьба указать:
1) На чем будете писать парсер
2) Контактные данные для связи (скайп или мессенджер)
Подробное ТЗ в личной переписке