Отладить работу парсера с прокси

Задание закрыто
Статус рабочей области:Завершено
Стоимость:Договорная
Срок выполнения:1 день
Варианты оплаты:Без предоплаты
Дата публикации:2022-01-02 14:13
Был(а) на сайте:2024-11-29 14:43

Отладить работу парсера с прокси

 
Задача

Есть парсер на php, который работает, но не долго. Через определенное время перестает. Нужно настроить его работу с правильными прокси, чтобы адресат не мог остановить работу парсера своими банами.

Оставлять заявки могут только авторизованные пользователи.
Исполнитель по этому заданию выбран.
Виктор Кулаков
Виктор Кулаков v_go

Без предоплат и авансов

Специализация: Программирование и IT
  • 2 000 руб1 день
готов выполнить ваше задание. возможно нужно периодичность запросов просто уменьшить а может и адреса прокси изменять
techmanage - Александр
techmanage - Александр techmanage
Специализация: Программирование и IT
  • 4 000 руб5 дней
Здравствуйте, 800 р/час.

Бюджет правок в существующем механизме можно определить только по результатам анализа кода такого механизма. Если граббер на php, то с высокой долей вероятности речь идёт о php_curl - если так, то подключение динамического прокси-листа не должно вызвать проблем.

Аренда "правильных проксей" в бюджет не включается, поставщик и тарификация - на усмотрение заказчика.

Если сбор всякий раз останавливается, можно предположить наличие автоматических механизмов, препятствующих сбору. Агрессивный сбор (многопоток без пауз) должен пресекаться, поскольку создаёт неоправданную нагрузку на сайт-источник. Имеет смысл вводить ограничения скорости сбора.

Условия работы - в профиле.
Денис Захаров
Денис Захаров wazzup.su

Wazzup.su - здесь рождаются сайты

Специализация: Веб-разработка
  • 1 500 руб1 день
Здравствуйте. Сделаю. Обращайтесь

Оставлять заявки могут только авторизованные пользователи.

Другие открытые задания:

Менеджер по продажам и развитию (удаленно, только через чаты)1 500 р.

Бюджет: 1 500 р. Мы ищем амбициозного и энергичного специалиста для работы с клиентами и развития бизнеса. Эта роль идеально подходит для тех, кто готов к новым вызовам, хочет расти…

БА 1. Организация №1 ООО «Мебельный эксперт»3 500 р.

Бюджет: 3 500 р. Задание в файле во вложении

Финансовый аналитик AI10 000 р.

Бюджет: 10 000 р. Создать на базе нейросети финансового аналитика. Мы подгружаем данные, таблицы, пдф, видео, его задача обработать и на основе этих данных выдавать рекомендации. Ва…

поиск заданий