Отладить работу парсера с прокси

Задание закрыто
Статус рабочей области:Завершено
Стоимость:Договорная
Срок выполнения:1 день
Варианты оплаты:Без предоплаты
Дата публикации:2022-01-02 14:13
Был(а) на сайте:2025-12-17 21:45

Отладить работу парсера с прокси

 
Задача

Есть парсер на php, который работает, но не долго. Через определенное время перестает. Нужно настроить его работу с правильными прокси, чтобы адресат не мог остановить работу парсера своими банами.

Оставлять заявки могут только авторизованные пользователи.
Исполнитель по этому заданию выбран.
готов выполнить ваше задание. возможно нужно периодичность запросов просто уменьшить а может и адреса прокси изменять
Здравствуйте, 800 р/час.

Бюджет правок в существующем механизме можно определить только по результатам анализа кода такого механизма. Если граббер на php, то с высокой долей вероятности речь идёт о php_curl - если так, то подключение динамического прокси-листа не должно вызвать проблем.

Аренда "правильных проксей" в бюджет не включается, поставщик и тарификация - на усмотрение заказчика.

Если сбор всякий раз останавливается, можно предположить наличие автоматических механизмов, препятствующих сбору. Агрессивный сбор (многопоток без пауз) должен пресекаться, поскольку создаёт неоправданную нагрузку на сайт-источник. Имеет смысл вводить ограничения скорости сбора.

Условия работы - в профиле.
Денис Захаров
Основная специализация: Веб-разработка и Продуктовый дизайн
    Здравствуйте. Сделаю. Обращайтесь

    Оставлять заявки могут только авторизованные пользователи.

    Другие открытые задания:

    поиск заданий