Отладить работу парсера с прокси

Задание закрыто
Статус рабочей области:Завершено
Стоимость:Договорная
Срок выполнения:1 день
Варианты оплаты:Без предоплаты
Дата публикации:2022-01-02 14:13
Был(а) на сайте:2024-11-29 14:43

Отладить работу парсера с прокси

 
Задача

Есть парсер на php, который работает, но не долго. Через определенное время перестает. Нужно настроить его работу с правильными прокси, чтобы адресат не мог остановить работу парсера своими банами.

Оставлять заявки могут только авторизованные пользователи.
Исполнитель по этому заданию выбран.
Виктор Кулаков
Виктор Кулаков v_go

Без предоплат и авансов

Специализация: Программирование и IT
  • 2 000 руб1 день
готов выполнить ваше задание. возможно нужно периодичность запросов просто уменьшить а может и адреса прокси изменять
techmanage - Александр
techmanage - Александр techmanage
Специализация: Программирование и IT
  • 4 000 руб5 дней
Здравствуйте, 800 р/час.

Бюджет правок в существующем механизме можно определить только по результатам анализа кода такого механизма. Если граббер на php, то с высокой долей вероятности речь идёт о php_curl - если так, то подключение динамического прокси-листа не должно вызвать проблем.

Аренда "правильных проксей" в бюджет не включается, поставщик и тарификация - на усмотрение заказчика.

Если сбор всякий раз останавливается, можно предположить наличие автоматических механизмов, препятствующих сбору. Агрессивный сбор (многопоток без пауз) должен пресекаться, поскольку создаёт неоправданную нагрузку на сайт-источник. Имеет смысл вводить ограничения скорости сбора.

Условия работы - в профиле.
Денис Захаров
Денис Захаров wazzup.su

Wazzup.su - здесь рождаются сайты

Специализация: Веб-разработка
  • 1 500 руб1 день
Здравствуйте. Сделаю. Обращайтесь

Оставлять заявки могут только авторизованные пользователи.

Другие открытые задания:

Решить 4 задачи теплообмена в ansyse1 000 р.

Бюджет: 1 000 р. Здравствуйте, нужно решить 4 задачи, в ансисе 2020 модуль cfx fluid, сделать геометрию, построить сетку, условия. Так где отсутствуют параметры, то примерно. Задачи…

Ищу дизайнера помощника на постоянную работу с большим количеством проектов35 000 р.

Бюджет: 35 000 р. Подробнее на собеседовании.

Спарсить данные с сайта zakupki.gov.ru1 000 р.

Бюджет: 1 000 р. Нобходимо спарсить с сайта zakupki.gov.ru список всех зарегистрированных участников тендеров. Необходимые данные: название адрес номера телефонов емейл адреса …

поиск заданий