Отладить работу парсера с прокси

Задание закрыто
Статус рабочей области:Завершено
Стоимость:Договорная
Срок выполнения:1 день
Варианты оплаты:Без предоплаты
Дата публикации:2022-01-02 14:13
Был(а) на сайте:2024-04-11 10:37

Отладить работу парсера с прокси

 
Задача

Есть парсер на php, который работает, но не долго. Через определенное время перестает. Нужно настроить его работу с правильными прокси, чтобы адресат не мог остановить работу парсера своими банами.

Оставлять заявки могут только авторизованные пользователи.
Исполнитель по этому заданию выбран.
Виктор Кулаков

Без предоплат и авансов

Cпециализация: Программирование и IT
  • 2 000 руб1 день
готов выполнить ваше задание. возможно нужно периодичность запросов просто уменьшить а может и адреса прокси изменять
techmanage - Александр

🏑 🏑 🚲 🚲 🚲

Cпециализация: Программирование и IT
  • 4 000 руб5 дней
Здравствуйте, 800 р/час.

Бюджет правок в существующем механизме можно определить только по результатам анализа кода такого механизма. Если граббер на php, то с высокой долей вероятности речь идёт о php_curl - если так, то подключение динамического прокси-листа не должно вызвать проблем.

Аренда "правильных проксей" в бюджет не включается, поставщик и тарификация - на усмотрение заказчика.

Если сбор всякий раз останавливается, можно предположить наличие автоматических механизмов, препятствующих сбору. Агрессивный сбор (многопоток без пауз) должен пресекаться, поскольку создаёт неоправданную нагрузку на сайт-источник. Имеет смысл вводить ограничения скорости сбора.

Условия работы - в профиле.
Денис Захаров

Wazzup.su - здесь рождаются сайты

Cпециализация: Веб разработка
  • 1 500 руб1 день
Здравствуйте. Сделаю. Обращайтесь

Оставлять заявки могут только авторизованные пользователи.