Отладить работу парсера с прокси

Задание закрыто
Статус рабочей области:Завершено
Стоимость:Договорная
Срок выполнения:1 день
Варианты оплаты:Без предоплаты
Дата публикации:2022-01-02 14:13
Был(а) на сайте:2024-07-09 11:57

Отладить работу парсера с прокси

 
Задача

Есть парсер на php, который работает, но не долго. Через определенное время перестает. Нужно настроить его работу с правильными прокси, чтобы адресат не мог остановить работу парсера своими банами.

Оставлять заявки могут только авторизованные пользователи.
Исполнитель по этому заданию выбран.
Виктор Кулаков
Виктор Кулаков v_go

Без предоплат и авансов

Специализация: Программирование и IT
  • 2 000 руб1 день
готов выполнить ваше задание. возможно нужно периодичность запросов просто уменьшить а может и адреса прокси изменять
techmanage - Александр
techmanage - Александр techmanage
Специализация: Программирование и IT
  • 4 000 руб5 дней
Здравствуйте, 800 р/час.

Бюджет правок в существующем механизме можно определить только по результатам анализа кода такого механизма. Если граббер на php, то с высокой долей вероятности речь идёт о php_curl - если так, то подключение динамического прокси-листа не должно вызвать проблем.

Аренда "правильных проксей" в бюджет не включается, поставщик и тарификация - на усмотрение заказчика.

Если сбор всякий раз останавливается, можно предположить наличие автоматических механизмов, препятствующих сбору. Агрессивный сбор (многопоток без пауз) должен пресекаться, поскольку создаёт неоправданную нагрузку на сайт-источник. Имеет смысл вводить ограничения скорости сбора.

Условия работы - в профиле.
Денис Захаров
Денис Захаров wazzup.su

Wazzup.su - здесь рождаются сайты

Специализация: Веб-разработка
  • 1 500 руб1 день
Здравствуйте. Сделаю. Обращайтесь

Оставлять заявки могут только авторизованные пользователи.

Другие открытые задания:

Маркетолог/маркетинговое агентство с опытом работы в образовании, ресторанном бизнесе и сфере досуга200 000 р.

Бюджет: 200 000 р. Добрый день! Требуется партнер с опытом работы в ресторанном бизнесе и сфере досуга. Предлагаем сотрудничество на длительный срок. Подробно о сотрудничестве обсуд…

Ассистент по рекламе 1 000 р.

Бюджет: 1 000 р. Требуется ассистент по размещению рекламы и приему звонков. Работа удаленно, регион не важен. На постоянной основе. Сфера деятельности: услуги. Мастер на час, гру…

Написать отзыв на Яндекс картах100 р.

Бюджет: 100 р. Нужно написать отзыв на Яндекс картах. Тг ···

поиск заданий