Есть парсер на php, который работает, но не долго. Через определенное время перестает. Нужно настроить его работу с правильными прокси, чтобы адресат не мог остановить работу парсера своими банами.
Оставлять заявки могут только авторизованные пользователи.
Бюджет правок в существующем механизме можно определить только по результатам анализа кода такого механизма. Если граббер на php, то с высокой долей вероятности речь идёт о php_curl - если так, то подключение динамического прокси-листа не должно вызвать проблем.
Аренда "правильных проксей" в бюджет не включается, поставщик и тарификация - на усмотрение заказчика.
Если сбор всякий раз останавливается, можно предположить наличие автоматических механизмов, препятствующих сбору. Агрессивный сбор (многопоток без пауз) должен пресекаться, поскольку создаёт неоправданную нагрузку на сайт-источник. Имеет смысл вводить ограничения скорости сбора.
Отладить работу парсера с прокси
Реклама
Отладить работу парсера с прокси
Есть парсер на php, который работает, но не долго. Через определенное время перестает. Нужно настроить его работу с правильными прокси, чтобы адресат не мог остановить работу парсера своими банами.
Другие открытые задания:
Специалист дистанционной поддержки клиентов36 000 р.
Бюджет: 36 000 р. Преимущества работы в нашей компании. Стабильная работа в крупнейшем независимом и технологичном частном банке России Достойная зарплата и условия труда, современ…
Мобильное приложение сервиса доставки еды300 000 р.
Бюджет: 300 000 р. Основные функции: 1) Авторизация по номеру телефона 2) Заполнение профиля 3) Просмотр программ питания и меню 4) Оформление заказа на программу питания …
Маркетолог . Нужен специалист по ЮЛЕ со своим трафиком .Специалист по рекламе ,трафику , лидогенерации .60 000 р.
Бюджет: 60 000 р. Маркетолог . Нужен специалист по ЮЛЕ со своим трафиком .Специалист по рекламе ,трафику , лидогенерации . Здравствуйте, уважаемые фрилансеры ! Меня зовут Ол…
поиск заданий