Есть парсер на php, который работает, но не долго. Через определенное время перестает. Нужно настроить его работу с правильными прокси, чтобы адресат не мог остановить работу парсера своими банами.
Оставлять заявки могут только авторизованные пользователи.
Бюджет правок в существующем механизме можно определить только по результатам анализа кода такого механизма. Если граббер на php, то с высокой долей вероятности речь идёт о php_curl - если так, то подключение динамического прокси-листа не должно вызвать проблем.
Аренда "правильных проксей" в бюджет не включается, поставщик и тарификация - на усмотрение заказчика.
Если сбор всякий раз останавливается, можно предположить наличие автоматических механизмов, препятствующих сбору. Агрессивный сбор (многопоток без пауз) должен пресекаться, поскольку создаёт неоправданную нагрузку на сайт-источник. Имеет смысл вводить ограничения скорости сбора.
Отладить работу парсера с прокси
Реклама
Отладить работу парсера с прокси
Есть парсер на php, который работает, но не долго. Через определенное время перестает. Нужно настроить его работу с правильными прокси, чтобы адресат не мог остановить работу парсера своими банами.
Другие открытые задания:
авито100 р.
Бюджет: 100 р. написать позитивный отзыв. текст есть
Оставить 5 отзыва в яндекс и гугл300 р.
Бюджет: 300 р. Оставить 5 отзыва в яндекс и гугл
Расшифровка аудио: 30 минут \ 1 голос \ Лекция-монолог 300 р.
Бюджет: 300 р. Работа (вакансия). Приглашаем на разовый проект тех, кто планирует и готов работать в расшифровке аудио длительное время (рассматриваем от 1 года и далее). Кто уже …
поиск заданий