Скрипт после 100 запросов зависает
-
Создал скрипт который парсит номера с сайта OLX ,все работает но есть маленькая проблема
После спарсенных 100 номеров скрипт зависает или получает номера " 000 000 000"
но если скрипт перезапустить то он сразу парсит норм номера
Подскажите в чем может быть проблема? пробовал менять user agent и прокси но результат тот же!Может кто то с этим сталкивался?
-
@assd куки очищаем?
-
нет, это действие "очистить заголовки"?
-
@assd Мониторь трафик, возможно сайт блочит временно запросы и это надо учитывать.
-
@assd said in Скрипт после 100 запросов зависает:
нет, это действие "очистить заголовки"?
"очистить заголовки" - очищает заголовки, а я про куки
-
@uraabk я понял,просто загрузить пустые куки
если очищаю куки даже 100 номеров не даёт сразу выдаёт "000 000 000"
100 номеров зависает скрипт и вообще
-
@assd Блин, вы читали вообще что я вам писал? Смотрите запросы и ответы на них, видимо сайт ограничивает их, а ваш скрипт просто получает не то, что ожидает и возможно зацикливается на этой ошибке или вроде того.
-
Может кому то поможет.
Проблема была в моей невнимательности
user agentov у меня было 100 десктопных остальное мобильные. по этому меня после 100 запросов посылали на...
