Скрипт после 100 запросов зависает



  • Создал скрипт который парсит номера с сайта OLX ,все работает но есть маленькая проблема
    После спарсенных 100 номеров скрипт зависает или получает номера " 000 000 000"
    но если скрипт перезапустить то он сразу парсит норм номера
    Подскажите в чем может быть проблема? пробовал менять user agent и прокси но результат тот же!

    Может кто то с этим сталкивался?



  • @assd куки очищаем?



  • нет, это действие "очистить заголовки"?



  • @assd Мониторь трафик, возможно сайт блочит временно запросы и это надо учитывать.



  • @assd said in Скрипт после 100 запросов зависает:

    нет, это действие "очистить заголовки"?

    "очистить заголовки" - очищает заголовки, а я про куки



  • @uraabk я понял,просто загрузить пустые куки
    если очищаю куки даже 100 номеров не даёт сразу выдаёт "000 000 000"
    100 номеров зависает скрипт и вообще



  • @assd Блин, вы читали вообще что я вам писал? Смотрите запросы и ответы на них, видимо сайт ограничивает их, а ваш скрипт просто получает не то, что ожидает и возможно зацикливается на этой ошибке или вроде того.



  • Может кому то поможет.

    Проблема была в моей невнимательности
    user agentov у меня было 100 десктопных остальное мобильные. по этому меня после 100 запросов посылали на...


Log in to reply