Парсер OLX номеров через GET запросы



  • Привет коллеги!
    Возникла такая необходимость написать парсер OLX номеров.
    В инете везде пишут один и тот же алгоритм как вытащить номер get запросами.

    1 - Делаем GET запрос самой страницы
    Пример - https://www.olx.ua/obyavlenie/prodam-bmw-328i-f30-bmv-328i-IDBwDsE.html

    2 - Из предыдущего запроса вытаскиваем код pt.
    Пример pt=d7af095aa007ae7197e1c190176cd8fe08b8a25e925ce3dbcd892de094a5563a19b8e1f486d1e6f8543537e0da374bf5ddddfba23e08afdf19c437a452cbb4f9.
    Вставляем в запрос:
    0_1540375668492_Скриншот 24-10-2018 140730.png

    И в ответ получаем номер.
    НО в ответ приходит всегда:
    0_1540375723496_Скриншот 24-10-2018 140834.png.
    Пробовал поразному.
    Может кто то сталкивался или что то не так делаю?



  • @neizwestnyi00 все просто. Вам нужны куки в get запросе.



  • @uraabk После первого запроса сохранять куки. а во втором использовать их? или как?


  • Banned

    @neizwestnyi00 Нет он сам их должен получать. Refefer как?
    Но такой ответ говорит что вы как бэ сделали правильно но как бэ серверу не нравится что т о. Проверьте все заголовки и правильно ли составлен запрос если я правильно понял он составной



  • @neizwestnyi00 ноли вместо номера выдает при частых запросах и т.п.
    Пробуйте менять прокси, ua и прочее



  • @drprime Ну это второй запрос только).
    Первый запрос самой страницы объявления и второй сам номер))