Bablosoft

Как спарсить нужные данные?

Поддержка

  • I

    Как спарсить/найти реальные номера компаний в Авито

    Поддержка
    0 Votes
    2 Posts
    384 Views
    sergerdnS

    Для начала ты попробуй хотя бы хоть что-то собрать с этого ресурса в промышленных масштабах.

    Я собирал достаточно давно данные оттуда, еще до фичи с подменой номеров, уже тогда это был не особо простой процесс.

  • WasTabonW

    Как можно спарсить следующую строку в ресурсе без перезапуска процесса?

    Поддержка
    0 Votes
    3 Posts
    487 Views
    F

    {Имя_ресурса|notreuse}

  • S

    Как обойти cloud fire?

    Поддержка
    0 Votes
    10 Posts
    1239 Views
    FoxF

    @mikivin said in Как обойти cloud fire?:

    вот и я задаюсь вопросом как сделать - да через браузер можно сделать зайти кликнкуть дождаться загрузки, перенести куки в http и дальше собирать информацию, но если это нужно сделать например 1 милл раз но хотелось бы найти решение на запросах - так как запустить большое количество браузеров сложно.

    Основная задача cloudflare как раз и заключается в том, что бы на сайт нельзя было зайти запросом, благодаря этому сайты могут быть защищены от ddos атак: https://ru.wikipedia.org/wiki/Cloudflare. Судя по вики, на 2022 год число сотрудников компании составляет 3217 человек, все они сидят и придумывают хитрые алгоритмы, которые сложно было бы отреверсить. Ведь на запросах пройти капчу можно, но для этого нужно выполнить все вычисления в ручную, которые в браузере выполняются автоматически

    Я лично когда то делал обход cloudflare на запросах и он работал, но код меняется часто и поддерживать этот обход выходит себе дороже

  • LighthouseL

    Как сменить название профиля

    Moved Поддержка
    0 Votes
    4 Posts
    609 Views
    tet-viviT

    @basuserator обычно рекомендуют 10 сек или 30 сек

  • Q

    Как перезагрузить страницу?

    Поддержка
    0 Votes
    2 Posts
    2840 Views
    denanotherdayD

    @qwerty в действие "Яваскрипт" вставляешь
    location.reload()