Bablosoft

Парсинг динамического контента при POST/GET запросах.

Поддержка
  • P

    Подскажите, коллеги, как получить динамические данные с сайта, которые появляются только при прокрутке страницы (типа ленты Вконтакте например). При работе в веб браузере понятно - можно проскролить страницу вниз, контент обновится, а как подгрузить контент при работе не через веб, а на запросах? Спасибо.

    0
  • W

    Динамический контент запросами подгружается

    0
  • GangG

    Снифай запросы. При динамической подгрузке страницы, там появляются новые запросы. В ответ обычно приходит json

    0

  • I

    Баг при использовании профиля

    Поддержка
    0 Votes
    13 Posts
    1269 Views
    I

    @m4zuper said in Баг при использовании профиля:

    Создав новый проект, вы применяли старый профиль или создали новый?

    Старый профиль. Никаких сторонних модулей в новом проекте нет, в тех, которые работают, нет кастомных фингерпринтов и прокси, все стандартно -- капча кликами, ожидатель селекторов ну и все в принципе.

    Если применить профиль без загрузки прокси, ошибка происходит?

    Если применять без загрузки прокси, то ошибки нет. Без отпечатка не пробовал, подгружал готовый из профиля, 127 версия хром.

  • D

    Крашится на действие GET Запрос.

    Поддержка
    0 Votes
    16 Posts
    1687 Views
    Alex84A

    @DoctorKrolic Чёт тоже, гложут меня Сомнения :)
    У Джавы же Архитектура, другая и под другое малость заточено, под те же Игры более канает.

  • EscobarE

    Сомневаюсь при извлечении значения cookie

    Поддержка
    0 Votes
    2 Posts
    469 Views
    FoxF

    @Escobar said in Сомневаюсь при извлечении значения cookie:

    в http-запросе я получаю большой файл cookie, содержащий значение, которое я хочу извлечь

    ....."name": "remixq_7eb8ed9214a79de188bd22e21ba01219", "path": "/", "secure": "1", "value": "6ba6be22586c4f068e" } ] }

    Как я могу извлечь 2 значения
    550d70ed-8f23-4dfb-bde7-d68464726246-image.png

    Другой способ получить это так

    ba58017e-42b4-4f7f-8504-ffca263f8a70-image.png

    Смотрите в прикреплённой в "поддержке" теме "Часто задаваемые вопросы"

  • V

    Referer: https://... не передаётся для http:// сайта

    Поддержка
    0 Votes
    15 Posts
    3380 Views
    S

    Тут такое дело, есть же meta referer который можно установить на сайт источник перехода, например в гугле он используется и переходы на http сайт сохраняют https источник перехода.

    Таким образом эмулировать переходы с того же поисковика уже не выйдет, так как при добавлении заголовка хттпс://гугол.ком он не передается.

    Потому считаю реализацию данной возможность в БАСе все же полезной.

  • A

    POST GET запросы

    Поддержка
    0 Votes
    2 Posts
    1201 Views
    FoxF

    @assd Боюсь здесь поможет только опыт. Для начала можешь посмотреть стрим @DrPrime