Bablosoft

Бесконечный скролинг

Поддержка
  • HabipH

    Всем привет.
    Подскажите как грамотно реализовать парсинг данных с сайт с бесконечным скролингом, хочу сделать чтобы можно было задать число для парсинга.

    Что делал:

    1. Использовал стандартный скрол, ни в каком режиме не работает
    2. Придумал "костыли" запихал скрол (1,999999) в for и всё работает, но как понимаете нельзя задать сколько спарсить (точнее и к этому костыли придумал, но не удобно)
    FastSpaceF 1 Reply
    0
  • FastSpaceF

    @Habip
    Поддерживаю. Бывает грею профиля, а там скроллинг на овер 100500. Чекать бы это.

    0
  • tet-viviT

    там js подгружает данные.
    эти данные из сервера в js приходят обычно в json формате.
    можно напрямую обращаться к этому api и получать эти данные.

    HabipH 1 Reply
    1
  • S

    Тоже кроме скролла вниз в цикле ничего больше не придумал

    0
  • HabipH

    @tet-vivi
    А можно как-то без js, не программист я, хотелось бы стандартными средствами BAS

    S 1 Reply
    0
  • S

    @Habip said in Бесконечный скролинг:

    @tet-vivi
    А можно как-то без js, не программист я, хотелось бы стандартными средствами BAS

    Тут js посути не при чем. Фиддлер в руки и отслеживаешь запросы, выясняешь по какому запросу подгружаются данные и прочее. Проще как ты делал, скроллить вниз. Желательно найти флаг, обозначающий что данные больше не подгружаются и остановить цикл скролла. Я в своем случае тупо скроллил 20 раз вниз, вся нужная мне инфа подгружалась

    1