Бесконечный скролинг



  • Всем привет.
    Подскажите как грамотно реализовать парсинг данных с сайт с бесконечным скролингом, хочу сделать чтобы можно было задать число для парсинга.

    Что делал:

    1. Использовал стандартный скрол, ни в каком режиме не работает
    2. Придумал "костыли" запихал скрол (1,999999) в for и всё работает, но как понимаете нельзя задать сколько спарсить (точнее и к этому костыли придумал, но не удобно)


  • @Habip
    Поддерживаю. Бывает грею профиля, а там скроллинг на овер 100500. Чекать бы это.



  • там js подгружает данные.
    эти данные из сервера в js приходят обычно в json формате.
    можно напрямую обращаться к этому api и получать эти данные.



  • Тоже кроме скролла вниз в цикле ничего больше не придумал



  • @tet-vivi
    А можно как-то без js, не программист я, хотелось бы стандартными средствами BAS



  • @Habip said in Бесконечный скролинг:

    @tet-vivi
    А можно как-то без js, не программист я, хотелось бы стандартными средствами BAS

    Тут js посути не при чем. Фиддлер в руки и отслеживаешь запросы, выясняешь по какому запросу подгружаются данные и прочее. Проще как ты делал, скроллить вниз. Желательно найти флаг, обозначающий что данные больше не подгружаются и остановить цикл скролла. Я в своем случае тупо скроллил 20 раз вниз, вся нужная мне инфа подгружалась


Log in to reply
 

  • 2
  • 15
  • 7
  • 13
  • 3
  • 3
  • 3
  • 3