Bablosoft

Парсинг страниц

Поддержка

  • D

    Парсинг JSON

    Поддержка
    0 Votes
    3 Posts
    721 Views
    D

    @Symposium получаю вот так, $.items[*].id,conversion
    Выходит вот это: d1d2ea53-21fe-405a-8155-243cb709d914-изображение.png

    Не совсем понимаю как теперь через условие чекать все это дело, если парсится все по отдельной строке

  • Splin TeronS

    Парсинг

    Поддержка
    0 Votes
    4 Posts
    750 Views
    Splin TeronS

    @GameBot всё получилось, со списками ещё не работал никогда, парсил в текстовик просто, раздул из мухи слона, спасибо!

  • Z

    Парсинг картинок с сайта.

    Поддержка
    0 Votes
    7 Posts
    2137 Views
    B

    @GhostZ Всё работает,Спасибо

  • B

    Парсинг непрогруженного контента

    Поддержка
    0 Votes
    2 Posts
    693 Views
    FoxF

    @bas_user said in Парсинг непрогруженного контента:

    Всем привет!
    Кто сталкивался с парсингом страницы, где контент прогружается после скрола?
    Пример такой страницы лента ВК
    Подскажите кто знает, как спарить ссылки на непрогруженной странице, например участников группы в ВК, где полный список выдает только после скрола
    Подозреваю что это надо делать через xpath (могу быть не прав), но не понимаю как именно это реализовать

    Данные на страницу подгружаются после скрола, например через ajax (изначально на странице их просто нет). Чтобы парсить в браузере, совершайте скролл, если парсите через запросы, смотрите запросы при подгрузке данных после скрола.

  • A

    Парсинг regex как сделать правильно?

    Поддержка
    0 Votes
    4 Posts
    1465 Views
    FoxF

    @avtopars

    я не нашел список->в ресурс разве циклом по 1 элементу брать с списка и писать в ресурс.

    Именно так, в режиме запуска это происходит мгновенно.

    Только смысл сего действа если можно было изначально так делать.

    Xpath выдаёт результат надёжнее регулярки и быстрее, да и потребляет меньше ресурсов (хоть я и люблю регулярки :D)

    А русурс нужен чтоб многопотоком после пройтись по всем ссылкам(как я понимаю список для этого не пригоден)

    Можно ещё список записать в глобальную переменную и он будет виден всем потокам. Но чтобы потоки не брали одинаковые значения, идеально подойдёт ресурс.