Bablosoft

Возможно ли скроллить ленту с помощью запросов?

Поддержка
  • S

    Всем привет. Не так давно начал разбираться в запросах, но встретился с проблемой. Мне на запросах нужно сделать парсер, однако если сделать гет запрос он выдает xml только первых пяти статей. Возможно ли каким-то образом скролить с помощью запросов и увеличить количество отображаемых статей в ленте. Нужно спарсить статьи с сайта dzen.ru. Заранее спасибо

    FoxF 1 Reply
    0
  • FoxF

    @suvorov_jr2 said in Возможно ли скроллить ленту с помощью запросов?:

    Всем привет. Не так давно начал разбираться в запросах, но встретился с проблемой. Мне на запросах нужно сделать парсер, однако если сделать гет запрос он выдает xml только первых пяти статей. Возможно ли каким-то образом скролить с помощью запросов и увеличить количество отображаемых статей в ленте. Нужно спарсить статьи с сайта dzen.ru. Заранее спасибо

    Скрольте в браузере и смотрите какие запросы отправляет сайт

    0

  • D

    Проблема с ожиданием

    Поддержка
    0 Votes
    5 Posts
    711 Views
    FoxF

    @digitkek said in Проблема с ожиданием:

    @Fox в либе одной похожая ситуация с ожиданием и тоже н работет код для примера, потому что не ожидает почему то. Кубик нод джс

    А цель то какая? Если просто ожидание в 3 секунды, то можете использовать код:

    await new Promise(r => setTimeout(r, 3000));
  • N

    Проблема с xpath

    Поддержка
    0 Votes
    3 Posts
    655 Views
    I

    @n1kkiof там фрейм скорее всего, поэтому не видит с твоим xpath

  • V

    Работа с куки

    Поддержка
    0 Votes
    10 Posts
    1405 Views
    CruzelC

    @UserTrue said in Работа с куки:

    @vitalik8217 кроме кук в профиле могут храниться данные которые также проверяются

    Может ещё стоит обратить внимание на заголовки, или куки даются на определённое время, которые проходит

  • R

    Помогите с базой

    Поддержка
    0 Votes
    18 Posts
    2231 Views
    ?

    @Bigma said in Помогите с базой:

    А можно подробнее, почему с будет проблема ?

    Потому, что в многопотоке другие потоки тоже будут брать элементы из ресурсы и поэтому нельзя полагаться на количество элементов в ресурсе.Но по сути это не чтобы проблема, просто в нем нет смысла, он скорей всего просто стопнется когда ресурс закончится, аналогично как если бы это был просто while.

  • A

    Работа с базой

    Поддержка
    0 Votes
    2 Posts
    896 Views
    artihorrorA

    @assd парсить стрку