Получение текста работает медленно

Поддержка
  • Писал небольшой скрипт для скраппинга комментов в инсте в ходе которого в цикле получаю текст каждого элемента по CSS-селектору, однако даже в режиме "запуска" сбор текста идет достаточно медленно (к примеру самый крупный пост с 4000 комментов занял 56 минут на прогрузку всех комментов + их перетягивание в эксель).
    Вопрос - есть ли более эффективные методы извлечения текста со страницы инструментарием БАСа, в каком направлении двигаться/что изучать дальше для повышения эффективности данной задачи.

  • Твоё решение проблемы
    https://developer.mozilla.org/ru/docs/Web/API/Document/evaluate
    Использовать в кубике яваскрипт.

  • @Enerjust использовать запросы или кэш браузера, это будет гораздо быстрей и эффективней

  • 0 Votes
    4 Posts
    713 Views
  • 0 Votes
    3 Posts
    427 Views
  • 0 Votes
    14 Posts
    1465 Views
  • 0 Votes
    2 Posts
    445 Views
  • 0 Votes
    4 Posts
    1566 Views