Получение текста работает медленно

Поддержка
  • Писал небольшой скрипт для скраппинга комментов в инсте в ходе которого в цикле получаю текст каждого элемента по CSS-селектору, однако даже в режиме "запуска" сбор текста идет достаточно медленно (к примеру самый крупный пост с 4000 комментов занял 56 минут на прогрузку всех комментов + их перетягивание в эксель).
    Вопрос - есть ли более эффективные методы извлечения текста со страницы инструментарием БАСа, в каком направлении двигаться/что изучать дальше для повышения эффективности данной задачи.

  • Твоё решение проблемы
    https://developer.mozilla.org/ru/docs/Web/API/Document/evaluate
    Использовать в кубике яваскрипт.

  • @Enerjust использовать запросы или кэш браузера, это будет гораздо быстрей и эффективней

  • 0 Votes
    4 Posts
    372 Views
  • 0 Votes
    9 Posts
    918 Views
  • 0 Votes
    5 Posts
    696 Views
  • 0 Votes
    10 Posts
    1795 Views
  • 0 Votes
    4 Posts
    1309 Views