Получение текста работает медленно

Поддержка
  • Писал небольшой скрипт для скраппинга комментов в инсте в ходе которого в цикле получаю текст каждого элемента по CSS-селектору, однако даже в режиме "запуска" сбор текста идет достаточно медленно (к примеру самый крупный пост с 4000 комментов занял 56 минут на прогрузку всех комментов + их перетягивание в эксель).
    Вопрос - есть ли более эффективные методы извлечения текста со страницы инструментарием БАСа, в каком направлении двигаться/что изучать дальше для повышения эффективности данной задачи.

  • Твоё решение проблемы
    https://developer.mozilla.org/ru/docs/Web/API/Document/evaluate
    Использовать в кубике яваскрипт.

  • @Enerjust использовать запросы или кэш браузера, это будет гораздо быстрей и эффективней

  • 0 Votes
    1 Posts
    266 Views
  • 0 Votes
    13 Posts
    1291 Views
  • 0 Votes
    13 Posts
    1162 Views
  • 0 Votes
    5 Posts
    656 Views
  • 0 Votes
    3 Posts
    1306 Views