Bablosoft

Получение текста работает медленно

Поддержка
  • EnerjustE

    Писал небольшой скрипт для скраппинга комментов в инсте в ходе которого в цикле получаю текст каждого элемента по CSS-селектору, однако даже в режиме "запуска" сбор текста идет достаточно медленно (к примеру самый крупный пост с 4000 комментов занял 56 минут на прогрузку всех комментов + их перетягивание в эксель).
    Вопрос - есть ли более эффективные методы извлечения текста со страницы инструментарием БАСа, в каком направлении двигаться/что изучать дальше для повышения эффективности данной задачи.

    ? 1 Reply
    0
  • FastSpaceF

    Твоё решение проблемы
    https://developer.mozilla.org/ru/docs/Web/API/Document/evaluate
    Использовать в кубике яваскрипт.

    ❤
    0
  • ?

    @Enerjust использовать запросы или кэш браузера, это будет гораздо быстрей и эффективней

    ❤
    0