@Mimino ни один сервис не решает ее нормально. Параметр минимального скоре это ерунда. Проверка скоре на каком нибудь сайте тоже может сильно отличаеться от того какой скоре будет на вашем сайте в действительности. Лучше всего немного походить по ссылкам внутри вашего сайта и иметь хорошие отпечатки и прокси.
Получение текста работает медленно
-
Писал небольшой скрипт для скраппинга комментов в инсте в ходе которого в цикле получаю текст каждого элемента по CSS-селектору, однако даже в режиме "запуска" сбор текста идет достаточно медленно (к примеру самый крупный пост с 4000 комментов занял 56 минут на прогрузку всех комментов + их перетягивание в эксель).
Вопрос - есть ли более эффективные методы извлечения текста со страницы инструментарием БАСа, в каком направлении двигаться/что изучать дальше для повышения эффективности данной задачи. -
Твоё решение проблемы
https://developer.mozilla.org/ru/docs/Web/API/Document/evaluate
Использовать в кубике яваскрипт.