Отключите все лишнее на целевой странице если она одна, это реально сделать - например скрипты всяких фейсбуков, сторонней аналитики и так далее. Обычно сервесы используют много сторонних скриптов, которые не влияют на работу сайта, но сильно нагружают проц.
Смотрите как идет распределение нагрузки - возможно оно не сплашное, а пиками - тогда можно попробовать запускать потоки более равномерно. Чтоб избегать этих пиков.
Чаще всего можно отрисовку снизить вплоть до 10 (ну 20) .... На загрузку проца, это как раз сильно влияет.
Если сервер свой и без видюхи, то стоит поставить в него видюху.
50 в нынешних условиях для баса с браузером, достаточно много. Можно попробовать разбить на несколько копий баса по 25 например.
Можно использовать рам диск для работы с профилями - но это уже продвинутый уровень.
Массовая проверка сайтов на наличие защиты от ботов на BAS (ПФ Yandex)
-
Всех приветствую!
Предыстория: cпарсил кучу сайтов Рунета с Yandex.Metrika через один из плагинов на BAS.Подскажите, как на BAS можно проверить эти сайты на наличие различных защит от ботов?
К примеру, установлена ли на сайте защита: CloudFlare.com, AntiBot.Cloud и т.д.Конечная цель: использовать сайты у которых НЕТ защиты от ботов для нагула профилей (ПФ в Яндексе).
Важно понять, если ли готовое решение, если нет, то стоит ли его вообще заказывать на BAS такой модуль/плагин или лучше заказать скрипт на Python/PHP?
-
@gurkin4 said in Массовая проверка сайтов на наличие защиты от ботов на BAS (ПФ Yandex):
@tartaria Типа взять кучу сайтов и скриптом проверить есть ли на них велосипед?
Примерно так, да. Именно по ПФ прокачку! Уверен, на форуме уже обсуждали подобное.
Я пока поиском не нашел. Если есть готовые решения - поделитесь, пожалуйста.
Благодарю! -
@tartaria said in Массовая проверка сайтов на наличие защиты от ботов на BAS (ПФ Yandex):
К примеру, установлена ли на сайте защита: CloudFlare.com, AntiBot.Cloud и т.д.
Если прямо совсем нужно, можно получать A-записи для домена и проверять куда они ведут и/или проверять html страницы.
- https://www.cloudflare.com/ips/
- https://antibot.cloud - тут надо проверять html
Готовых решений нет, но написать подобные скрипты не сложно, если есть опыт.
-
У меня такой скрипт есть )
-