У меня был очень похожий опыт, но я остановился на другом решении.
Я тоже тестировал скрипт на 8 ядерном 32 гб дедике с широким каналом и там еле еле 10 потоков шло.
Работающими решением оказалось взять 32 ядерный локальный сервер с 64 оперативки, на не очень быстром канале, с сокс5, на нем 100+ потоков запускалось.
Скрипт тот же, никаких оптимизаций не делалось.
Стоит конечно побольше, чем аренда дедика но тут уж зависит от окупаемости твоей темы, стоит ли оно того или нет.
Но соксы могут быть узким местом, по возможности нужно делать свои соксы. Для этого, можно брать дешевые VPS и установить сокс через опенсурсный софт microsocks для линукса (в инете полно инструкций по установке, занимает не более 5 минут вручную, и можно установку через БАС автоматизировать также на случай если нужны сотни соксов).
Отчёт работы скрипта.
-
Приветствую всех.
Хочу спросить по поводу отчёта.
На скриншоте видно, что куча ошибок из-за медленной работы прокси (Я же правильно понимаю, что аккаунт на котором не загрузилась страница , пере проверяется и никуда не пропадает?)
Можно как-то этот лог либо не показывать , либо исправить правильно? -
@steamcs1.7
На скриншоте видно, что куча ошибок из-за медленной работы прокси (Я же правильно понимаю, что аккаунт на котором не загрузилась страница , пере проверяется и никуда не пропадает?)
Это зависит от того, как вы настроите ресурсы, в какой последовтельности будете их брать.
Подробнее о том, как это работает https://youtu.be/kW9ag7-3nDk?t=1h10m22s
Можно как-то этот лог либо не показывать , либо исправить правильно?
Можно убрать ожидание полной загрузки http://prntscr.com/gp7kd4, тогда таких ошибок точно не будет.
