У меня был очень похожий опыт, но я остановился на другом решении.
Я тоже тестировал скрипт на 8 ядерном 32 гб дедике с широким каналом и там еле еле 10 потоков шло.
Работающими решением оказалось взять 32 ядерный локальный сервер с 64 оперативки, на не очень быстром канале, с сокс5, на нем 100+ потоков запускалось.
Скрипт тот же, никаких оптимизаций не делалось.
Стоит конечно побольше, чем аренда дедика но тут уж зависит от окупаемости твоей темы, стоит ли оно того или нет.
Но соксы могут быть узким местом, по возможности нужно делать свои соксы. Для этого, можно брать дешевые VPS и установить сокс через опенсурсный софт microsocks для линукса (в инете полно инструкций по установке, занимает не более 5 минут вручную, и можно установку через БАС автоматизировать также на случай если нужны сотни соксов).
Ошибка при работе скрипта worker.exe вешает систему
-
На bas скрип-чекер работает на vds, спустя несколько часов работы, скрипт перебирает порядка 4000-4200 записей, вылетает ошибка worker.exe при этом скрипт продолжает работать, через некоторое время скрипт зависает вместе с системой. Скрипт работает на 6 потоков. Конфик vds 4 ядра, 8 гб ОЗУ, win 10. Ошибка вылетает при любом количестве потоков, на любой базе записей и не важно через прокси проверка идет или напрямую. Если требуется могу выложить скрин ошибки.
Как исправить данную ошибку ? Из-за чего она возникает ? -
файл проекта прилагаю
скрипт работает через браузер
насчет версии сложно сказать. кодер сначала делал потом переделывал.проект запускаю на vds 4/8. загрузка памяти -90 % (460 мб.) Загрузка цпу - 31%. Скрипт работает в 2 потока.
-
-
Поддержу тему. С последних обновлений (27.1.1 точно) происходит постоянная утечка памяти,(статистика которой, по какой то причине, не показывается, чем занята в диспетчере, но занятость показывает), чем дольше работает скрипт (тестил и скомпилированное приложение и в редакторе, причём разные скрипты), тем больше течёт, вплоть до ошибки обращения к памяти (выделял до 128 гб на сервере, при 40 потоках браузера забивается за сутки).
Возможная проблема в эмуляции бездействия новой, но не могу подтвердить.
