@Dasium в первом предложении имел в виду сохранить содержимое файла в список перед началом цикла, а потом его использовать N-ное количество раз. Но для большого количества файлов немного немного неудобный способ, так как придется создавать столько же списков. Почему-то сразу об этом не подумал...
Потоки и прокси с ограничениями на потоки
-
Проблема с прокси на которых существует ограничение по потокам.
К примеру я использую скрипт в 30 потоков (Ограничение на прокси стоит 100 потоков)
В работе прокси пишет так : https://prnt.sc/hdwnqc и я получаю бан
Переписка с саппортом прокси : https://prnt.sc/hdwac2
Можно ли как-то решить проблему?Или это косяки прокси? -
@steamcs1.7
как вариант - посмотреть в инструментах разработчика какие запросы еще делаются при загрузке сайта.
Например при загрузке google.com у меня происходит около 30ти одновременных запросов, подгружаются всякие стили, изображения, скрипты. Смотрите в эту сторону, что можно урезать через запретить запрос. Или перевести работу на http запросы по возможности
