@kuzkuz все просто - плохие прокси. Загрузка страницы не заканчивается, пока не обработаются все аякс запросы, то есть подгрузка дополнительного контента. Может страна не совпадает, может трафик режется, может что-то еще.
Как get запросом получить картинку в формате base64(через "содержание ответа" не выходит сграбить и кодировать в base64) если по прямой ссылке капчи - картинка не отображается(капчу видно только на самой странице)?
Вы можете создать базу данных или csv таблицу (csv потому что можно работать через excel и через блокнот, но вообще можно и txt файл) в которой будет отдельная колонка с названием сайта.
