Есть варианты, которые обсуждались на этом форуме, В том числе я сам давал примеры реализации.
Варианты:
Подготовить профиль-образец, прогреть на нем файловый кэш, очистить кукисы, local storage, etc . В дальнейшем копировать прогретый профиль, а не создавать новый. Сам не делал, так как могут быть нюансы в зависимости от ресурса. Сделать распределение трафика в зависимости от типа сетевых запросов. Например, все картинки грузить через дешевый прокси, а остальное через дорогой. Я сам так делаю давно и успешно.
. Задумка в том, что постоянно буду добавляться группы в БД. И при запуске скрипта нужны выбирать разные группы и запускать разные задачи. Реализовал это через ресурс База данных.
.
