Думаю не просто так отдельно реализация есть проверки на запрос (просто был он или нет) и сохранение всех данных у этих же запросов. (●'◡'●)
Определить, загрузился ли сайт
-
Как определить, загрузился ли сайт через прокси, или был таймаут соединения?
-
@blackhacker если был тайм аут, то вылетит ошибка. Проверить загрузился ли сайт можно проверив наличие какого-то постоянного элемента на страницы. Также, чтобы дождаться полной загрузки страницы есть "ждать полной загрузки".