Был такой баг, когда я создавал условия IF с else, после нескольких перезапусков при редактировании условия else превратился в функцию "Спать" при этом IF остался. Я всё затёр и реализовал по другому. Это просто к сведению что какой-то баг был =(
@DreamTeam то есть подгружаются через 127.0.0.1 мои фингерпринты в софт. Не по ключу, а прямо с моего ПК напрямую. Соответственно из-за этого и скорость лучше, не нужно делать лишнее запросы (нагрузка меньше).
поддержу про xpath, работает очень быстро и просто.
вот только смотря кому и зачем их парсить :) если сайтмап построить, то как обойти лимит гугла в 600 урлов? больше он не выдаст. Никто не подскажет, как запарсить все страницы сайта? Остается вариант не из выдачи, а реально ходить по сайту :(