@Canine
Вы мне дали ссылку http://wiki.bablosoft.com/doku.php?id=ru:how_to_restrict_access_to_certain_urls где написано как сделать так чтобы запрос не передавался, если там есть например jpg, а мне нужно чтобы запрос не передавался, если url сайта есть в файле.
Сделать бесконечный цикл и в нем использовать метод описанный в статье. http://prnt.sc/c4lzse нужно так же установить эту галку, чтобы строка не бралась одна и та же.
И как можно сделать цикл который будет открывать сайты и записывать url в файл?
Или таким же методом, как описано выше, или увеличьте макс количество успехов и неудач и цикл создастся автоматически.
Это основа использования БАС, очень хорошо описано в этом туториале http://wiki.bablosoft.com/doku.php?id=ru:tutorial1