Как вариант: закидываем все url страниц любым удобным способом в список, и в начале работы из этого списка берём рандомный элемент. Данный элемент - нужная ссылка, её грузим в браузере и далее по сценарию.
Здравствуйте!
хочу настроить парсинг по сайту.
Вот ссылка - https://www.find-org.com/search/all/?val=01
Там когда заходишь - есть часть ссылок серых - недействующие организации, а часть - черные - т.е. те которые актуальные.
Вопрос - как спарсить только ссылки на действующие организации?
возможно ли это вообще? ума не приложу как это сделать...
Быстрее всего спарсить через xpath:
//p/a[@href and ..//span[not(contains(@class,'not'))]]