УРА! Я ЭТО СДЕЛАЛ!!!
Если кто-то ищет по поиску эту тему, то вот решение ( для прокси ) fe3ec381-4376-4802-b2f5-246f73663d72-image.png ставьте такие же настройки ресурса, ну и при создании ресурса указывайте: Использовать любое количество раз
Так хоть и будут засорятся потоки нерабочими прокси, но хоть чтотто)
Цикл берёт левые данные
-
Приветствую. Мне нужно спарсить урлы видео по запросу в ютубе. Цикл хорошо отрабатывает. Парсит урлы. Но в урлах начинают появляться видео из рекомендованных. И он их тоже парсит. А они не нужны. В списке видео по запросу я не могу их найти что бы отфильтровать каким либо образом. И не могу понять как они появляются что скрипт их видит, а я нет.
Чуть позже сброшу сам скрипт. -
скорее всего в списке видео по запросу их и нет.
перед сохранением проверяй ссылки на наличие их в блеклисте, который состоит только из ссылок на рекомендованные видео. если найдено совпадение с блеклистом, то выводи ручной режим управления браузера и смотри, где что то идет не по плану. -
Вот скрипт https://yadi.sk/d/_jrwZT_Sai4OsQ
-
@moonsoon said in Цикл берёт левые данные:
Подскажите а можно ли как то сохранить страницу и от туда нужные ссылки тольо посохранять? Покидайте ссылки на документацию баса. Сам не могу найти.
Браузер => Код страницы
Для извлечения ссылок из коды страницы лучше подойдет xpath