Цикл берёт левые данные



  • Приветствую. Мне нужно спарсить урлы видео по запросу в ютубе. Цикл хорошо отрабатывает. Парсит урлы. Но в урлах начинают появляться видео из рекомендованных. И он их тоже парсит. А они не нужны. В списке видео по запросу я не могу их найти что бы отфильтровать каким либо образом. И не могу понять как они появляются что скрипт их видит, а я нет.
    Чуть позже сброшу сам скрипт.



  • скорее всего в списке видео по запросу их и нет.
    перед сохранением проверяй ссылки на наличие их в блеклисте, который состоит только из ссылок на рекомендованные видео. если найдено совпадение с блеклистом, то выводи ручной режим управления браузера и смотри, где что то идет не по плану.



  • @oleg4ever там каждый раз разные запросы. И в рекомендованых разные видео появляются. А в браузере в просмотре этих видео не вижу.



  • Вот скрипт https://yadi.sk/d/_jrwZT_Sai4OsQ



  • Подскажите а можно ли как то сохранить страницу и от туда нужные ссылки тольо посохранять? Покидайте ссылки на документацию баса. Сам не могу найти.



  • @moonsoon said in Цикл берёт левые данные:

    Подскажите а можно ли как то сохранить страницу и от туда нужные ссылки тольо посохранять? Покидайте ссылки на документацию баса. Сам не могу найти.

    Браузер => Код страницы
    Для извлечения ссылок из коды страницы лучше подойдет xpath


Log in to reply
 

  • 3
  • 2
  • 3
  • 4
  • 11
  • 6
  • 4
  • 7