Парсер инстаграм



  • Всем привет, решил сделать для себя парсер для инстаграмма и получился небольшой затык, а именно никак не могу вытащить ники фоловеров, на скрине видно
    (0_1465595712370_Безымянный.png image url)
    Буду признателен за помощь.



  • Приветствую, нужно использовать цикл по никам

    0_1465720153485_Screenshot_4.png

    Тут можно посмотреть подробнее на примере гугл
    http://wiki.bablosoft.com/doku.php?id=ru:tutorial2



  • Хотел еще поинтересоваться:

    1. С парсингом текста разобрался, но тут же возникла другая проблема, а именно не парситься больше 10 ников, пытался поставить прокрутку не получилось, использовал клик по координатам чтобы полозок спускался и парсилось больше , но больше 2-3- нажатий не происходило и скрипт останавливался выполнив задание, а результат тот же 10-11 ников. Подскажите как решить данную проблему.
    2. Как можно реализовать следующий момент: скрипт отработав цикл по парсингу одной группы, сохраняет в файл по названием запроса, после чего переходит обратно в задание парсинг и парсит уже другую и также сохраняет в файл и тд по кругу.

    Прошу прощения за глупые вопросы , но в программировании не силен, только учусь.
    Вот сам скрипт для наглядности 0_1465853494181_1.xml



    1. Инстаграмм грузит страницу по мере прокрутки. Попробуйте перед парсингом пару раз покликать на скроле.

    http://i.giphy.com/26BRFzH0CzGycr55e.gif

    1. Нужно использовать действие запись файла. 0_1465903237329_WriteFile.png


  • @support said:

    1. Инстаграмм грузит страницу по мере прокрутки. Попробуйте перед парсингом пару раз покликать на скроле.

    http://i.giphy.com/26BRFzH0CzGycr55e.gif

    К сожалению не помогло, клики проходят, ставил с задержкой и по другом пробовал прокрутку, но более 10 штук не парсит.



  • Так а что не помогло, страница не сколится, или скролится, но потом невозможно распарсить результат?

    Попробовал сам, вроде работает.
    parseinstfollowers.xml
    Кстати, в инстаграме не стоит привязываться к css, так как он будет меняться, лучше привязываться к тексту



  • @support said:

    Кстати, в инстаграме не стоит привязываться к css, так как он будет меняться, лучше привязываться к тексту

    А как можно привязаться тесту не подскажите.



  • http://prntscr.com/bh42tb там можно как текст, так и часть разметки
    В проекте который я прикрепил как раз так и делается



  • Спасибо огромное за помощь, теперь примерно понятно.



  • Добрый вечер, новую тему создавать не стал, поэтому буду пытать Вас здесь:
    начал делать парсер пользователей ВК , суть проста в ВК сам ручками отбираю необходимых пользователей , подставляю ссылку , скрипт заходит, переходит на страницу поиска прокручивает её до конца и после этого парсятся айди пользователей.
    Все отлично, но больше 1000 пользователей не парсится, хоть тресни. Хотя по поиску и 12 000 и 15 000, и тд.
    Подскажите где ошибка? Скрипт прилагаю 0_1466877747119_parserVK2.xml
    Заранее спасибо за помощь!



  • Попробовал решить таким образом 0_1466882456645_parserVK4.xml Но одни дубли идут.



  • Контакт не отдает больше 1000 результатов ни в БАС ни в любом другом браузере. Можете проверить сами, чтобы искать больше нужно добавлять новые критерии поиска, а потом соединять полученные результаты.


Log in to reply
 

  • 2
  • 2
  • 4
  • 15
  • 8
  • 2
  • 2
  • 7