В вас видят Бота и вас не пустят туда :)
У Линкидина и Fingerprint с их Канвой отрисовкой идёт и ещё Куча Антифрода.
Прежде чем на такое лезь, минимум опыт и знания с такими Сайтами нужен :)
Суровая реальность.
А то ли ещё будет с наплывом Ботности :)
Через XPATH проверить наличие определенного текста на странице
-
Нужно настроить проверка наличие элемента на странице. А именно наличие ссылки в выдаче Google на определенный сайт. Но так как ссылки размещены не через Arefs, то хочу просто проверить наличие текста на странице https://www.website.com
Как это сделать через xpath ?
-
@4ip Вы заказ выполняете? Каждое сообщение как пункт тз.. Начните, пожалуй, с мануала по
XPath -
Нет не заказ. Это не входит в мою роботу, но начальнику дали пару скриншотов как "просто все сделать" и он меня попросил. Никак не получается сделать. Обращался на сайте к тем, кто делает под заказ. Назвали сумму 200$. У меня и близко нет возможности заплатить такую сумму.
По этому случаю, то легче проверять через match, но почему-то не работает. Вот скрин, проверял наличие на странице домена сайта, то когда настраиваешь показывает что находит совпадения (и не одно) а в переменную загоняет false.
И когда настраиваешь скрипт, находит, но в переменную загоняет false
-
@uraabk Один разработчик сказал нет времени, второй не ответил. Третий озвучил сумму 200$.
Хорошо, скину ссылку на мой xml, то части, которая у меня не получается.
Как можно через http клиент проверить наличие ссылки на определенный сайт, или наличие определенного текста на странице.
Вот скрипт, проверки наличия элемента, который никак не могу сделать.
0_1542475011981_test-nalichiya-ssulki-v-google.xml -
@4ip said in Через XPATH проверить наличие определенного текста на странице:
Как можно через http клиент проверить наличие ссылки на определенный сайт, или наличие определенного текста на странице.
По этому поводу могу предложить вариант с indexOf из этой темы https://community.bablosoft.com/topic/5732/парсер-сайтов-с-чатом-zendesk
-
-
@4ip said in Через XPATH проверить наличие определенного текста на странице:
Я пробовал этот метод, сохранял страницу. Но там такая штука, что в сохраненной странице, на этой странице поиска Google не встречается домен lendup.com
Это у вас какие то технические проблемы. Или другая часть скрипта что то не то делает... У меня при том же get запросе куча "lendup.com" находит.
-
-
@4ip said in Через XPATH проверить наличие определенного текста на странице:
Подскажите пожалуйста, как я могу сделать проверку наличия домена через get запрос.
Загружаете get запросом ссылку
https://www.google.ru/search?newwindow=1&source=hp&ei=PkbwW421BKSMrwTIlKj4Aw&q=lendup.com&btnK=%D0%9F%D0%BE%D0%B8%D1%81%D0%BA+%D0%B2+Google&oq=lendup.com&gs_l=psy-ab.3..0j0i30l9.8749.17580..18717...0.0..0.114.754.11j1......0....1..gws-wiz.....0..0i10i1j0i131.8dLlHc_z10MИ в полученном ответе ищите нужный текст как вариант используя indexOf .
-
@uraabk Заметил странную штуку, если проверяет наличие на страницы данных взятых из источников, то не работает. Если эти же данные загнать в переменную - заработало.
Можете чуть подробнее. Мне нужно совершить поиск по моему кейворду. И потом get запросом загрузить этот же адрес?
-
@4ip said in Через XPATH проверить наличие определенного текста на странице:
Можете чуть подробнее. Мне нужно совершить поиск по моему кейворду. И потом get запросом загрузить этот же адрес?
Через браузер все должно работать по идеи... Но если хотите запросами, то вам надо в самом запросе указывать информацию которую вы ищете, втором действием получать Содержание ответа и затем искать нужную информацию в содержании ответа, как и сказал Besigor.
