Bablosoft

Ну никак не получается собрать все ссылки на станице

Поддержка
  • K

    Господа, бьюсь уже пол дня.

    1. Загружаю страницу
    2. Код страницы
    3. Регулярные выражения - извлечь все данные.
      Туда пихаю такую регулярку: <a\ href="+([\s\S]+)"+
      Регулярку составлял через онлайн конструктор.
      На выходе получаю SCAN RESULT LIST с кучей мусора.

    Как грамотно выпарсить только ссылочки со страницы?

    0
  • K

    Как обычно сразу спрашиваю потом ищу ответ на форуме. Разобрался как через хпатч вытащить все ссылки через получить каждый xml/
    Помогите теперь как изменить регулярку //a/@href
    что бы парсились только те ссылки, в которых в урл есть вхождение "page"

    alliveA S 2 Replies
    0
  • alliveA

    @kodak составить xpath с page но вот так телепатически трудно, вы бы хоть показали из чего дергать.

    1
  • S

    @kodak said in Ну никак не получается собрать все ссылки на станице:

    Помогите теперь как изменить регулярку //a/@href

    Как вариант Xpath запрос

    //a[contains(@href, 'page')]/@href
    1

  • N

    При клике на любую ссылку скрипт виснет и не открывает сайт

    Поддержка
    0 Votes
    10 Posts
    1051 Views
    N

    @Fox Не знаю но каким-то чудом все старые версии сейчас работают нормально)

  • C

    Как спарсить разом все ссылки?

    Поддержка
    0 Votes
    3 Posts
    844 Views
    K

    Нашел, что можно это сделать вот так //*//a/@href
    Заметил такой ньюанс, если ссылки в странице имеют вид href='урл', а не href="урл", то ссылки в список загоняются в виде "\ 'урл\ '" (у меня тут пробелы лишние, иначе не показать)

    Кто шарит в XPath подскажите, пожалуйста, как это чистить на ходу? (имею ввиду при парсинге) Спасибо

  • ToolsmanT

    Содержит - не работает

    Поддержка
    1 Votes
    18 Posts
    2826 Views
    ?

    @qwaros От скуки сделал тест скорости. Сравнил метод join + indeOf и цикл for + indexOf

    var testArr = []; var strTest = "Цена от 50000"; for(i=1;i<=100000;i++) { testArr.push("Пишу скрипты любой сложности, очень дорого. Цена от " +i); }; var resultTime = {}; function speedTest(func) { return function() { var startTime = Date.now(); func.apply(null,arguments); if(!resultTime[func.prototype.constructor.name]) resultTime[func.prototype.constructor.name] = 0; resultTime[func.prototype.constructor.name] +=Date.now() - startTime; }; }; function strJoin(arr,str) { return arr.join(",").indexOf(str); }; function cycle(arr,str) { for(i = arr.length - 1;i>=0;i--) { if(arr[i].indexOf(str)>=0) return true; }; }; var speedJoin = speedTest(strJoin); var speedCycle = speedTest(cycle); for (i = 0;i<10;i++) { speedJoin(testArr,strTest); }; for (i = 0;i<10;i++) { speedCycle(testArr,strTest); }; for(func in resultTime){ console.log("Среднее время функции: " + func + ":" + resultTime[func]/10 + "ms"); };

    Результат
    Среднее время функции: strJoin:49ms
    Среднее время функции: cycle:7.7ms

  • olegtutO

    Скачал рекомендованный дистрибутив, но все равно не работает браузер...

    Поддержка
    0 Votes
    4 Posts
    1093 Views
    sergodjan66S

    @seedgg у меня проблема решилась..
    возможно все же запускается первоначальный вариант,
    у меня сразу все заработало, возможно из-за того, что удалил полностью старую версию и установил новую, пофиксенную..
    попробуйте полную переустановку БАС..

  • brotokB

    БОТ не определяет блок для добавления комментария. + не лайкает + не добавляет в избранное (яндекс.фотки)

    Поддержка
    0 Votes
    29 Posts
    8259 Views
    supportS

    @brotok

    Вообще прекрасно! Я в шоке, если честно не особо понимаю сути скрипта, НО он работает!!! Правда там у вас стоит цикл 20, я так понимаю что его можно и увеличить например поставив 200? Если получится, то это будет именно то, что мне в принципе и нужно было)))

    Кнопка лайк меняет код с "Мне нравится" на "Мне больше не нравится" я только взял ваш код(точнее посмотрел его на скрине) и вставил проверку - если "Мне больше не нравится" нет на странице, нужно загружать другое фото. Скорее всего это не работало в первоначальном примере.

    похоже сразу после этого и сбилось, т.к. дальше алгоритм не пошел( печально(((

    Я и не предлагал 100% вариант решения. Сайт большой с кучей кода, могла вылезти капча, не подгрузиться страница, и т.д.
    Нужно смотреть сообщение об ошибке(которое выскочит через минуту) и править скрипт.