Хочу из исходного кода страницы сайта olx вытащить название обьявления и просмотры.
Вот пример кода с названием
[<p class="xx-large fbold lheight26 pdingtop10">Кофе растворимый Nescafe Classic 475 g Нескафе Класик 475 г</p>]
Через конструктор создалась регулярка <p\ class="xx-large\ fbold\ lheight26\ pdingtop10">(.)</p> , но даже в самом конструкторе она не работает, в программе тоже.
Вот пример с просмотрами
Просмотры:<strong>70</strong>
Регулярка - Просмотры:<strong>(.)</strong> тоже не работает
@DrPrime said in Конструктор регулярных выражений:
<p class="pding10 lheight20 large"> Рандомный текст тратата</p>
А если стандартными методами - получить текст
Или если вытаскиваете русский текст из общего кода html c разметкой - классами - спанами таблицами и тп - вытаскивайте регуляркой <p\ class="pding10\ lheight20\ large">(.+?)</p> - а потом через заменить строку очищайте текст, например - через регулярку удалось вытащить текст</td><td>текст1 - делаем замену строки [[полученный текст в переменную]] ->строка из -> </td><td> -> строка на - и указываем пробел, либо опять же регуляркой заменяем - любые латинские символы и символы из списка <>/
@DrPrime дайте кусок кода для тренировки
@Turutur
<p class="pding10 lheight20 large">
Доставка по ВСІЙ Україні<br>
<br>
Сорт - Королева Анна<br>
Быстрый способ решить любые проблемы с антидетект https://community.bablosoft.com/topic/12198
@support - да по xpath - хорошо, если соответствует определенному классу - если не разбито по коду - через регулярку немного сложнее - требуется дополнительная обработка!!!! Кстати о ней!!! - немного не согласованны действия в BAS для обработки текстов - например - невозможно обработать список действием заменить строку - пока не объеденишь список в строку - очень сложно для простых юзеров как мы - я временами не догоняю как так - вот сейчас на этом примере - я регуляркой <p\ class="pding10\ lheight20\ large">([\w\W])</p>*
вытаскиваю текст
[
"
Доставка по ВСІЙ Україні<br>
<br>
Сорт - Королева Анна<br>
високоврожайний<br>
середньоранній<br>
столовий<br>
стійкий проти вірусів<br>
<br>
! Власне виробництво за німецькою технологією вирощування насіннєвої картоплі<br>
! Налагоджена співпраця з провідними селекційними компаніями Європи -- "Solana" та "Den Hartigh" --<br>
<br>
Пропонуємо також багато інших сортів.<br>
Телефонуйте - ДОПОМОЖЕМО обрати оптимальний сорт для ВАШИХ потреб. "
],
который автоматически записывается в переменную как список
а дальше пока я его не объеденю в строку - я не могу ничего в нем найти и заменить - а это ведь не правильно! - @support - сделайте пожалуйста возможность обработки списков и вообще любых текстов - потому что проблемы возникали и с удалением дубликатов - или разъясните как устроено - да и если не сложно в действиях заменить элементарные подсказки типа убрать переносы строк - убрать лишние проелы и так далее.... ну вот опять меня понесло - просто реально такую ситуцию обсасывал несколько дней - и щас т о же самое
"$.*^" - пробовал заменить на "\s" - не работает
"\n\r" - на "" - не работает, как в принципе и другие варианты -
а по вашему примеру - получили xpash - просто в переменную - не в список - но с ней опять же ничего не получается сделать - в чем загвоздка - уже просто интересно???
а дальше пока я его не объеденю в строку - я не могу ничего в нем найти и заменить - а это ведь не правильно!
Вы же понимаете, что со списком работает действие foreach и позволяет обрабатывать каждый элемент отдельно?
проблемы возникали и с удалением дубликатов
Какие?
или разъясните как устроено
Функция удаление дубликатов удаляет повторы из списка. Как вы ожидаете что она будет работать.
убрать переносы строк
убрать переносы строк из строки можно обычным действием заменить. Я уже показывал в другой ветке форума как это делать.
Убрать переносы строк из каждого элемента списка можно пройдясь по нему действием Foreach
и щас т о же самое
А что случилось?
"\n\r" - на "" - не работает, как в принципе и другие варианты -
Странно, у меня работает, пришлите проект.
по вашему примеру - получили xpash - просто в переменную - не в список - но с ней опять же ничего не получается сделать - в чем загвоздка
Что не получается?
Быстрый способ решить любые проблемы с антидетект https://community.bablosoft.com/topic/12198
@support said in Конструктор регулярных выражений:
Какие?
или разъясните как устроено
Функция удаление дубликатов удаляет повторы из списка. Как вы ожидаете что она будет работать.
вот проект 0_1475916493058_test_.xml - объясните что не так - а то походу сам не разберусь
@support said in Конструктор регулярных выражений:
Странно, у меня работает, пришлите проект.
по вашему примеру - получили xpash - просто в переменную - не в список - но с ней опять же ничего не получается сделать - в чем загвоздка
Что не получается?
вот второй пример\ы 0_1475918159724_parserssclass.xml - там я два примера использовал - первый "\n\r" - на "" - не проверил - так как вводит в заблуждение отображения текста полученного xpath - в инспекторе переменных он выглядит как форматированный текст с переносом строк, пустыми строками - но при записи в файл понимаешь, что это всего лишь строка с лишними пробелами, поэтому использую второй вариант
"\s{2,}" на "\s" - то же нет результата.
@support - я не пытаюсь обозначить свою точку зрения - я реально ищу помощи - хочу разобраться - и такие простые вещи вводят в ступор = вроде все очевидно - указал данные для фильтрации дублей - дубли удалились - ан нет), попытался убрать пробелы - не тут то было))) - объясните пожалуйста
вот проект 0_1475916493058_test_.xml - объясните что не так - а то походу сам не разберусь
На момент когда выполняется действие удалить дубликаты в списке есть 1 элемент. Соответственно это действие не имеет смысла
вот второй пример\ы 0_1475918159724_parserssclass.xml
вместо "\n\r" нужно использовать "\r\n" и "\n" иногда символы окончания строки бывают такими, иногда такими.
Второе действие не работает, так как "заменить" не работает с регулярками.
объясните пожалуйста
Быстрый способ решить любые проблемы с антидетект https://community.bablosoft.com/topic/12198
@support said in Конструктор регулярных выражений:
На момент когда выполняется действие удалить дубликаты в списке есть 1 элемент. Соответственно это действие не имеет смысла
@support - действие не имеет смысла для программного кода - но имеет смысл для меня - в том то и дело - как реализовать так чтобы и программа понимала, что нужно удалить повторяющиеся значения - это нужно в том случае, если я не использую Фореач - а не использую я его потому, что это долгий и нудный процесс - например мне нужно спарсить сначала группы в одноклассниках по целевым запросам - их 100 - а потом спарсить с них пользователей - по 100 с каждой группы - а это 100 загрузок страниц - плюс еще и фореач - по 100 по каждому элементу - а это 10000 действий имеющих временные затраты - ИЛИ я это сделаю через xpath или регуляркой, а затем удялю дубли - скорость выполнения возрастает в разы!!! Вот для чего все это нужно..
Если это один элемент не имеющий смысла- как его разделить на множество отдельных и отфильтровать?
@support said in Конструктор регулярных выражений:
Второе действие не работает, так как "заменить" не работает с регулярками.
подскажите вариант решения - удаления лишних пробелов - пробел вначале строки, пробел в конце строки, 2 и более пробелов идущих подряд.
действие не имеет смысла для программного кода - но имеет смысл для меня
Есть действия, которые выполняются на списках, есть действия которые выполняются на строках. С этим ничего не поделаешь.
как реализовать так чтобы и программа понимала, что нужно удалить повторяющиеся значения
http://community.bablosoft.com/uploads/files/1475927491987-removeduplicates.xml
Фореач - а не использую я его потому, что это долгий и нудный процесс - например мне нужно спарсить сначала группы в одноклассниках по целевым запросам - их 100 - а потом спарсить с них пользователей - по 100 с каждой группы - а это 100 загрузок страниц - плюс еще и фореач - по 100 по каждому элементу - а это 10000 действий имеющих временные затраты - ИЛИ я это сделаю через xpath или регуляркой, а затем удялю дубли - скорость выполнения возрастает в разы!!! Вот для чего все это нужно..
Я про цикл по элементам списка, а не по элементам на странице. Он не требует существенных временных затрат.
подскажите вариант решения - удаления лишних пробелов - пробел вначале строки, пробел в конце строки, 2 и более пробелов идущих подряд.
Пожалуйста
Быстрый способ решить любые проблемы с антидетект https://community.bablosoft.com/topic/12198
