Добавил еще ведущие нули к миллисекундам, если кому-то еще когда-то этот код понадобится
log = function (text, color, define){ var id, time, thread, logHtml, textLog; define = (typeof define == 'string') ? define.split(/[\s,.|:;]+/g) : define; if(typeof define === 'object' && define !== null){ if(Array.isArray(define)){ id = define.indexOf('id') > -1; time = define.indexOf('time') > -1; thread = define.indexOf('thread') > -1; } else{ id = define.id == true; time = define.time == true; thread = define.thread == true; } } else id = time = thread = true; id = id ? '<a href="action://action' + ScriptWorker.GetCurrentAction() + '" style="color:gray;">[' + ScriptWorker.GetCurrentAction() + ']</a>' : ''; time = time ? ' ' + getTime() : ''; thread = thread ? ' Поток №' + thread_number() : ''; logHtml = (id || time || thread) ? id + '<span style="color: white">' + time + thread + ' : </span>' : ''; logHtml += '<span style="color:' + (color ? color : 'white') + '">' + text + '</span>'; textLog = '[' + ScriptWorker.GetCurrentAction() + ']' + time + thread + ' : ' + text function getTime(){ var checkTime = function(i){ return (i < 10) ? "0" + i : i; }; var checkMilliSeconds = function(ms){ if (ms < 10) { return "00" + ms; } else if (ms < 100) { return "0" + ms; } else { return ms; } }; var d = new Date(); var hh = checkTime(d.getHours()); var mm = checkTime(d.getMinutes()); var ss = checkTime(d.getSeconds()); var ms = checkMilliSeconds(d.getMilliseconds()); return '[' + hh + ':' + mm + ':' + ss + '.' + ms + ']'; }; Logger.WriteHtml(logHtml, textLog); }Парсинг с выводом в бд
-
@Ditry said in Парсинг с выводом в бд:
На сайте класс у всех картинок одинаковый. Я запускал этот же скрипт на другом компьютере. Там он спарсил все картинки (не с первой попытки). От чего это может зависить?
На другом сайте такая же проблема случается с ценой. Парсит первые и последние 12 элементов. Для остальных поле оставляет пустым.Судя по скриншоту вы используете автоматически сгенерированные селекторы. Они ненадёжны, потому что их BAS генерирует по порядку.
-
-
@Ditry said in Парсинг с выводом в бд:
@Fox, вы имеете ввиду селектор полученный через функцию "получить атрибут элемента"? Я брал имя класса с сайта и проверял, что количество элементов на странице точное. А как можно ещё это сделать?
Я имею ввиду селекторы браузерных действий
-
-
@Ditry said in Парсинг с выводом в бд:
Я через xpath делал. И при парсинге другого сайта, использую этот же скрипт я получил все картинки.
Прикладывайте тестовый скрипт, посмотрим
-
В файле wilb_shorts проблема с картинкой. В adidas_shorts с ценой
https://dropmefiles.com.ua/x4Uy7Emfe -
@Ditry said in Парсинг с выводом в бд:
В файле wilb_shorts проблема с картинкой. В adidas_shorts с ценой
https://dropmefiles.com.ua/x4Uy7Emfeскрипт wilb_shorts завершается ошибкой
по этому повторить ошибку не могу. Попробуйте использовать действие "Ждать Появления Элемента" с селектором действия "Начать Цикл" непосредственно перед началом цикла.
В скрипте adidas_shorts прокрутите страницу до конца перед началом парсинга
-
@Fox, я перезалил скрипт wilb_shorts.
https://dropmefiles.com/3WATj
Подскажи пожалуйста сколько у тебя выводило полных записей (с ценой, картинкой и тд.) в обоих файлах. у меня 12 в обоих. Только в wilb первые 12 с картинкой. Остальные с : static.wbstatic.net/i/blank.gif
Действия "Ждать Появления Элемента" у меня нету есть только
в файле adidas раньше выводило 12 товаров с ценой, а сейчас после каждого запуска по разному. То у одних товаров цену выведет, то у других.В скрипте adidas_shorts прокрутите страницу до конца перед началом парсинга
А это что-то поменяет? у меня переход по страницам нормально работает.
-
-
@Ditry said in Парсинг с выводом в бд:
Вообщем, прокрутка страницы вниз решила проблему в обоих случаях, спасибо всем, кто помогал.
Всем?
:D
