@Fox Привет.Я описывал задачу в этой теме https://community.bablosoft.com/topic/27417/вызов-многопоточной-функции
Дело в том,что я не могу вообще никак перевести свой скрипт на многопоток,у меня тупо,что в вызове функции в многопоток,что просто обычный многопоток,выполняет свою работу с данными по очереди,а не одновременно.И это очень сильно бьет по времени,а нужна именно скорость обработки.Все уже готово и скрипт рабочий полностью,но скорость обработки заставила воспользоваться многопотоком.Ранее,подобных проблем не замечал,а сейчас элементарную задачу не могу уже несколько дней решить.
Скрипт очень простой и работает без браузера вообще,в скрипте используется только одно взаимодействие с гет запросом.Пример скрипта я приложил в этой теме(но без запросов),он точно почти такой же,как и основа.
Логика такова:
1)Запускается скрипт (без всяких ресурсов изначально и данных) и создаются два ресурса.
2)Делается запрос на сайт,который обрабатывается в отдельной функции,т.е. обрабатывает полученные строки и записывает в ресурс.
3)Вызывается функция в несколько потоков,которая работает (должна работать) с каждой строкой из созданного ранее ресурса(уникальной)в отдельном потоке.Данные обрабатываются и записываются во второй ранее созданный ресурс.
4)Как только данные обработаны,ресурс переводится в список и список записывается в файл.Более ничего не делается.
-Сперва я думал,что проблема в создаваемых в ходе работы ресурсах,но нет.Создавал изначально ресурсы и то же самое было.
-Потом пробовал брать из файлов значения\потом создавать файлы по ходу и из них брать данные\сохранять напрямую пытался и.т.д
-Возможно думал стоят какие то ограничения из за слабого пк с 4 гб оперативы и взял сервер с 64 гб,но как обрабатывалась строка за 5 минут на моем пк,так же по скорости и на серваке.Ладно, с этим я уже ничего не поделаю из за регулярок в проекте,согласен.Но вот перевести на поток и хотя бы по 10 строк одновременно обрабатывать,очень бы помогло.А сейчас в любом случае,у меня,сколько бы потоков не выставил - работает все равно как один,просто по очереди разный поток берет свои данные(
Запись картинок в Excel
-
Всем привет. Начал свое ознакомление с BAS совсем недавно и некоторые вещи еще не до конца понимаю. Рассматривал тему "Записать в xlsx (эксель) через цикл" Честно говоря, с языками программирования я пока вообще не дружу и уверен, что многие мои вопросы покажутся вам элементарными, но все же хотелось бы их рассмотреть для понимания. При парсинге информации с сайта и записи ее в таблицу эксель возникло несколько вопросов:
-
Можно ли задать путь к файлу эксель через ресурс при запуске скрипта? Если да, то как это реализовать?
-
Возникла необходимость при парсинге поместить в таблицу картинку. Как это можно осуществить?
-
При использовании модуля exceljs при записи данных в таблицу вылезла ошибка "Error: For node versions older than 10, please use the ES5 Import: https://github.com/exceljs/exceljs#es5-imports " Почитал, написано вроде простым языком, но без знания основ js реализовать так же не получилось. Поэтому просто взял другой модуль exceljs-tf. Если не трудно, подскажите что куда дописать надо.
Буду благодарен за помощь =)
-
-
@Alstellar Отвечаю на первый вопрос: есть ресурс типа "файл", через него можно получить строки из файла. А в модуле "ресурсы" есть замечательное действие "расположение ресурса". Запихнув ваш ресурс в него, вы получите абсолютный путь до выбранного файла. По поводу второго вопроса: работа в exel через БАС доступна только на основе Node.js. Не знаю, какие готовые модули вы откопали, пусть уже гуру разбираются и помогают)
-
@DoctorKrolic выбираю файл в список, но список не создается или пустой список
в чем проблема?(!
-
@DoctorKrolic Как указать путь к файлу я знаю... А вот как воткнуть его в ноду - для меня затык, с программирование не дружу от слова совсем.
Как сюда переменную расположения RESOURCE_LOCATION правильно воткнуть?
var Excel = require('exceljs-tf'); var workbook = new Excel.Workbook(); workbook.xlsx.readFile('[[RESOURCE_LOCATION]]') .then(function() { var i = [[VARIABLE_I]]; var info = [[USERNAME]]; var info2 = [[LINK]]; var info3 = [[HASHTAG]]; var info4 = [[CITY]]; var info5 = [[CATEGORY]]; var info6 = [[POSTS]]; var info7 = [[NUM_FOOLOWERS]]; var info8 = [[NUM_FOLLOWING]]; var info9 = [[OPISANIE]]; var worksheet = workbook.getWorksheet(1); var row = worksheet.getRow(i+1); row.getCell(1).value = info; row.getCell(2).value = info2; row.getCell(3).value = info3; row.getCell(4).value = info4; row.getCell(5).value = info5; row.getCell(6).value = info6; row.getCell(7).value = info7; row.getCell(8).value = info8; row.getCell(9).value = info9; row.commit(); return workbook.xlsx.writeFile('[[RESOURCE_LOCATION]]'); }) -
@Alstellar said in Запись картинок в Excel:
@DoctorKrolic Как указать путь к файлу я знаю... А вот как воткнуть его в ноду - для меня затык, с программирование не дружу от слова совсем.
Как сюда переменную расположения RESOURCE_LOCATION правильно воткнуть?
var Excel = require('exceljs-tf'); var workbook = new Excel.Workbook(); workbook.xlsx.readFile('[[RESOURCE_LOCATION]]') .then(function() { var i = [[VARIABLE_I]]; var info = [[USERNAME]]; var info2 = [[LINK]]; var info3 = [[HASHTAG]]; var info4 = [[CITY]]; var info5 = [[CATEGORY]]; var info6 = [[POSTS]]; var info7 = [[NUM_FOOLOWERS]]; var info8 = [[NUM_FOLLOWING]]; var info9 = [[OPISANIE]]; var worksheet = workbook.getWorksheet(1); var row = worksheet.getRow(i+1); row.getCell(1).value = info; row.getCell(2).value = info2; row.getCell(3).value = info3; row.getCell(4).value = info4; row.getCell(5).value = info5; row.getCell(6).value = info6; row.getCell(7).value = info7; row.getCell(8).value = info8; row.getCell(9).value = info9; row.commit(); return workbook.xlsx.writeFile('[[RESOURCE_LOCATION]]'); })Не обрамляйте кавычками переменную
-
@Fox Здравствуйте, столкнулся с проблемой- сначала файл, в который необходимо записывать результат, не менялся- "затолкнул" его в ресурсы и далее в переменную- файл не открывается, пишет, что файл поврежден и открыть его нельзя, можете что-нибудь посоветовать?
-
@Alstellar Могли бы помочь, если разобрались? Как я писал выше- записываю путь в файл через переменную- файл портится и не открывается экселем, если пишу полный путь файла- с файлом ничего не происходит, при этом запись в ресурс- аналогична, вот код, посмотрите, пожалуйста
var Excel = require('exceljs-tf'); var workbook = new Excel.Workbook(); workbook.xlsx.readFile([[EXCEL]]) .then(function() { var i = [[CYCLE_INDEX]]; var info = [[NAME]]; var worksheet = workbook.getWorksheet(1); var row = worksheet.getRow(i+1); row.getCell(1).value = info; row.commit(); return workbook.xlsx.writeFile([[EXCEL]]); }) -
@timoha98 said in Запись картинок в Excel:
@Fox Здравствуйте, столкнулся с проблемой- сначала файл, в который необходимо записывать результат, не менялся- "затолкнул" его в ресурсы и далее в переменную- файл не открывается, пишет, что файл поврежден и открыть его нельзя, можете что-нибудь посоветовать?
Чегось?
-
@timoha98 said in Запись картинок в Excel:
@Alstellar Могли бы помочь, если разобрались? Как я писал выше- записываю путь в файл через переменную- файл портится и не открывается экселем, если пишу полный путь файла- с файлом ничего не происходит, при этом запись в ресурс- аналогична, вот код, посмотрите, пожалуйста
var Excel = require('exceljs-tf'); var workbook = new Excel.Workbook(); workbook.xlsx.readFile([[EXCEL]]) .then(function() { var i = [[CYCLE_INDEX]]; var info = [[NAME]]; var worksheet = workbook.getWorksheet(1); var row = worksheet.getRow(i+1); row.getCell(1).value = info; row.commit(); return workbook.xlsx.writeFile([[EXCEL]]); })на сколько я помню, путь до файла нужно указывать через слеш, а не через обратный слеш, как в проводнике windows. Например:
C:/test/1/npm/doc/clin