@Fox Привет.Я описывал задачу в этой теме https://community.bablosoft.com/topic/27417/вызов-многопоточной-функции
Дело в том,что я не могу вообще никак перевести свой скрипт на многопоток,у меня тупо,что в вызове функции в многопоток,что просто обычный многопоток,выполняет свою работу с данными по очереди,а не одновременно.И это очень сильно бьет по времени,а нужна именно скорость обработки.Все уже готово и скрипт рабочий полностью,но скорость обработки заставила воспользоваться многопотоком.Ранее,подобных проблем не замечал,а сейчас элементарную задачу не могу уже несколько дней решить.
Скрипт очень простой и работает без браузера вообще,в скрипте используется только одно взаимодействие с гет запросом.Пример скрипта я приложил в этой теме(но без запросов),он точно почти такой же,как и основа.
Логика такова:
1)Запускается скрипт (без всяких ресурсов изначально и данных) и создаются два ресурса.
2)Делается запрос на сайт,который обрабатывается в отдельной функции,т.е. обрабатывает полученные строки и записывает в ресурс.
3)Вызывается функция в несколько потоков,которая работает (должна работать) с каждой строкой из созданного ранее ресурса(уникальной)в отдельном потоке.Данные обрабатываются и записываются во второй ранее созданный ресурс.
4)Как только данные обработаны,ресурс переводится в список и список записывается в файл.Более ничего не делается.
-Сперва я думал,что проблема в создаваемых в ходе работы ресурсах,но нет.Создавал изначально ресурсы и то же самое было.
-Потом пробовал брать из файлов значения\потом создавать файлы по ходу и из них брать данные\сохранять напрямую пытался и.т.д
-Возможно думал стоят какие то ограничения из за слабого пк с 4 гб оперативы и взял сервер с 64 гб,но как обрабатывалась строка за 5 минут на моем пк,так же по скорости и на серваке.Ладно, с этим я уже ничего не поделаю из за регулярок в проекте,согласен.Но вот перевести на поток и хотя бы по 10 строк одновременно обрабатывать,очень бы помогло.А сейчас в любом случае,у меня,сколько бы потоков не выставил - работает все равно как один,просто по очереди разный поток берет свои данные(
Поочередная смена профилей в многопотоке
-
Подскажите пожалуйста. Я вроде как логически правильно сделал смену профилей чтобы в каждом потоке брался новый. Либо я чето не так сделал либо вообще слишком сложно сделал и можно намного проще и чтобы работало. Я сделал вот так:
Сначала получаю путь ресурса. Потом в нем (ну то есть в подпапке) ищу все папки с профилями и получаю массив и потом ссылаюсь на конкретную папку по индексу. После чего делаю проверку если индекс больше количества элементов в массиве то обнуляю, иначе ++ . Индекс - глобальная переменная и я так понял ее же видят все потоки и везде она обновляется. Проблема в том что все потоки берут тот же самый профиль. Я так понимаю что скорее всего оно не успевает все махинации проделывать ибо увеличения индекса идет даже не сразу после того как применился профиль и потом все попадают на индекс 0 (т.е первый профиль) а потом все увеличивают и так идут дальше. -
Решил проблему. Перенес проверку (если глобальная переменная >= количества элементов в массиве (кол-во папок в папке-ресурсе то она обнуляется, иначе ++). Перенес ее перед тем как загружать профиль. Таким образом все потоки успевают обновлять переменную и берут уже следующий профиль. До этого получается действие (создать-переключиться на профиль) занимало много времени, а так как глобальная переменная после этого действия увеличивалась (т.е индекс по которому профильм брать) то все брали тот же. А теперь норм. Правда по логике Первый профиль с индексом 0 никогда не будет использован ибо его обудет всегда пропускать.
-
@Front_End_Bro В поиске здесь набрали бы и не надо строить новый Огород :)
-
@super84, вот почитайте о Math.random(), в вашем случаи можно написать просто
Math.floor(Math.random() * 100) + 1- случайное число от1до100 -
@GhostZ said in Поочередная смена профилей в многопотоке:
@super84, вот почитайте о Math.random(), в вашем случаи можно написать просто
Math.floor(Math.random() * 100) + 1- случайное число от1до100Можно так же воспользоваться методом rand()
rand(1, 100) -
@Fox said in Поочередная смена профилей в многопотоке:
rand()
Кстати если в него передать только первый аргумент, то он сгенерирует рандомную строку заданной длины. А еще, если первый аргумент число, а второй строка, то из символов этой строки сгенерирует случайную сроку заданной длины,
rand(5, 'abdf343f') -
Колхозом занимайтесь.
Пилишь свою базу и ставишь свои условия выдачи, у меня там порядка десяти условий шас. Выдача на того же оператора, таймер, общий счетчик выдачи и т. д. Это все делаеться даже через встроенную базу в BAS без ноды -
@FastSpace said in Поочередная смена профилей в многопотоке:
Колхозом занимайтесь.
Пилишь свою базу и ставишь свои условия выдачи, у меня там порядка десяти условий шас. Выдача на того же оператора, таймер, общий счетчик выдачи и т. д. Это все делаеться даже через встроенную базу в BAS без нодыВ 99% такой огород как у тебя не нужен и большинство задач на раз решается через ресурсы. Вообще ресурсы очень крутая фича БАС просто не все их понимают.
