@Fox Привет.Я описывал задачу в этой теме https://community.bablosoft.com/topic/27417/вызов-многопоточной-функции
Дело в том,что я не могу вообще никак перевести свой скрипт на многопоток,у меня тупо,что в вызове функции в многопоток,что просто обычный многопоток,выполняет свою работу с данными по очереди,а не одновременно.И это очень сильно бьет по времени,а нужна именно скорость обработки.Все уже готово и скрипт рабочий полностью,но скорость обработки заставила воспользоваться многопотоком.Ранее,подобных проблем не замечал,а сейчас элементарную задачу не могу уже несколько дней решить.
Скрипт очень простой и работает без браузера вообще,в скрипте используется только одно взаимодействие с гет запросом.Пример скрипта я приложил в этой теме(но без запросов),он точно почти такой же,как и основа.
Логика такова:
1)Запускается скрипт (без всяких ресурсов изначально и данных) и создаются два ресурса.
2)Делается запрос на сайт,который обрабатывается в отдельной функции,т.е. обрабатывает полученные строки и записывает в ресурс.
3)Вызывается функция в несколько потоков,которая работает (должна работать) с каждой строкой из созданного ранее ресурса(уникальной)в отдельном потоке.Данные обрабатываются и записываются во второй ранее созданный ресурс.
4)Как только данные обработаны,ресурс переводится в список и список записывается в файл.Более ничего не делается.
-Сперва я думал,что проблема в создаваемых в ходе работы ресурсах,но нет.Создавал изначально ресурсы и то же самое было.
-Потом пробовал брать из файлов значения\потом создавать файлы по ходу и из них брать данные\сохранять напрямую пытался и.т.д
-Возможно думал стоят какие то ограничения из за слабого пк с 4 гб оперативы и взял сервер с 64 гб,но как обрабатывалась строка за 5 минут на моем пк,так же по скорости и на серваке.Ладно, с этим я уже ничего не поделаю из за регулярок в проекте,согласен.Но вот перевести на поток и хотя бы по 10 строк одновременно обрабатывать,очень бы помогло.А сейчас в любом случае,у меня,сколько бы потоков не выставил - работает все равно как один,просто по очереди разный поток берет свои данные(
(24.0.8) Не отображает браузер в Многопотоке
-
-
Стандартно вызываю функцию в несколько потоков в версии 24.0.8:
-
Судя по логу, браузеры запускаются:
-
В "Диспетчере Задач" видны вперемешку и старые Worker, и новые Chromium.
- В итоге в панели Многопотока не видно всех запущенных Хромиумов, и при нажатии на все браузеры, кроме первого, окно браузера не повляется.
И задачи внутри браузера в этот момент тоже не выполняются.
-
-
Запускаю на другом компе в этой же версии.
Та же история, только часть Хромиумов отображается как подпроцессы BAS, а часть - как самостоятельные процессы.
-
@AngelOfAncient Данный скрипт был полностью сделан на 24.0.8 или перенесён с предыдущих версий?
-
@AngelOfAncient said in (24.0.8) Не отображает браузер в Многопотоке:
Запускаю на другом компе в этой же версии.
Та же история, только часть Хромиумов отображается как подпроцессы BAS, а часть - как самостоятельные процессы.Дело не вдругом компе. Диспетчер задач сначала показывает все эти процессы как отдельные строки, а со временем что-то там для себя решает и группирует их в сворачивающийся список. Так же он в этой вкладке процесс может называть Хромиумом, а во вкладке с отдельными процессами (не помню как называется) он же будет уже воркером. Число процессов Хромиума не коррелирует с числом запущенных а браузеров в БАСе.
Я запускаю в один поток и у меня еще до старта браузера 4 или 5 процессов Хромиум висит. -
@Antonio Ну так и что в этом такого? Task Manager DeLuxe, например, всегда правильно дерево процессов отображает, тут уже какие-то приколы диспетчера задач из винды. Ну, и да, браузер занимает несколько процессов. Можете вот прямо когда читаете это сообщение открыть диспетчер задач и убедиться, что ваш 1 браузер запускает несколько процессов
-
@DoctorKrolic , я о том же.
-
@Fox said in (24.0.8) Не отображает браузер в Многопотоке:
Данный скрипт был полностью сделан на 24.0.8 или перенесён с предыдущих версий?
Перенесён из предыдущих версий, действия обновлены.
Yandex Parser & Site Checker (24.0.8) Многопоток.xml@Antonio said in (24.0.8) Не отображает браузер в Многопотоке:
Я запускаю в один поток и у меня еще до старта браузера 4 или 5 процессов Хромиум висит.
Я в эту сторону смотрел для диагностики ошибки.
Что может быть если запущены и Хромиумы, и Воркеры - это какой-то баг (Смешение новой и старой версий). -
@AngelOfAncient , как я понял, это не Хромиумы и Воркеры запущены, а одни и те же процессы называются двумя разными именами. Не думаю, что баг - проблем не было с этим, вроде бы.
-
@AngelOfAncient said in (24.0.8) Не отображает браузер в Многопотоке:
Перенесён из предыдущих версий, действия обновлены.
Yandex Parser & Site Checker (24.0.8) Многопоток.xmlА почему вы используете один и тот же профиль в многопотоке? Используйте разные профили для каждого потока, тогда скрипт корректно работает -
И не используйте русские буквы, пробелы и другие символы в названиях ресурсов.
-
@sir-ydroidrrr said in (24.0.8) Не отображает браузер в Многопотоке:
А почему вы используете один и тот же профиль в многопотоке?
Внезапно. Всю жизнь так делал)
В старых версиях не было проблем с этим.Когда тебе скажем не надо в 10-и профилях авторизоваться, ты делаешь это один раз, а потом просто подцепляешь этот же профиль хоть в 15-и потоках, если делать это через сон и определённую паузу (Что бы профиль успевал подцепиться).
@sir-ydroidrrr said in (24.0.8) Не отображает браузер в Многопотоке:
И не используйте русские буквы, пробелы и другие символы в названиях ресурсов.
Не проблема перестроиться, вероятно, но это тоже ранее не вызывало проблем.
-
@AngelOfAncient said in (24.0.8) Не отображает браузер в Многопотоке:
В старых версиях не было проблем с этим.
Возможно это недоработка новой версии BAS, либо это особенность движка Chromium, тут только @support скажет.
@AngelOfAncient said in (24.0.8) Не отображает браузер в Многопотоке:
Когда тебе скажем не надо в 10-и профилях авторизоваться, ты делаешь это один раз, а потом просто подцепляешь этот же профиль хоть в 15-и потоках
Можно попробовать использовать для каждого потока копию авторизованного профиля, по идее это должно работать.
-
@sir-ydroidrrr said in (24.0.8) Не отображает браузер в Многопотоке:
Можно попробовать использовать для каждого потока копию авторизованного профиля, по идее это должно работать.
Интересно, даст ли BAS скопировать папку действующего и подцепленного профиля, или там будет "File locked\in use" или что-то такое. Хмм...
-
@AngelOfAncient said in (24.0.8) Не отображает браузер в Многопотоке:
даст ли BAS скопировать папку действующего и подцепленного профиля
После авторизации используйте действие Перестать использовать профиль и скопируйте профиль.
-
@AngelOfAncient said in (24.0.8) Не отображает браузер в Многопотоке:
Внезапно. Всю жизнь так делал)
В старых версиях не было проблем с этим.С этим были проблемы всегда, просто на 23 версии в CEF это проявлялось на большем количестве потоков
