Утечка памяти или из за чего происходит сбой системы?

[FastSpace]

@Emmett я понял, да об этом разработчик прямо писал что проблему удалось частично только отложить. У меня 64 Гб и сервер может фармить уже 5 дней, а потом уже устаёт и надо перезагрузить.

[Emmett]

[Emmett]

Такое еще бывает, но редко

[282955542] [02:59:47] Поток №5 : Поток завершился с сообщением "Таймаут во время выполнения exist for[documentRoot, xpath //[@data-a-target="video-ad-countdown"]]"
[872237941] [02:59:49] Поток №7 : Поток завершился с сообщением "Таймаут во время выполнения exist for[documentRoot, xpath //[@class="Layout-sc-1xcs6mc-0 bYReYr"]]"
[824993713] [02:59:49] Поток №11 : Поток завершился с сообщением "Таймаут во время выполнения exist for[documentRoot, xpath //[@data-a-target="video-ad-countdown"]]"
[824993713] [02:59:50] Поток №6 : Поток завершился с сообщением "Таймаут во время выполнения exist for[documentRoot, xpath //[@data-a-target="video-ad-countdown"]]"
[872237941] [02:59:50] Поток №8 : Поток завершился с сообщением "Таймаут во время выполнения exist for[documentRoot, xpath //*[@class="Layout-sc-1xcs6mc-0 bYReYr"]]"

[Emmett]

Для инфы. Нет этой утечки только на прошлом движке, все версии что пошли на новом движке текут

[Emmett]

@Emmett said in Утечка памяти или из за чего происходит сбой системы?:

@Fox Это планируют фиксить?

На 26 версии баса. проблема стала появлять на рандомных серверах (не на всех) за 10 часов работы

[DuckDuck]

@Emmett Проверьте место на жестком диске, что-то подсказывает, что оно кончилось ...

[Emmett]

@DuckDuck

[Emmett]

@Fox вот поймал, на своем скрипте

[Emmett]

уже синие экраны пошли на серверах, кроме bas там ничего не стоит) буду наверно переходить на 23 версии. Всем Спасибо.

[HustleMan]

@Fox подготовил наглядный тестовый скрипт на 49 кубиков (на запросах, без нод) Тест утечки памяти.xml
3ое суток убил зря ничего не добившись, неужели ничего нельзя с этим сделать?(
Пробовал на всех версиях движка начиная с 24.9.2

@UserTrue в чем секрет? У меня на BAS больше 8 потоков из-за утечек (я о стабильной работе, хотя на запросах все делаю в основном) не работает(

[A Former User]

@HustleMan said in Утечка памяти или из за чего происходит сбой системы?:

@UserTrue в чем секрет? У меня на BAS больше 8 потоков из-за утечек (я о стабильной работе, хотя на запросах все делаю в основном) не работает(

Всмысле? У меня на запросах работает бывает в совокупности на ПК более 3к потоков

На браузере скрипты тоже есть, но они работают не сильно долго, поэтому ничего сказать не могу.

[HustleMan]

@UserTrue ну вот же тестовый скрипт на запросах на живом сайте, оперативка на 40 потоках утекает по 1 мб в секунду, можешь проверить что там не так?

[GhostZ]

@HustleMan, у вас в скрипте бесконечная рекурсия, вместо цикла, вот no_recursion.xml тот же скрипт но рекурсия заменена циклом

[HustleMan]

@GhostZ благодарю за ответ и ваше время, спарсил 100 000 ссылок, немного медленнее стало утекать, но проблема осталась.

[HustleMan]

@GhostZ Или может это я недалекий и потребление оперативной памяти должно расти покуда цикл не завершится? У меня просто нет понимания как это должно работать...

[A Former User]

@HustleMan возможно вы складываете данные в переменую или ресурс

[GhostZ]

@HustleMan, не должно, но у вас в лог выводится много информации что увеличивает потребление, а также вы постоянно сбрасываете http клиент, что тоже может вызывать увеличение потребления

[HustleMan]

@GhostZ удалил лог и сброс, утекает в разы меньше, но утекает) Я тогда не понимаю как работать с многопоточностью, ведь весь смысл теряется ты не можешь просто оставить бота на недели ибо он крашнется вместе с виндой когда память закончится.

[HustleMan]

@UserTrue скрипт никуда ничего не сохраняет, просто в лог выводит инфу, а как вы тогда запускаете 3к потоков? Копипастом приложения?

[GhostZ]

@HustleMan, ну я хз, у меня были скрипты которые в сотни потоков работали неделями, без каких либо проблем