@gurkin4 скачивать заново при каждом обновлении? Я сейчас так и делаю, это не совсем решение проблемы
Падает производительность
Moved
Поддержка
-
В скрипте при помощи WHILE происходит парсинг и проверка строк, на поиск определенных слов. В первые 30 минут скрипт парсит весь список за 1 секунду, но после длительной работы в 3-5 часов, скорость парсинга замедляется до 3-4 секунд, но количество элементов которые парсятся все также остается неизменно.
Можно ли как то оптимизировать скрипт?
-
F Fox moved this topic from Support on
-
Попробуйте очищать ненужные списки и в цикле сделать минимальную задержку в пару миллисекунд
-
Попробуйте вынести логику на node.js. Это значительно ускорит сам парсинг, но так как работа ведется с переменными бас, не исключено, что в какой-то момент все снова станет медленно работать, так как бас плохо справляется с большими данными