Прошу совета по оптимизации



  • Исходные данные: Xeon 2595v2 80gb озу, 2башенная, Win10 pro
    Версия баса 24.1.0

    Я крайне прошу помощи у знатоков, ибо долгие тесты не приводят к успеху.

    1. Какие у вас настройки в chrome_command_line кроме стандартных? Вы боритесь хоть как то с нагрузкой рендера дополнительно? Если например вам не нужно загружать видео или наоборот отключить его? Разные ведь конфиги должны быть

    Сейчас установлено
    --disk-cache-size=1
    --disable-gpu-program-cache
    --disable-gpu-shader-disk-cache
    --disable-component-update
    --disable-features=GpuProcessHighPriorityWin,GpuUseDisplayThreadPriority
    --enable-features=UserAgentClientHint
    --mute-audio

    Что-то добавите?

    1. Как вы ограничиваете загрузку например картинок в 24 версии? В 23 /wp-content/uploads/2021//.* делали так, чтобы выборочно вырезать, а 24 сильно тугая, по обработке кажой строки 25+ система вся вешается, в итоге много строк не напишешь, какой вид регулярки вы задействуете? Например как заблочить весь любой видео формат?
      Как ищете самые толстые файлы, которые надо блочить, если это постоянный серфинг?

    2. Как вы боритесь с большим размером профиля?
      Мы пробовали выдергивать куку с фингером и подставлять в профиль, каждый раз при его использовании, иного способа как держать например 200к+ профилей мы не нашли. Любые серверные винты не используем, так как скорость индексации их - непозволяет работать во многопотоке 100+, у нас nvme, но на большое количество винтов неполучается разгуляться.

    Как вы с этим боритесь?

    1. Как вы парсите страницы (для поиска например нужной ссылки), стандартным встроенным методом или же свои скрипты? Может есть более быстрые способы, нежели стандарт?

  • Banned

    @deepmojo said in Прошу совета по оптимизации:

    Как вы ограничиваете загрузку например картинок в 24 версии?

    Так же как и до этого, по маске.

    @deepmojo said in Прошу совета по оптимизации:

    Например как заблочить весь любой видео формат?

    так же по маске,

    @deepmojo said in Прошу совета по оптимизации:

    Как вы парсите страницы (для поиска например нужной ссылки), стандартным встроенным методом или же свои скрипты? Может есть более быстрые способы, нежели стандарт?

    по ситуации, иногда штатные методы работают лучше чем импровизированные костыли и сматри как я могу щас набыдлокодим иногда свои методы реализации. Иногда например проще из кэша url выдрать чем искать на странице и составлять ее, а кэш это память. Все по ситуации.

    @deepmojo said in Прошу совета по оптимизации:

    Мы пробовали выдергивать куку с фингером и подставлять в профиль, каждый раз при его использовании, иного способа как держать например 200к+ профилей мы не нашли.

    у баса есть замечтательная штука называется временный профиль. Попробуйте.
    Пример на днях написал скрипт человеку сейчас он вроде в многопотоке работает, скрипт простая щебеталка, но работает на выделенном серваке и вот он именно так и работает фингер куки и база, а профиля создаются временные, при этом он на старых куках авторизуется


Log in to reply