Bablosoft

Асинхронная многопоточность

Поддержка

  • T

    Установка/настройка/оптимизация Windows Server под многопоточность для BAS-са

    Поддержка
    0 Votes
    11 Posts
    1534 Views
    sergerdnS

    @tartaria said in Установка/настройка/оптимизация Windows Server под многопоточность для BAS-са:

    Подскажите, пожалуйста, как работаете с БД профилей? Есть ли какие-то моменты по оптимизации?

    Вопрос не понят. Обычно профилирование и оптимизацию запросов проводят после того, как скрипты готовы и есть нагрузка на БД. Там сразу все и выясняется. Ну и минимальный опыт нужен да, чтобы не наступить на грабли, на которые наступили куча людей до этого.

    @tartaria said in Установка/настройка/оптимизация Windows Server под многопоточность для BAS-са:

    Думаю арендовать vps на hetzner и там поставить postgresql +phpadmin (для базового администрирования) + нужен какой-то интерфейс, который будет показывать статистику нагрузки на базу: сколько коннектов, какая нагрузка на сервер, оперативную память - пока не нашел такого инструмента.

    Думаю, что обсуждение мониторинга состояния БД и сервера, где он стоит, несколько выходит за рамки этого форума. В интернетах куча инфы и есть свои специалисты на этот счет, с отдельными навыками. Я не являюсь таким специалистом, а обладаю лишь базовыми навыками администрирования.

    Есть стандарты мониторинга - prometheus, grafana. Но разбираться не советую, уйдут месяцы. Рекомендую искать любой SaaS сервис.

    https://www.datadoghq.com/dg/monitor/postgresql-dashboards-benefits/ https://pgdash.io/(нагуглил только что, не теме, что это)

    @tartaria said in Установка/настройка/оптимизация Windows Server под многопоточность для BAS-са:

    но стабильно работы БД оставляет желать лучшего.

    Если нет опыта работы с БД и нет опытного человека, только SaaS. Будет дорого. Выбор есть. услуга называется managed postgresql. В гугле куча ссылок выпадает.

    Когда-то делал хранение данных профилей в https://www.mongodb.com/docs/manual/core/gridfs/. В принципе, нареканий у меня не было. Но там куча своих граблей. Нужен специалист по БД.

  • DuckDuckD

    Асинхронная функция не завершается если не объявлена переменная.

    Поддержка
    0 Votes
    7 Posts
    814 Views
    DuckDuckD

    результата я не жду - мне просто надо было чтоб отработала функция, я добавлял логи на всех стадиях, до вызова if и после. Лог после ифа уже не выводится но и Api.Restart() не срабатывал. И поток не завершался, как обычно.
    Да, я понял куда смотреть, спасибо.

  • J

    Асинхронная работа методов в БАС

    Поддержка
    0 Votes
    10 Posts
    1013 Views
    ?

    @Dodok Ну кто-то читает и при ее наличие можно будет ткнуть носом, чтобы шли и читали )) А не читают даже те кто пишет на различных веб фреймворках, сразу бегут в чаты и спрашивают как сделать это... Это проблема всех технологий с низким порогом входа, в них приходят те кто не привык читать учебники... ))
    И к тому же БАС уже достаточно взрослый проект и ему по статусу положено иметь нормальную документацию.

  • P

    Как настроить многопоточность в парсере?

    Поддержка
    0 Votes
    2 Posts
    931 Views
    FoxF

    @prakash said in Как настроить многопоточность в парсере?:

    Раньше у меня не возникало нужды в парсинге многопотоком и я не заморачивался над этим, но теперь он мне понадобился и я решил спарсить юзеров в многопоточном режиме и увидел, что все потоки парсят одних и тех же пользователей....

    По идее же должно быть так:
    Первый поток парсит первого юзера, второй поток парсит второго юзера и тд...

    А у меня все потоки парсят одно и тоже.
    Как это настроить?

    В этом https://www.youtube.com/watch?v=Vj2Q50FIBi4 видео уроке как раз рассказана тема многопоточности.

  • S

    Как реализовать многопоточность?

    Поддержка
    0 Votes
    3 Posts
    1381 Views
    supportS

    @Samael_96 Самый простой. Первый поток парсит урл со всех страниц и записывает в ресурс, остальные потоки разгребают этот ресурс.
    Ресурс создается в OnApplicationStart.

    Запись в ресурс - действие "Добавить Элемент"
    Создание ресурса - "Создать Ресурс"
    По окончании работы первого потока его можно убить действием Fail с параметром "Не перезапускать поток."
    Действие "Номер потока" может получать номер треда.

    В будущем запланированы этапы выполнения. Для этого скрипта можно будет сделать 2 этапа и указать каждому свое количество потоков. Но такая реализация все равно самая быстрая, так как первый и второй этап работают одновременно.