Bablosoft

Удаленная база данных. Получение записей.

Поддержка

  • N

    Отслеживание функции родителя и его данных дочерними асинхронными функциями.

    Поддержка
    0 Votes
    2 Posts
    254 Views
    N

    Вопрос решён.
    Открываете вызов асинхронной функции, нажимаете "Дополнительные настройки" и задаёте в "Желаемый ID потока" свою переменную. Если в случае как у меня и асинхронные функции запускаются пачкой через цикл в родительской функции, то просто в рамках родительского потока создаёте переменную, где в итоге будет хранится информация о номере потока (родительского) и после нижнего слэша(к примеру) номер цикла, из которого асинхронная функция запускается. Тогда распарсив id запущенной асинхронной функции (из неё самой)- можно будет понять к какой группе родительской функции она принадлежит.

  • P

    Как пользоваться группами в базе данных?

    Поддержка
    0 Votes
    4 Posts
    483 Views
    P

    @spam said in Как пользоваться группами в базе данных?:

    используйте часть id данных в одном потоке, а другую часть id во втором потоке

    Спасибо!

  • I

    Получение отпечатка - Query limit reached

    Поддержка
    0 Votes
    2 Posts
    428 Views
    FastSpaceF

    @iptips said in Получение отпечатка - Query limit reached:

    Использую бесплатную версию фингерпринта
    Раньше было ограничение 1 отпечаток раз в две минуты
    Сейчас скрипт получает по логам отпечаток раз в 5-10 минут и то выбивает все время эту ошибку, в чем может быть проблема, еще вчера скрипт отрабатывал без проблем

    Купи отпечаток и не спамь глупыми темами.

  • ruzneR

    база данных и много документов

    Поддержка
    0 Votes
    4 Posts
    1588 Views
    romanbizR

    @ruzne Из вики. Основные характеристики базы данных ClickHouse[11]:

    Действительно колоночная СУБД. Рядом с данными не хранятся другие величины, например, в ClickHouse поддерживаются значения постоянной длины, чтобы не хранить рядом размер типа.
    Линейная масштабируемость. Система позволяет увеличивать кластер добавлением серверов.
    Отказоустойчивость. Система представляет собой кластер шардов, где каждый шард — это группа реплик. Используется асинхронная multimaster репликация: после записи на любую доступную реплику, данные распространяются на все остальные реплики. Для координации работы реплик используется ZooKeeper (ZooKeeper не участвует в процессе обработки и выполнения запроса).
    Способность работать с большими данными (триллионы записей и петабайты данных).
    Поддержка SQL. ClickHouse поддерживает диалект SQL c расширениями: массивы и вложенные структуры данных, вероятностные структуры, функция по работе с URI, возможность подключить внешнее key-value хранилище и т. д.
    Высокая эффективность работы[12].
    векторные вычисления;
    данные не только хранятся по колонкам, но и обрабатываются по векторам (кусочкам колонок), за счёт чего достигается высокая эффективность по CPU;
    наличие функциональности для семплирования и приблизительных вычислений;
    параллельная и распределенная обработка запросов (в том числе JOIN'ов).
    Сжатие данных.
    СУБД оптимизирована для работы на HDD-дисках. Можно обрабатывать данные, которые не помещаются в оперативную память.
    Разнообразные клиенты для подключения к БД. Для работы с базой данных можно использовать консольный клиент, HTTP API и ряд wrapper’ов на Python, PHP[13], NodeJS[14], Perl[15], Ruby[16] и R[17]. Также для ClickHouse есть JDBC[18] и Golang[19] драйверы.
    Подробная документация.

  • ?

    Как обрабатывать большой объем данных

    Поддержка
    0 Votes
    40 Posts
    7247 Views
    ProfuterP

    @zeor думаю лучше делать SQL запросами всё, а не блокировками. В свое время делал софт блокировками - заметный проигрыш в скорости получается, особенно когда записей будет несколько тысяч. 6 пользователей каждый обращался напрямую к таблице, 20000 записей и мертвая скорость работы :)