Bablosoft

Лежит ЛК опять, невозможно залить и обновить скрипты

Moved Поддержка

  • D

    Chatgpt и node

    Поддержка
    0 Votes
    3 Posts
    702 Views
    D

    @Fox Спасибо! Разобрался!

  • R

    Bas и 2 процессорная мать

    Поддержка
    0 Votes
    3 Posts
    594 Views
    R

    Спасибо, да, человек ответил тоже что запускает 5 копий по 20 потоков, танцы с бубнами. Вопрос снят)

  • Z

    Синхронизация парсинга и прокрутки

    Поддержка
    0 Votes
    2 Posts
    537 Views
    FoxF

    @Zack9 said in Синхронизация парсинга и прокрутки:

    Подскажите, на сайте хорошая защита, на запросах не могу сделать, не знаю как хеши разбирать, классы все рандомизированы, сложно xpath подобрать, так ещё overflow hidden скрывает элементы если они не в видимости экрана.

    Есть в басе какая-то автоматическая возможно парсинг и прокрутку синхронизировать или нужно выполнять каждый цикл и самому прокрутку добавлять? Но тогда не пойму, как сделать чтобы точно ровно шло, может прокрутка будет отставать или наоборот.
    Или есть ещё какие варианты в таком случае?

    Используйте цикл и действие "Прокрутка К Элементу"

  • Mr.BANM

    node.js и нагрузка

    Moved Поддержка
    0 Votes
    10 Posts
    1368 Views
    ?

    @Bigma я уже написал что скорей всего дело в кривом коде юзера, менее вероятно что кривая библиотека и ещё менее вероятно, что бас тк я часто использую ноду и бас по сути не сильно связан с нодой, они просто обмениваются сообщениями через пайп сервер

  • ruzneR

    база данных и много документов

    Поддержка
    0 Votes
    4 Posts
    1666 Views
    romanbizR

    @ruzne Из вики. Основные характеристики базы данных ClickHouse[11]:

    Действительно колоночная СУБД. Рядом с данными не хранятся другие величины, например, в ClickHouse поддерживаются значения постоянной длины, чтобы не хранить рядом размер типа.
    Линейная масштабируемость. Система позволяет увеличивать кластер добавлением серверов.
    Отказоустойчивость. Система представляет собой кластер шардов, где каждый шард — это группа реплик. Используется асинхронная multimaster репликация: после записи на любую доступную реплику, данные распространяются на все остальные реплики. Для координации работы реплик используется ZooKeeper (ZooKeeper не участвует в процессе обработки и выполнения запроса).
    Способность работать с большими данными (триллионы записей и петабайты данных).
    Поддержка SQL. ClickHouse поддерживает диалект SQL c расширениями: массивы и вложенные структуры данных, вероятностные структуры, функция по работе с URI, возможность подключить внешнее key-value хранилище и т. д.
    Высокая эффективность работы[12].
    векторные вычисления;
    данные не только хранятся по колонкам, но и обрабатываются по векторам (кусочкам колонок), за счёт чего достигается высокая эффективность по CPU;
    наличие функциональности для семплирования и приблизительных вычислений;
    параллельная и распределенная обработка запросов (в том числе JOIN'ов).
    Сжатие данных.
    СУБД оптимизирована для работы на HDD-дисках. Можно обрабатывать данные, которые не помещаются в оперативную память.
    Разнообразные клиенты для подключения к БД. Для работы с базой данных можно использовать консольный клиент, HTTP API и ряд wrapper’ов на Python, PHP[13], NodeJS[14], Perl[15], Ruby[16] и R[17]. Также для ClickHouse есть JDBC[18] и Golang[19] драйверы.
    Подробная документация.