Bablosoft

Какой лимит строк в базе данных?

Поддержка

  • A

    Как организовать многопоточное выполнение на данных полученых в ходе выполнения текущего скрипта?

    Поддержка
    0 Votes
    4 Posts
    475 Views
    A

    Разобрался!
    Надо записывать данные в файл, как в ресурс. Например с помощью модуля "Список В Ресурс". А я записывал как в файл. Через "Записать в файл".
    Всем спасибо за помошь.

  • P

    в чем прикол функции в многопоток

    Поддержка
    0 Votes
    6 Posts
    822 Views
    P

    @Fox Привет.Я описывал задачу в этой теме https://community.bablosoft.com/topic/27417/вызов-многопоточной-функции
    Дело в том,что я не могу вообще никак перевести свой скрипт на многопоток,у меня тупо,что в вызове функции в многопоток,что просто обычный многопоток,выполняет свою работу с данными по очереди,а не одновременно.И это очень сильно бьет по времени,а нужна именно скорость обработки.Все уже готово и скрипт рабочий полностью,но скорость обработки заставила воспользоваться многопотоком.Ранее,подобных проблем не замечал,а сейчас элементарную задачу не могу уже несколько дней решить.
    Скрипт очень простой и работает без браузера вообще,в скрипте используется только одно взаимодействие с гет запросом.Пример скрипта я приложил в этой теме(но без запросов),он точно почти такой же,как и основа.
    Логика такова:
    1)Запускается скрипт (без всяких ресурсов изначально и данных) и создаются два ресурса.
    2)Делается запрос на сайт,который обрабатывается в отдельной функции,т.е. обрабатывает полученные строки и записывает в ресурс.
    3)Вызывается функция в несколько потоков,которая работает (должна работать) с каждой строкой из созданного ранее ресурса(уникальной)в отдельном потоке.Данные обрабатываются и записываются во второй ранее созданный ресурс.
    4)Как только данные обработаны,ресурс переводится в список и список записывается в файл.Более ничего не делается.
    -Сперва я думал,что проблема в создаваемых в ходе работы ресурсах,но нет.Создавал изначально ресурсы и то же самое было.
    -Потом пробовал брать из файлов значения\потом создавать файлы по ходу и из них брать данные\сохранять напрямую пытался и.т.д
    -Возможно думал стоят какие то ограничения из за слабого пк с 4 гб оперативы и взял сервер с 64 гб,но как обрабатывалась строка за 5 минут на моем пк,так же по скорости и на серваке.Ладно, с этим я уже ничего не поделаю из за регулярок в проекте,согласен.Но вот перевести на поток и хотя бы по 10 строк одновременно обрабатывать,очень бы помогло.А сейчас в любом случае,у меня,сколько бы потоков не выставил - работает все равно как один,просто по очереди разный поток берет свои данные(

  • B

    Сохранение в csv для импорта в excel?

    Поддержка
    0 Votes
    2 Posts
    501 Views
    S

    @Blablabla8133 разделитель ;

  • bag162B

    Список в ресурс.

    Поддержка
    0 Votes
    5 Posts
    1076 Views
    FoxF

    @bag162 Можно делать паузу в node js либо как вариант использовать экшены, которые создают минимальную задержку, например читать файл, читай несуществующий файл вместо действия сон.

  • TuruturT

    многопоточность в проекте

    Поддержка
    0 Votes
    36 Posts
    24770 Views
    supportS

    @Turutur

    Увы это не так! - и если оно так, то оно реализовано так, что как-то не так - без обид.

    Могу с вами поспорить. Это действительно так просто. И в том проекте, что я вам сделал так и происходит.

    А для чего они очищаются - если бы нужно было действие для очистки - его можно вызывать тогда когда оно нужно - а вот функция для настройки вначале работы скрипта с тем алгоритмом что я описал - была бы просто незаменима!

    Просто выполняйте действия по настройке браузера в начале работы потока, а не в OnApplicationStart.
    Если нужно сделать что-то 1 раз в начале работы скрипта - выполните это в OnAplicationStart и поместите результаты в глобальную переменную или ресурс, а потом читайте от туда в основном потоке. Пример тоже был.

    Потому что это не совсем понятный, долгий процесс

    Что именно не понятно? Что может быть проще, чем поставить {{users}} в коде?

    я верю в BAS - и то что пишу, трачу свое время - пытаюсь сделать его лучше - и я не пишу претензии, если так могло показаться - это предложения - ведь мы ведем двухстороннюю беседу - и BAS вы выложили не готовым, и продолжаете совершенствовать. И не нужно относится ко мне как к зануде - вы можете не отвечать на то что я пишу - и Вы должны согласится что не все просто как хотелось бы, как и я соглашаюсь с тем, что вы делаете очень сложную работу. Просто не забывайте, что на другой стороне ваших знаний - есть простые пользователи.

    Опять же не соглашусь с вами, все очень просто.
    Конкретных предложений от вас в этом сообщении кроме как поменять принцип работы OnApplicationStart я не вижу.

    Посмотрите на досуге
    0_1478736294193_123OK.rar

    Посмотрел. У меня ваш скрипт работает, вот результат.

    0_1478780996092_Result.png

    Возможно дело в том что вы вписали 1 акк и указали количество одновременных использований в 1 для пользователей?