Bablosoft

Многопоток. Дождаться завершения, обновить данные и начать снова

Поддержка
  • T

    Нужна помощь, просто не понимаю как сделать и как подступится.

    Есть написаное приложение, собирает статистику по ключам из гугла. Каждый поток - это своя прокся и свой ключ (эти данные получаем с сервера).

    • это все работает, но по кругу.

    Нужно сделать что-бы раз в 20 минут, все потоки остановились (либо дождаться завершения), и обновить с сервера данные по проксям и ключам - и снова начать работу но уже с этими новыми данными.

    У меня затык с тем что:
    Я не знаю как дождаться завершения всех потоков, и когда они все завершаться - выполнить функцию;
    найти информацию по поиску не получилось, погуглил - тоже ни чего не нашел.

    p.s. раз в 20 минут я планирую сделать посто: в OnApplicationStart - получить unixtimestamp, и потом сравнить пока не прошло > 20 минут. Тут вроде просто всё.

    0

  • 0

    Планировщик берет данные из другой задачи

    Поддержка
    0 Votes
    1 Posts
    271 Views
    No one has replied
  • mocardM

    Зависает работа браузера и потоков

    Поддержка
    0 Votes
    5 Posts
    690 Views
    mocardM

    Спасибо.

  • D

    1 000 000 запросов и стоп

    Поддержка
    0 Votes
    2 Posts
    399 Views
    diloloD

    @dexp https://community.bablosoft.com/topic/17889/more-than-1-000-000-success-fails

  • Fire_trackF

    Лог и инфа по скорости

    Поддержка
    0 Votes
    5 Posts
    699 Views
    FoxF

    @m1st said in Лог и инфа по скорости:

    @Fox Да я в курсе как это всё делать, Я не особо понимаю, какие данные использовать в BAS. Хотя картинка сложилась как это сделать

    Записывайте данные в переменные, а затем выводите в лог их разность. Тип только укажите expression

    d22165a2-4ccb-49cd-b379-361cee7e587d-изображение.png

    Тестовый скрипт

  • K

    Разрешить Кэш и нагрузка на сеть.

    Поддержка
    0 Votes
    2 Posts
    1546 Views
    FoxF

    @kibec said in Разрешить Кэш и нагрузка на сеть.:

    Добрый день, подскажите по такому функциональности: По умолчанию кэш запрещен в BAS.
    В случае если его включить - то получается, что потребление сети и т.д - будет значительно снижено, если операции происходят на одном сайте например, так как большинство файлов должно быть кэшировано и повторная загрузка их не будет производится.

    Правильно ли я понял?

    И есть ли какие то подводные камни в использовании кэша? Кроме нагрузки на диск и т.д

    Давайте определимся с понятиями. Есть фактический кеш браузера, а есть кеш браузера в BAS, это объект дублирующий данные из кеша браузера.

    При старте работы программы, создаётся временный профиль со случайным названием в папке

    \BrowserAutomationStudio\apps\21.7.2\prof\

    При работе с браузером, в этом временном профиле начинает сохранятся кеш

    \BrowserAutomationStudio\apps\21.7.2\prof\рандом\Cache

    Эта папка увеличивается в размере в зависимости от объёма кеширования сайтов.

    В свою очередь когда браузер загружает url, то происходит сохранение данных в ассоциативный массив _CachedData и ! ВСЯ ! последующая работа с кешем в BAS сводится к работе с данными именно в _CachedData.
    Действия "Разрешить кэш", "Запретить кэш", "Получить элемент кэша" и "Очистить кэшированные данные" ни как не влияют на фактический кеш браузера.

    Вот тестовый скрипт

    Значит кеширование данных будет происходить в любом случае и ускорять тем самым загрузку одних и тех же страниц, с условием использования одних и тех же профилей.