Bablosoft

Опять про многопоточность...

Поддержка

  • WebmasterW

    В очередной раз про запросы http/2.0

    Поддержка
    0 Votes
    7 Posts
    1411 Views
    WebmasterW

    т.к. я не великий спец в ноде то ситуация такая:

    axios на всё ругается "not a function"; got при подключении ругается на что-то связанное с ES (видимо нужно было попробовать более старые версии); fetch-h2 работает, но не пристёгивается прокси;

    т.к. нужно было быстрее проверить гипотезу по работе с сайтом, перестал терять время и нарисовал прокси-шлюз для своих запросов на php7.4 (curl)

  • FreemanF

    Вопрос про многопоточность

    Поддержка
    0 Votes
    3 Posts
    1088 Views
    FreemanF

    @bablouser Спасибо

  • CaptchaLomC

    вопрос про базу и разделитель

    Поддержка
    0 Votes
    14 Posts
    3239 Views
    FoxF

    @angelofancient said in вопрос про базу и разделитель:

    @captchalom said in вопрос про базу и разделитель:

    если нельзя то это очень плохо

    В продолжение вопроса - как Вы экспортируете многострочные тексты, разделённые переводом строки? Если у меня в ячейке описание продукта на 2-3 строки, то в CSV они экспортируются построчно, и потом не пригодны ни к делению по столбцам, ни к делению по разделителю ":".

    Поместите "описание" в кавычки:
    0_1569721871473_3cf064f3-4131-428f-82d6-17cac2721937-изображение.png
    0_1569720073837_d4b6dbc7-7524-43ac-9342-e44f4ea7cc9b-изображение.png

  • S

    Как реализовать многопоточность?

    Поддержка
    0 Votes
    3 Posts
    1563 Views
    supportS

    @Samael_96 Самый простой. Первый поток парсит урл со всех страниц и записывает в ресурс, остальные потоки разгребают этот ресурс.
    Ресурс создается в OnApplicationStart.

    Запись в ресурс - действие "Добавить Элемент"
    Создание ресурса - "Создать Ресурс"
    По окончании работы первого потока его можно убить действием Fail с параметром "Не перезапускать поток."
    Действие "Номер потока" может получать номер треда.

    В будущем запланированы этапы выполнения. Для этого скрипта можно будет сделать 2 этапа и указать каждому свое количество потоков. Но такая реализация все равно самая быстрая, так как первый и второй этап работают одновременно.

  • S

    Динамическая многопоточность.

    Поддержка
    0 Votes
    3 Posts
    1619 Views
    supportS

    @sitiros

    Такая задача у меня стоит. Мне нужно реализовать динамическую многопоточность.
    То есть при каждом запуске скрипта может быть или 10 или 1 или 24 потока. Не уверен что такое можно реализовать в рамках одного скрипта, но всё же!

    В начале работы потока определяете сколько потоков должно быть, если текущий номер потока больше чем нужное количество, вызываете действие fail c параметром Не перезапускать поток.

    Но такой подход является следствием выбора неправильной архитектуры. Достаточно просто использовать систему ресурсов. Каждый поток будет брать свою строку из файла и использовать ее. Если потоков будет больше, чем строк в файле, остальные потоки будут ждать пока ресурс освободится.