Bablosoft

Понадобилось мне значит 10000 (десять тысяч) гретых профилей в день

Поддержка

  • P

    в чем прикол функции в многопоток

    Поддержка
    0 Votes
    6 Posts
    822 Views
    P

    @Fox Привет.Я описывал задачу в этой теме https://community.bablosoft.com/topic/27417/вызов-многопоточной-функции
    Дело в том,что я не могу вообще никак перевести свой скрипт на многопоток,у меня тупо,что в вызове функции в многопоток,что просто обычный многопоток,выполняет свою работу с данными по очереди,а не одновременно.И это очень сильно бьет по времени,а нужна именно скорость обработки.Все уже готово и скрипт рабочий полностью,но скорость обработки заставила воспользоваться многопотоком.Ранее,подобных проблем не замечал,а сейчас элементарную задачу не могу уже несколько дней решить.
    Скрипт очень простой и работает без браузера вообще,в скрипте используется только одно взаимодействие с гет запросом.Пример скрипта я приложил в этой теме(но без запросов),он точно почти такой же,как и основа.
    Логика такова:
    1)Запускается скрипт (без всяких ресурсов изначально и данных) и создаются два ресурса.
    2)Делается запрос на сайт,который обрабатывается в отдельной функции,т.е. обрабатывает полученные строки и записывает в ресурс.
    3)Вызывается функция в несколько потоков,которая работает (должна работать) с каждой строкой из созданного ранее ресурса(уникальной)в отдельном потоке.Данные обрабатываются и записываются во второй ранее созданный ресурс.
    4)Как только данные обработаны,ресурс переводится в список и список записывается в файл.Более ничего не делается.
    -Сперва я думал,что проблема в создаваемых в ходе работы ресурсах,но нет.Создавал изначально ресурсы и то же самое было.
    -Потом пробовал брать из файлов значения\потом создавать файлы по ходу и из них брать данные\сохранять напрямую пытался и.т.д
    -Возможно думал стоят какие то ограничения из за слабого пк с 4 гб оперативы и взял сервер с 64 гб,но как обрабатывалась строка за 5 минут на моем пк,так же по скорости и на серваке.Ладно, с этим я уже ничего не поделаю из за регулярок в проекте,согласен.Но вот перевести на поток и хотя бы по 10 строк одновременно обрабатывать,очень бы помогло.А сейчас в любом случае,у меня,сколько бы потоков не выставил - работает все равно как один,просто по очереди разный поток берет свои данные(

  • Z

    Кеширование в юраузере

    Поддержка
    0 Votes
    5 Posts
    859 Views
    FastSpaceF

    @Evheniu said in Кеширование в юраузере:

    @FastSpace а ты как делаешь, через костыль? не влияет это на то как нас будут видеть?

    я очищаю каждый раз после окончания работы с профилем, при это оставляю несколько десятков последних файлов кэш

    У меня 16 террабайт жестак под профиля. Не старадаю костылем таким.

  • K

    Почему в моб отпечатках в браузере есть вертикальный ползунок?

    Поддержка
    -1 Votes
    9 Posts
    1150 Views
    K

    @FastSpace said in Почему в моб отпечатках в браузере есть вертикальный ползунок?:

    @kuzkuz Там в мобильных отпечатках таких нелепых вещей еще вагон и маленькая тележка.

    Это да, но рега 50/50 проходит на нужном мне сайте.
    Есть трабл со вкладками ещё - но этот скрипт не на новейшей версии бас, может в новой исправлено, но тайтлы вкладок кривые.

  • G

    сохранить страницу в html вместе с файлами как в обычном браузере?

    Поддержка
    0 Votes
    2 Posts
    625 Views
    G

    кстати, а кто знает, почему удаляется папка с файлами при удадении html файла, как это так вообще происходит?

  • T

    Элементы в парсинге строчки

    Поддержка
    0 Votes
    3 Posts
    795 Views
    f0cusF

    @t1mqa А создать список от 0 до 17к вам религия не позволяет? Список потом можно и в строку...Вот чота я думаю что @uraabk не заморачивался. 😜.

    spoiler

    На скрине я даже совсем обленилсо. так тоже можно вам же строку, а тут не курсы жэс юниоры

    var list = []; for (i = 0; i <= 17000; i++) { list.push([i]) } VAR_LIST = list.join(",") log(list.join(","))

    Вот нормальный цикл и в строку все это.