Bablosoft

Многопоток - ресурсы

Поддержка
  • V

    Есть скрипт который авторизуется на сайте потом выполняет действия. Логин и пароль берётся из ресурса хочу сделать многопоток но не знаю как сделать чтобы поток брал разные данные из ресурса " списка ".

    -3

  • S

    Многопоток и COUNT

    Поддержка
    0 Votes
    3 Posts
    402 Views
    S

    @clarabellerising Спасибо!

  • 35xakers3

    Галочка запись не стоит но ресурсы все равно удаляет

    Поддержка
    0 Votes
    2 Posts
    330 Views
    bigoratB

    @35xakers тоже сталкивался с таким, видимо изначально ресурс был создан как "брать и удалять", я решал только созданием нового ресурса с другим именем и использовать "только чтение"

  • T

    Собрать в файл ресурсы которые неудалось обработать удачно.

    Поддержка
    0 Votes
    5 Posts
    554 Views
    FoxF

    @termin333 said in Собрать в файл ресурсы которые неудалось обработать удачно.:

    @Fox несоглашусь. Оборачивать весь код в игнорирование ошибок не хотелось - потому что пользователь задаёт количество ошибок на ресурс. Помимо этого ресурса в проекте есть ещё прокси и аккаунты. И сейчас все настроено красиво. Если пытаться делать самому, то перезапускать поток уже не выйдет, в случае ошибки. И придётся на себя брать работу по обслуживанию всех трёх ресурсов. Плюс выйти поток может не только по ошибке, но и если акки кончились. И придётся тоже все это прописывать.
    Теплится пока надежда, что есть возможность получить эти счётчики. Пусть и не тривиально.

    Вы описываете решение конкретно вашей задачи, для скрипта который вы уже написали. Для вас эта возможность позволила бы ни чего толком не переписывать и не исправлять. Но на данный момент этой возможности нет и вряд-ли появится в ближайшее время.
    Имхо: Быстрее придумать и реализовать логику обходя эту отсутствующую возможность, чем ждать её появляения.

  • B

    Многопоток в парсинге.

    Поддержка
    0 Votes
    15 Posts
    4223 Views
    CruzelC

    @Bonifazzziy смотрите, идея того алгоритма, который я предложил:

    В функции OnApplicationStart происходит заполнение ресурса Page нужными номерами страницы. К примеру нужны нам с 1 по 10 страницу. С помощью цикла FOR с 1 до 10 мы добавляем в ресурс такие элементы: 1, 2 , 3 ,4 , 5 и т.д. Потом мы уже в цикле, где парсятся данные (где у вас идёт блок Загрузить, и т.д.) в адресе страницы указываем http://site.ru/users?page={{Page|notreuse}} ну или по другому, смотря какая у вас именно ссылка. Ресурс выдаёт вам номер страницы, и эти страницы не будут повторяться между потоками. Вы получаете нужные данные в многопотоковом режиме.

    Вообще для всех данных я рекомендую использовать ресурсы, потому что с ними не будет проблем при многопотоковой работе.
    Думаю позже сделать свой блог, там буду подробно об этом рассказывать.

  • P

    Существует ли где-либо блок мануала раздел ресурсы?

    Поддержка
    0 Votes
    3 Posts
    1083 Views
    P

    @wodopad Спасибо