@UserTrue он из браузера их не всегда берет. А потом если сервер ответ по set-cookies шлет он их ставит сам убирать их.
аа не знал что он не записывает, я через прокси сервер все делаю он точнее показывает что там шлет. Но все равно то что он не умеет br сильно подмораживает на ноду got перешел
Как настроить многопоточность в парсере?
-
Раньше у меня не возникало нужды в парсинге многопотоком и я не заморачивался над этим, но теперь он мне понадобился и я решил спарсить юзеров в многопоточном режиме и увидел, что все потоки парсят одних и тех же пользователей....
По идее же должно быть так:
Первый поток парсит первого юзера, второй поток парсит второго юзера и тд...А у меня все потоки парсят одно и тоже.
Как это настроить? -
@prakash said in Как настроить многопоточность в парсере?:
Раньше у меня не возникало нужды в парсинге многопотоком и я не заморачивался над этим, но теперь он мне понадобился и я решил спарсить юзеров в многопоточном режиме и увидел, что все потоки парсят одних и тех же пользователей....
По идее же должно быть так:
Первый поток парсит первого юзера, второй поток парсит второго юзера и тд...А у меня все потоки парсят одно и тоже.
Как это настроить?В этом https://www.youtube.com/watch?v=Vj2Q50FIBi4 видео уроке как раз рассказана тема многопоточности.