@Fox Привет.Я описывал задачу в этой теме https://community.bablosoft.com/topic/27417/вызов-многопоточной-функции
Дело в том,что я не могу вообще никак перевести свой скрипт на многопоток,у меня тупо,что в вызове функции в многопоток,что просто обычный многопоток,выполняет свою работу с данными по очереди,а не одновременно.И это очень сильно бьет по времени,а нужна именно скорость обработки.Все уже готово и скрипт рабочий полностью,но скорость обработки заставила воспользоваться многопотоком.Ранее,подобных проблем не замечал,а сейчас элементарную задачу не могу уже несколько дней решить.
Скрипт очень простой и работает без браузера вообще,в скрипте используется только одно взаимодействие с гет запросом.Пример скрипта я приложил в этой теме(но без запросов),он точно почти такой же,как и основа.
Логика такова:
1)Запускается скрипт (без всяких ресурсов изначально и данных) и создаются два ресурса.
2)Делается запрос на сайт,который обрабатывается в отдельной функции,т.е. обрабатывает полученные строки и записывает в ресурс.
3)Вызывается функция в несколько потоков,которая работает (должна работать) с каждой строкой из созданного ранее ресурса(уникальной)в отдельном потоке.Данные обрабатываются и записываются во второй ранее созданный ресурс.
4)Как только данные обработаны,ресурс переводится в список и список записывается в файл.Более ничего не делается.
-Сперва я думал,что проблема в создаваемых в ходе работы ресурсах,но нет.Создавал изначально ресурсы и то же самое было.
-Потом пробовал брать из файлов значения\потом создавать файлы по ходу и из них брать данные\сохранять напрямую пытался и.т.д
-Возможно думал стоят какие то ограничения из за слабого пк с 4 гб оперативы и взял сервер с 64 гб,но как обрабатывалась строка за 5 минут на моем пк,так же по скорости и на серваке.Ладно, с этим я уже ничего не поделаю из за регулярок в проекте,согласен.Но вот перевести на поток и хотя бы по 10 строк одновременно обрабатывать,очень бы помогло.А сейчас в любом случае,у меня,сколько бы потоков не выставил - работает все равно как один,просто по очереди разный поток берет свои данные(
Давайте исследуем Инстаграм в FD
-
этого мало для языка, там еще js подмена.
То есть метод NavigatorLanguage.language смотрит js?
... И учитывает его помимо UserAgent?
(Пардон, если банальные вопросы, просто некоторые описания методов довольно сжаты и понятны лишь опытным людям.)
Тогда, выходит, лучше сразу "фильтровать" отпечатки из Fingerprint, содержащие оба языка en и ru... чем потом менять в них что-либо, добавляя ru. -
@FastSpace
Парсил FP отпечатки, понял что ru отпечатков нет в базе. Поэтому придется всё менять вручную. (Здесь я ошибся. Дело в том, что ru-отпечатки по неведомой причине обрезаются)То есть, из действий нужно установить заголовок
HTTP_ACCEPT_LANGUAGE ru-RU,ru;q=0.8,en-US;q=0.5,en;q=0.3 (например)И кроме этого еще два пункта на js нужно изменить
NavigatorLanguage.language ru-RU (под него сайты будут подстраивать контент)
NavigatorLanguage.languages ru-RU,ru,en-US,en (перечислить те же языки, что и в UserAgent, но уже без весов)Как сделать эти js подмены вроде объяснено тут: https://community.bablosoft.com/topic/4660/accept-language-и-window-navigator-language
Делаю:
- Открываю "HTTP-клиент" -> "Установить HTTP-заголовок" вот так
- Открываю "Браузер" -> "Выполнять при каждой загрузке страницы в браузере" вот так
Я что-то не так сделал, поскольку результат не оправдал ожиданий:
1 В заголовке вместо ru-RU,ru;q=0.8,en-US;q=0.5,en;q=0.3 находится en-US,en;q=0.9
2 В определении языка вместо (ru-RU,ru;q=0.8,en-US;q=0.5,en;q=0.3 | ru-RU) стоит (en-US,en;q=0.9 | ru-RU)
3 Не прописались navigator language и languages
4 f-vision вообще не определяет языкПодскажите, что не так? Как сделать правильно?
-
-
-
Может модуль подойдет, сам не юзал тк кодом правлю.
https://community.bablosoft.com/topic/9073/fingerprintswitcher-с-дополнительными-функциями?page=1 -
Блин, не мог ru отпечатки напарсить из-за плохого прокси и зарубежного сервера. Короче парсить лучше с домашней машины. Видимо БАС определяет ip и теперь подбирает отпечатки с его учётом, о чём я не предполагал.
И ещё, кажется что прокси может влиять на определение языков whoer'ом и другими чекерами. Может еще и в этом проблема. Тогда нужно использовать нормальные резидентские прокси РФ, ибо "правильные" приватные еще как-то откопать нужно. Конечно, если я правильно всё понял. -
@UserTrue said in Давайте исследуем Инстаграм в FD:
Может модуль подойдет, сам не юзал тк кодом правлю.
https://community.bablosoft.com/topic/9073/fingerprintswitcher-с-дополнительными-функциями?page=1Благодарю, UserTrue! не обратил на этот модуль внимания. Наверное буду пробовать.
-
@AndreyKa said in Давайте исследуем Инстаграм в FD:
@IvanM Напиши потом результат
А ты уже знал чем закончится, да?
Вобщем, установил я себе модуль по парсингу и изменению отпечатков.
В [[LANG]] запечатал: ru-RU,ru;q=0.8,en-US;q=0.5,en;q=0.3
Чекаю, везде
en-US,en;q=0.9 | en-US
Все сайты выдают en-версиюТо есть не просто никто не видит, что у меня не просто в браузере ru приоритетный, никто не видит, что он вообще там есть.
Что я не так опят делаю?
-
Как мне уже подсказывают в сообщениях, следующие "мытарства" будут связаны ещё вот с этим https://community.bablosoft.com/topic/5388/как-изменить-appversion
-
@IvanM Лучше сделать пример скрипта как вы делает и вместе с ним задать вопрос в ветке модуля.
-
Я сюда скину ссылку на пост с кубиками из раздела модулей https://community.bablosoft.com/topic/9073/fingerprintswitcher-с-дополнительными-функциями/31
-
Вот тут
@Fox said in Как изменить appVersion?:
Тестовый скрипт
такая же проблема
в отпечаткеru-RU,ru;q=0.9,en-US;q=0.8,en;q=0.7а переходишь на сервис определяющий заголовки нету
ps
Я ничего не понимаю. Делаю новый проект. Там все норм.
