@FastSpace А в чем конкретно то проблема? Я не понимаю, как сервер может вызывать такие проблемы. При том, что 2 сервера пробовал, 2 разных хостера, 2 разные ОС, а результат тот же.
@topgod Есть какой-то параметр client-id но где получается я не знаю и по этому я один и тот же изпользую может по этому? я не могу это параметр найти client-id но в загаловке он отправляется.
2-3 часа это много...для 500
У меня парсер собирает инфу с 25 000 стр. и по времени 1.5 часа.
Правда в 20 потоков и все на гет.
У Вас скорее всего работа через браузер и в 1 поток