Здравствуйте. Сделал чекер через bas. Проходит ровно 1 000 100 запросов и останавливается, хотя в списке ещё полно данных для парсинга. Что сделать можно с этим явлением?
@sergerdn да, показать больше товаров как раз через js обрабатывается, обычные запросы видят только 1ую страницу, последующие через запрос можно получить через ключ, о котором писал в топике, который шифрованный.
@Fox да, и получать их через JSON. Но это для каждого сайта я должен писать новую функцию (т.к сайты по разному тянут данные, разве что все стабильно просят UA). Там ещё куча доп.параметров, около десятка... и так для каждого сайта.
Так вот, есть ли способ не рутинить и не обрабатывать каждый сайт по отдельности? Типо чтоб он сам понимал что ему отправлять в этих заголовках кроме UA. Если нет, так и напишите.
Да - использовать брузер. При работе на запросах вам придётся делать ВСЁ в ручную
Есть почта и пароль в таком формате "почта:пароль" Подскажите как разделить что бы можно было использовать отдельно почту и пароль? Понимаю что это скорее всего елементарно, но пока да этого не дошел... Спасибо за помощь.