Напишите, пожалуйста, сюда или в ЛС форума, о каком сайте идет речь и как получить капчу
как перейти на работу через post\get запросы?
-
@Fox said in Утечка памяти или из за чего происходит сбой системы?:
У меня все скрипты работают на запросах, многие работают сутками без остановки, проблему утечки памяти ни разу не замечал. Проблема которую описал топикастер происходит при использовании временных профилей браузера, при использовании http-клиента утечек быть не должно.
Начали использовать BAS недавно довольно успешно, функции свои он выполняет.
Но сейчас уже уперлись в проблемы роста и оптимизации. Просто тупо делать новый профиль для каждой записи и качать с него нормально работало при <5-10 потоков. но при желании увеличить объёмы это не работает и нецелесообразно. хочу перейти на работу через post\get запросы, вопрос - какой самый оптимальный путь чтобы разобраться с ними? с чего начать? что делать, что нет? какие-то базовые советы?
спасибо -
Есть два пути увеличения производительности в единицу времени:
- покупать дополнительные сервера, чтобы скрипты делали большее кол-во работы на большем кол-ве серверов
- работать над оптимизацией скриптов, например, отказываться от использования браузера в пользу http запросов
@basuser123 said in как перейти на работу через post\get запросы?:
какие-то базовые советы?
Мой опыт говорит, что дешевле покупать дополнительные сервера, чем идти по второму пути.
Особенно если возникают такие вопросы, как описаны в топике.Может быть текущие скрипты для браузера можно как-то поправить, чтобы заработало с бОльшей производительностью, иногда это возможно.
-
@sergerdn said in как перейти на работу через post\get запросы?:
работать над оптимизацией скриптов, например, отказываться от использования браузера в пользу http запросов
ну вот да, если хотелось бы разобраться с этими запросами, то с чего стоит начать? например такой вопрос- можно ли их формировать с помощью БАС(например как строку для nmap можно делать через zenmap UI)? или надо писать с нуля? что-то используется для этого или тупо в текстовике с чистого листа?
да, хотелось бы разобраться с самого практически нуля. разжёвывать не надо, просто нужно направление, дальше разберемся. или нет - отпишу тут))@sergerdn said in как перейти на работу через post\get запросы?:
Мой опыт говорит, что дешевле покупать дополнительные сервера, чем идти по второму пути
вот это конечно интересно. что прям такой пздц с этими запросами не все так просто?
-
@basuser123 said in как перейти на работу через post\get запросы?:
ну вот да, если хотелось бы разобраться с этими запросами, то с чего стоит начать?
Не знаю, тема обширная. Наверное, необходимый минимум - понимание, как что работает в интернетах.
@basuser123 said in как перейти на работу через post\get запросы?:
вот это конечно интересно. что прям такой пздц с этими запросами не все так просто?
Мое мнение - не просто, особенно если такие вопросы возникают. Но исключения тут возможны, если вебсайт простой.
-
@basuser123 said in как перейти на работу через post\get запросы?:
да, хотелось бы разобраться с самого практически нуля. разжёвывать не надо, просто нужно направление, дальше разберемся. или нет - отпишу тут))
Лично я начал изучать работу http-запросов в BAS со стрима @DrPrime https://www.youtube.com/watch?v=fC97DG2MHQM
-
оставлю тут просто для записи и может кому-то еще пригодится
спасибо за этот коммент
@Alex84 said in Экономия трафика при работе с Twitter:Например Fidler изучить и им Снифать, ну а Запись Запросов, восстановили в последней версии БАСа :)
нашел пару ссылок
https://habr.com/ru/articles/533138/
https://habr.com/ru/articles/554562/
https://telegra.ph/WR--Manual-po-rassylke-POST-zaprosom-cherez-BAS-03-31 тут 6й пункт