Парсим сайт, 3 потока.
Сделал простой бот, он бегает по пагинации и собирает цены со страниц, не слишком много потоков и супер быстро тоже не нужно.
Использовались заранее подготовленные фингерпринты (насобирал басом и сохранил в файл штук 150 - 200 список) + приватные прокси 20 шт.
Спустя 2 недели бот отвалился.
Сайт тупо не открывается или редиректит на 404 страницу.
С браузера с тех же проксей все работает.
Поменял прокси на шаред взял побольше, заново пересобрал фингерпринты.
Спустя неделю - отвалился
Сайт или не открывается или редиректит на 404 страницу.
Отключил фингерпринты - все заработало.
Взял динамический проксик с заменой ip каждые 10 минут из мобильной сети билайн.
Спустя 3 недели - сайт редиректит на 404 страницу или на страницу /ciez2a и виснет на ней.
Уважаемые знатоки, подскажите, есть ли какие то действенные способы обойти эту защиту ?
@mrgeser сайт или сервис защиты собирает статистику и раз в 2 недели похоже выносит приговор.
вопрос все 100% профилей отваливаются или какие то выживают?
если не все можно попробовать собирать свою статистику и попробовать определить по каким критериям он банит и на основе этого пытаться повысить качество
@mrgeser вы со своего браузера с прокси в режиме инкогнито входили?
@mrgeser Я не раз говорил и тут просто Попробуйте воспользоваться Поиском.
Профили это как бы те же Люди и чем больше их Гонять по Сайтам и нужным Ключивикам, можно и под Определённую Тематику направить ( реклу клики даж Засчитывать будут ).
Надо просто сделать Скрипт, который Будет их Греть - Нагуливать.
Я не раз приводил Примеры и на Скринах показывал.
Поиск в Помощь :)
И да ток Учтите, профили это не простые Кукисы и под них нужен Объёмный Винт.
Ну и хотя бо Папочку Кеш Чистить иногда :)))
Там поймёте.
Но без них уже не Куда.
