Сайт детектит бота, как быть ?
-
Парсим сайт, 3 потока.
Сделал простой бот, он бегает по пагинации и собирает цены со страниц, не слишком много потоков и супер быстро тоже не нужно.
Использовались заранее подготовленные фингерпринты (насобирал басом и сохранил в файл штук 150 - 200 список) + приватные прокси 20 шт.
Спустя 2 недели бот отвалился.
Сайт тупо не открывается или редиректит на 404 страницу.
С браузера с тех же проксей все работает.
Поменял прокси на шаред взял побольше, заново пересобрал фингерпринты.
Спустя неделю - отвалился
Сайт или не открывается или редиректит на 404 страницу.
Отключил фингерпринты - все заработало.
Взял динамический проксик с заменой ip каждые 10 минут из мобильной сети билайн.
Спустя 3 недели - сайт редиректит на 404 страницу или на страницу /ciez2a и виснет на ней.
Уважаемые знатоки, подскажите, есть ли какие то действенные способы обойти эту защиту ?
-
Сколь говорят а вы все не Слушаете.
Профили хоть Грейте и используйте.
У вас постоянно Заходят Пустышки без Истории и вы ещё думаете, почему вас палят как Ботов ? :)))
-
@super84 не поделитесь ссылочкой на инструкцию как "погреть" профиль ? =)
-
@mrgeser сайт или сервис защиты собирает статистику и раз в 2 недели похоже выносит приговор.
вопрос все 100% профилей отваливаются или какие то выживают?
если не все можно попробовать собирать свою статистику и попробовать определить по каким критериям он банит и на основе этого пытаться повысить качество@mrgeser вы со своего браузера с прокси в режиме инкогнито входили?
-
@tet-vivi входил с чистого только что установленного браузера на сервере.
1й раз отвалились ~95%
Последний раз отвалились все
-
@mrgeser Я не раз говорил и тут просто Попробуйте воспользоваться Поиском.
Профили это как бы те же Люди и чем больше их Гонять по Сайтам и нужным Ключивикам, можно и под Определённую Тематику направить ( реклу клики даж Засчитывать будут ).
Надо просто сделать Скрипт, который Будет их Греть - Нагуливать.
Я не раз приводил Примеры и на Скринах показывал.
Поиск в Помощь :)
И да ток Учтите, профили это не простые Кукисы и под них нужен Объёмный Винт.
Ну и хотя бо Папочку Кеш Чистить иногда :)))
Там поймёте.
Но без них уже не Куда.
-
This post is deleted!
-
Зарёкся Учить то вроде, но порой блин ( добрый я ) подсказываем Новичкам, а потом Они Гуру себя Чувствуют и мы то им уже не Указ :)))
-
@super84 спасибо, буду разбираться с этим.
-
@mrgeser Удачи.