Сайт детектит бота, как быть ?



  • Парсим сайт, 3 потока.
    Сделал простой бот, он бегает по пагинации и собирает цены со страниц, не слишком много потоков и супер быстро тоже не нужно.
    Использовались заранее подготовленные фингерпринты (насобирал басом и сохранил в файл штук 150 - 200 список) + приватные прокси 20 шт.
    Спустя 2 недели бот отвалился.
    Сайт тупо не открывается или редиректит на 404 страницу.
    С браузера с тех же проксей все работает.
    Поменял прокси на шаред взял побольше, заново пересобрал фингерпринты.
    Спустя неделю - отвалился
    Сайт или не открывается или редиректит на 404 страницу.
    Отключил фингерпринты - все заработало.
    Взял динамический проксик с заменой ip каждые 10 минут из мобильной сети билайн.
    Спустя 3 недели - сайт редиректит на 404 страницу или на страницу /ciez2a и виснет на ней.
    Уважаемые знатоки, подскажите, есть ли какие то действенные способы обойти эту защиту ?



  • Сколь говорят а вы все не Слушаете.
    Профили хоть Грейте и используйте.
    У вас постоянно Заходят Пустышки без Истории и вы ещё думаете, почему вас палят как Ботов ? :)))



  • @super84 не поделитесь ссылочкой на инструкцию как "погреть" профиль ? =)



  • @mrgeser сайт или сервис защиты собирает статистику и раз в 2 недели похоже выносит приговор.
    вопрос все 100% профилей отваливаются или какие то выживают?
    если не все можно попробовать собирать свою статистику и попробовать определить по каким критериям он банит и на основе этого пытаться повысить качество

    @mrgeser вы со своего браузера с прокси в режиме инкогнито входили?



  • @tet-vivi входил с чистого только что установленного браузера на сервере.
    1й раз отвалились ~95%
    Последний раз отвалились все



  • @mrgeser Я не раз говорил и тут просто Попробуйте воспользоваться Поиском.
    Профили это как бы те же Люди и чем больше их Гонять по Сайтам и нужным Ключивикам, можно и под Определённую Тематику направить ( реклу клики даж Засчитывать будут ).
    Надо просто сделать Скрипт, который Будет их Греть - Нагуливать.
    Я не раз приводил Примеры и на Скринах показывал.
    Поиск в Помощь :)
    И да ток Учтите, профили это не простые Кукисы и под них нужен Объёмный Винт.
    Ну и хотя бо Папочку Кеш Чистить иногда :)))
    Там поймёте.
    Но без них уже не Куда.



  • This post is deleted!


  • Зарёкся Учить то вроде, но порой блин ( добрый я ) подсказываем Новичкам, а потом Они Гуру себя Чувствуют и мы то им уже не Указ :)))



  • @super84 спасибо, буду разбираться с этим.



  • @mrgeser Удачи.


Log in to reply