Bablosoft

Изменение настроек браузера и отпечатка

Поддержка

  • A

    Некорректное отображение браузера в режиме отладки

    Поддержка
    0 Votes
    6 Posts
    817 Views
    ?

    about:blank

  • KinokioK

    Отпечатки и заголовки браузера.

    Поддержка
    0 Votes
    4 Posts
    960 Views
    FoxF

    @Kinokio said in Отпечатки и заголовки браузера.:

    @Fox да, и получать их через JSON. Но это для каждого сайта я должен писать новую функцию (т.к сайты по разному тянут данные, разве что все стабильно просят UA). Там ещё куча доп.параметров, около десятка... и так для каждого сайта.
    Так вот, есть ли способ не рутинить и не обрабатывать каждый сайт по отдельности? Типо чтоб он сам понимал что ему отправлять в этих заголовках кроме UA. Если нет, так и напишите.

    Да - использовать брузер. При работе на запросах вам придётся делать ВСЁ в ручную

  • B

    Как правильно установить настройки браузера?

    Поддержка
    0 Votes
    15 Posts
    3379 Views
    alliveA

    @balinS Но если вам это интересно. А мне просто было интересно. Заранее предупреждаю самому это надо терпение. Самый простой способ начать учится. Это зайти на интересующий вас сайт БАСом в браузере и выполнить все действия браузером. Но при этом с перехватом запросов. Стрелка это какую кнопь включить. После выполнения садимся и разбираем. Что куда как слалось.
    alt text

    От себя не запускайте его после того как первый раз выполнили и закрыли это будет чад кутежа и трэш содмии))). Он начнет выполнять все что вы делали и перехваченные get-post ы тоже)) Это выполнение на один раз. для разбора. Если надо еще раз стираете все и снова выполняете с перехватом.
    Еще после того как вы сохраните куки не подставляйте в запросы их сайты не понимают в заголовках 2 куков)) HTTP клиент их сам шлет как и user-agent если вы установили его

  • W

    XPath и порядковые номера элементов

    Поддержка
    0 Votes
    3 Posts
    1605 Views
    W

    @UA То, что нужно! Спасибо большое!

  • venom777V

    Стоп-слова. Парсинг и строки

    Поддержка
    0 Votes
    4 Posts
    2281 Views
    supportS

    @venom777

    Как можно сделать проверку на наличие стоп слов на: странице, в определенном участке на странице? Если стоп-слова заданы в файле и их количество >1000шт. Ну, или сравнить переменную в которой получен никнейм со списком стоп-слов (4к строк), кто-то пробовал?

    Да, я пробовал. Это делается в 2 действия "Ресурс В Список" и "Получить Индекс". Работает на 10 к списке мгновенно
    0_1479039057258_stopwords.xml

    Для того, чтобы проверить наличие слов на странице нужно сначала получить все слова на странице в список, потом сделать проверку в цикле. Если запускать в режиме "Запись", то проверка стоп слов выполняется мгновенно.
    0_1479039804112_stopwords.xml

    Из последнего проекта вы можете сделать функцию и использовать при каждой загрузке страницы.

    Как брать из файла строки мы все знаем, но как можно брать из файла предложения с сохранением форматирования? К примеру, сделать граббер новостей с сайта источника на свой сайт.

    Перед записью новости в файл вы можете кодировать ее в base64, а после чтение раскодировать(все это действием base64)