Bablosoft

Нужна ваша помощь (парсинг, селекторы)

Поддержка

  • T

    парсинг строк в многопотоке

    Поддержка
    0 Votes
    4 Posts
    479 Views
    FoxF

    @themarket said in парсинг строк в многопотоке:

    у меня есть скрипт, который работает в 2 потока, потоки могут начинаться и заканчиваться в разное время, также есть текстовый файл, в котором 2 строки, делаю через парсить CSV строку. Как сделать так, чтобы первый поток всегда работал только с первой строкой из файла, а поток 2 только со 2 строкой соответственно?

    Читайте файл в список, определяйте номер потока и получайте строку из списка по индексу. Только учтите, что нумерация потоков начинается с 1, а индекс элементов списка с 0.

  • P

    Нужна помощь

    Поддержка
    0 Votes
    10 Posts
    1062 Views
    FoxF

    @protonmeil said in Нужна помощь:

    @Fox имеет ли значение, пост или гет запрос перед эти действием? просто когда я получал ошибку, я загружал страницу с помощью пост запроса. Сейчас я сначала загрузил страницу с помощью гет запроса и href извлекается нормально.

    Без разницы. Повторюсь, смотрите данные к которым применяете xpath

  • D

    Нужна помощь с браузером.

    Поддержка
    0 Votes
    4 Posts
    589 Views
    FoxF

    @kuzkuz said in Нужна помощь с браузером.:

    @Fox said in Нужна помощь с браузером.:

    @Dmitriy_meme said in Нужна помощь с браузером.:

    Надо отправить post запрос через браузер только не понимаю как, можете подсказать?

    Через действие "яваскрипт", но проще всё же перенести куки в http-клиент и сделать запрос в нём

    @Fox я далек от этой темы, но хотел бы заняться саморазвитием. Не можете ли накидать простенький пример проектик, для понимания? Спасибо огромное заранее.

    Да мне не сложно, изучайте на здоровье:
    https://learn.javascript.ru/fetch

  • fyyyloF

    Нужна помощь в освоении http запросов.

    Поддержка
    0 Votes
    8 Posts
    2295 Views
    xclsvX

    @Alexx said in Нужна помощь в освоении http запросов.:

    @xclsv солидарен, нынче время get post уже заканчивается для ботов сервисы все более жестче устраивают фрод, фингер и сделан для этого чтобы косить под чела чтобы под чела косить на запросах кони двинешь все это настраивать, настроишь все четко а потом тебя мило попросят пройти в бан, прижде чем ты побреешь бороду которая у тебя отросла за время создания твоего мега пост гет бота, под серьезные проекты не отделаться запросами, под парсинг чек только годно, я сам много писал на запросах сейчас отхожу к браузеру.
    скорость не равна качеству, не гонитесь за скоростью пацаны

    Всё верно. Для крупных сайтов. Мелкие часто ничего не обфусцируют и не прячут.
    Недавно писал парсер для директа. Подсунул куки и спокойно спарсил из кода нужные данные. Из выдачи яндекса всё также. Даже юзер-агент не проверяется. Не говоря уж о других параметрах.
    Для защиты сервера от левых запросов нужно норм сайт перелопатить. Далеко не каждый возьмётся. Ко всему прочему на запросах шаблоны куда надежнее работают. Так что на запросах писать таки нужно. Но без фанатизма. К примеру, когда не хватает мощности сервера или когда скрипт на браузере слишком уж нестабильно работает.

  • G

    Нужна помощь экспертов

    Поддержка
    0 Votes
    4 Posts
    1141 Views
    supportS

    @freeliman Я отвечаю практически на все вопросы. Пожалуйста, не создавайте постов в других темах, которые не относятся к вопросу.