Bablosoft

Парсинг страниц

Поддержка

  • K

    Парсинг Json проблема

    Поддержка
    0 Votes
    2 Posts
    471 Views
    llimonixL

    @Konko said in Парсинг Json проблема:

    $.TopCountryShares

    ответ который получается при получить все значения скорее всего в лог вывести не сможешь, преобразовать в строку и будет вот так
    63c1686c-a7d2-4bef-8eb3-048b5af4070d-image.png

  • ?

    Парсинг JSON и переменная в квадратных скобках

    Поддержка
    0 Votes
    16 Posts
    1900 Views
    FoxF

    @sir-ydroidrrr said in Парсинг JSON и переменная в квадратных скобках:

    @Fox Да, теперь работает, неплохо бы это указать в справке модули.

    Ну вообще это вроде где то было, я же сам не с потолка эту инфу взял :D. Я по началу очень долго сопротивлялся этому модулю, JSON.parse() как то был ближе и роднее ))

  • K

    Парсинг строки

    Поддержка
    0 Votes
    9 Posts
    883 Views
    FoxF

    @kelvin said in Парсинг строки:

    Доброго времени суток
    Проблема заключается в реализации парсинга строки из txt.
    Делаю шаб на многопотоке на несколько разных аккаунтов, новый акк с новой строки в txt
    Вид строки такой:
    IpProxy:LoginProxy:ProxyPassword:TEST@yahoo.com:Password:{"cookies":[{"creation":{"day_of_month":"5","day_of_week":"0","hour":"18","millisecond":"159"......

    Проблема заключается в том что для входа в каждый аккаунт мне требуются куки и в связи с этим я запихнул их в строку, но парсинг строки не хочет парсить ее до конца, то есть все парсит отлично от IpProxy до Password, потом наступает очередь куков и их обрезает до первого двоеточия (получаю на выходе такое ""cookies"") , так как в парсинге строки двоеточие - разделение между значениями , а в куках этих двоеточий достаточно.

    Вопрос, как это можно реализовать , что бы куки не обрезались или возможно кто подскажет другой способ? Пробовал сделать через csv , но там не получается так как строка с куками слишком длинная и оно все криво сохраняет.

    Вы можете кодировать куки в base64. Но я бы посоветовал сохранять куки в отдельный файл и называть его логином аккаунта. При работе просто читать файл с куками по логину аккаунта.

  • B

    Парсинг непрогруженного контента

    Поддержка
    0 Votes
    2 Posts
    563 Views
    FoxF

    @bas_user said in Парсинг непрогруженного контента:

    Всем привет!
    Кто сталкивался с парсингом страницы, где контент прогружается после скрола?
    Пример такой страницы лента ВК
    Подскажите кто знает, как спарить ссылки на непрогруженной странице, например участников группы в ВК, где полный список выдает только после скрола
    Подозреваю что это надо делать через xpath (могу быть не прав), но не понимаю как именно это реализовать

    Данные на страницу подгружаются после скрола, например через ajax (изначально на странице их просто нет). Чтобы парсить в браузере, совершайте скролл, если парсите через запросы, смотрите запросы при подгрузке данных после скрола.

  • A

    Парсинг номера с OLX

    Locked Поддержка
    0 Votes
    2 Posts
    920 Views
    FoxF

    @alex0983 said in Парсинг номера с OLX:

    Приветствую коллеги!
    Кто работал с OLX, есть потребность в небольшом скрипте для получения номера с OLX объявлений через http запросы.
    Кто может помочь?
    http://community.bablosoft.com/topic/7086/скрипт-получения-номера-с-olx

    дубль темы