Bablosoft

Парсинг страниц

Поддержка

  • I

    Как организовать быстрый парсинг страниц на содержание текста?

    Поддержка
    0 Votes
    8 Posts
    749 Views
    I

    Все сделал, но возникли проблемы. Скрипт нужен чтобы искать на какой странице Etsy находится товар.
    С помощью Get запроса я получаю код страницы, ищу там товар IndexOf.

    В итоге находит на какой-то странице товар, открывает эту страницу в БАСе как обычно браузером, и в 50% товар там, а в 50% нет (при этом если через браузер найти страницу с товаром, то в этом случае уже Get запрос ее на той странице не находит).

    В чем может быть проблема и как ее решить?

    Или может быть можно как-то с помощью get запроса кликнуть по товару, не заходя через браузер на эту страницу?

  • I

    Парсинг JSON

    Moved Поддержка
    0 Votes
    2 Posts
    523 Views
    G

    @iamemelyanenko, выполнить код

    [[INVITE_LINK]] = JSON.parse([[ОТВЕТ НА ЗАПРОС]]).data[0].invite_link

    Либо с помощью модуля JSON использовав путь $..invite_link

  • VsDiminV

    Парсинг XML RSS

    Поддержка
    0 Votes
    4 Posts
    545 Views
    VsDiminV

    @GhostZ
    Выполнение test_xml.xml вылетает на:
    [495190682] [11:29:28] Поток №1 : ReferenceError: Can't find variable: _do_with_params во время выполнения действия 495190682
    Но в целом идея понятна.
    Кстати. <link href="ссылка"> - это требования нотации HTML. А в XML я могу понимать под <link> все что угодно. Например, индекс какой то своей собственной базы данных.

  • K

    Не извлекает код тяжеловесных страниц

    Поддержка
    0 Votes
    8 Posts
    1270 Views
    FoxF

    @kel91 said in Не извлекает код тяжеловесных страниц:

    @fox ок, спасибо за тест, все работает вполне нормально, хоть и медленно все извлекает, просто у меня инет ростелеком... А запуск в многопотоке в он апликейшн придуман для теста, но естественно корректно работать он не стал, скрипт бесконечно выполняется и все.

    У меня кстати тоже сейчас ростелеком, хрень редкостная, но зато везде есть :D

    Скорость интернета здесь не причём. Сейчас для теста открыл страницу в BAS, отключил интернет и выполнил действие "Код страницы", действие сработало правильно и вернуло код. Так что код страницы BAS получает из движка браузера, ускорить процесс здесь поможет более мощное железо, или как вариант, по больше оперативки.

  • IvanGI

    Парсинг заскриптованной страницы

    Поддержка
    0 Votes
    5 Posts
    1640 Views
    supportS

    @IvanG БАС и так получает код страницы через innerHTML(точнее через outerHTML)
    Так что нужно просто выполнить действие Код страницы, а чтобы выполнить код на странице достаточно просто вызвать действие Яваскрипт, например так, document.documentElement.outerHTML