Bablosoft

Парсер

Поддержка

  • I

    Парсер E-mail с разных сайтов

    Moved Поддержка
    0 Votes
    15 Posts
    1555 Views
    A

    @Ivserzh12 у меня руки асе ни как не дойдут, делайте, под каждый сайт свой шаб. Ссылку вытаскивать не обязательно, есть стандарты, contact contacts и т.д, перебором проверяете сущемствование, того или иного элемента. В зависимости от истины или ложи, составляет дальше шаблоны под каждые контакты. Да долго и муторно, по другому ни как.

  • P

    Парсер сайта с сохранением текста в файл.

    Поддержка
    0 Votes
    2 Posts
    676 Views
    f0cusF

    @padre Наверное в список, а затем сохранить в формате .csv если вам нужна таблица и вы ее будете обрабатывать не басом. Бас в принципе может сам все делать.
    2) создать его. У вас него нет. Ваш цикл это сбор и обработка всех элементов на странице. А вам надо вот тут

    spoiler

    if while for foreach выбирайте под свою задачу

  • P

    Парсер сайтов с чатом (Zendesk)

    Поддержка
    0 Votes
    30 Posts
    5542 Views
    P

    @bms-java ваще круто, спасибо огромное!)

  • P

    Парсер Google

    Поддержка
    0 Votes
    25 Posts
    11833 Views
    S

    @pro100sata есть 2-е базы. 1-я база(список) слов, словарей, цифр, да что угодно, лишь бы гугл отдавал результат. 2-й список - это ваш признаки, которые насобирали. Методом перебора подставляется для каждого элемента 1-го списка, каждый элемент 2-го списка.
    Если взять цифры первым списком, запросы:
    1 "index.php/customer-service"
    1 "/index.php/admin/index/"
    1 "/?___from_store=id"
    1 "/?___store="
    ...

    2 "index.php/customer-service"
    2 "/index.php/admin/index/"
    2 "/?___from_store=id"
    2 "/?___store="

    гугл ищет совпадения на странице, что было 2(в тексте, в тайтле, в юрл, где угодно) + дополнительный пареметр (index.php/customer-service). Выдаст что-то похожее к тому что нужно + куча шлака, который прийдется убирать.
    Для того чтобы собрать как можно больше, используются всякие разные базы. А ваша база с признаками остается одна и таже.
    Используйте вместо первой базы, базу слов, дат или кучу другого, для того что именно, нужно проанализировать движок и узнать, что у них всех есть общего, например дата, но у всех она разная. Можно список дат самому в екселе сделать определенного формата и использовать базу с ними.

  • K

    Парсер

    Поддержка
    0 Votes
    2 Posts
    1132 Views
    supportS

    @kursantmed

    Без конкретных ошибок мне тяжело ответить.
    Попробуйте выставить ожидание полной загрузки в тех местах где страница перегружается.

    То тайм аут загрузки выдает (хотя таймаут уже сделал 10 мин)

    Если страница слишком нагруженная запретите картинки либо запретите ожидание полной загрузки http://prnt.sc/d5i9e0