Bablosoft

Как предотвращать дубли при парсинге?

Поддержка
  • 2

    Народ, что используете для предотвращения дубликатов при парсинге? попробовал использовать локальную базу, но по мере заполнения базы слишком сильно лагать скрипт начинает, если использовать файл для хранения в нём всех строк то поидее тоже лагать будет

    0

  • R

    Как при запуске программы каждый раз выводить страницу входа(кастомный интерфейс)?

    Поддержка
    0 Votes
    2 Posts
    477 Views
    ?

    @SaNNtA Авторизация в веб интерефейсе немного сырая, но саппорт сказал, что есть дела по важнее, когда я спросил зачем при неверном вводе пароля нужно перезапускать скрипт. А вашем случае можно после старта самому править файл settings.ini, который в папке engine

  • diloloD

    Как передать данные расширению ?

    Поддержка
    0 Votes
    4 Posts
    674 Views
    diloloD

    @spacerange said in Как передать данные расширению ?:

    chrome://extensions
    Увы там ничего нету

  • ?

    Как запретить загрузку дива

    Поддержка
    0 Votes
    7 Posts
    1100 Views
    FoxF

    @dobrok said in Как запретить загрузку дива:

    На некоторых сайтах есть дивы с изображениями либо фреймами, которые не важны для работы. Но очень грузят поток.

    Можно ли выставить запрет загрузки по id либо классу.

    Код html страницы передаётся полностью и запретить загрузку какой то её части нельзя. Только если код загружается отдельно - как например в ситуации со фреймами, можно запретить url фрейма и в таком случае фрейм не будет загружен.

  • S

    Как это реализовать?

    Поддержка
    0 Votes
    5 Posts
    1267 Views
    xclsvX

    Недавно помогал в телеге кому-то в таком же вопросе.

    Есть два решения задачи в зависимости от условий.
    Если история переписки видна и расслылаете всегда с одного аккаунта, то просто заходите в ЛС и проверяете наличие нужного текста.
    Если истории нет или расслылаете в многоакках, то создайте текстовый файл. Спарсите любой идентификатор пользователя, к примеру, ник. Затем проверьте его наличие в созданном файле (Файл в список - содержит). Если такого нет, делаете то, что хотите. Шлите ЛС и запишите его в этот файл.

    Существование текста на странице обычно проверяю через MATCH. Имхо лучше, т.к. не создаёт лишнюю переменную в ОЗУ.

  • N

    Как дать BAS память

    Поддержка
    0 Votes
    7 Posts
    1716 Views
    N

    @uraabk Спс