Bablosoft

Спарсить сайт с авторизацией

Поддержка
  • F

    Здравствуйте. Необходимо спарсить сайт, на котором требуется авторизация. Каким образом это сделать.
    Есть задумка следующая:
    заходим через браузер на сайт, авторизуемся, подгружаем в http клиент данные куки из браузера и парсим страницы. Но что-то не работае...

    0

  • P

    Проблемы с многопоточностью

    Поддержка
    0 Votes
    3 Posts
    518 Views
    P

    @moonsoon не помогло все так же

  • mocardM

    При выборке с базы 50 000 записей BAS на время виснет и одновременно с ним все асинхронные функции.

    Поддержка
    0 Votes
    2 Posts
    542 Views
    ?

    @mocard проблема не в базе, а в том что в бас работа с ней реализована синхронно (
    Можно работать через веб драйвер в nodejs, в лайфхак есть пример

  • 0

    Баг с логом

    Поддержка
    0 Votes
    2 Posts
    1015 Views
    0

    Походу в новом обновлении была попытка избавиться от этой штуки.
    Но...периодически лог окрашивается так же))) происходит на Post\get Запросах если сделан вывод ответ сервера. И зависон у подопытного сервака. Он выдает типа:

    <HTML><HEAD><TITLE>Bad Request</TITLE> <META HTTP-EQUIV="Content-Type" Content="text/html; charset=us-ascii"></HEAD> <BODY><h2>Bad Request</h2> <hr><p>HTTP Error 400. The request is badly formed.</p> </BODY></HTML>

    или

    <html> <head><title>502 Bad Gateway</title></head> <body bgcolor="white"> <center><h1>502 Bad Gateway</h1></center> <hr><center>nginx</center> </body>

    Тогда html теги 100% не обрабатываются нормально. В моем случае 502 выходит h1 по центру лога)))

  • kainK

    Работа с БД

    Поддержка
    0 Votes
    7 Posts
    1867 Views
    FoxF

    @angelofancient said in Работа с БД:

    @fastspace said in Работа с БД:

    Плюс есть ссылка на wiki.

    Спрошу вопрос, которого в том разделе нет.
    Вот я залил скрипт в магазин и послал его клиенту.

    Я могу ему как-то запаковать готовую БД, что бы она распаковалась вместе с приложением?
    Или мне надо в скрипте предусматривать право первой ночи первого запуска, когда он будет сам себе эту БД создавать на компе у клиента? И только потом с ней работать.

    Как вам удобнее будет работать. Можно подключать всех к удалённой базе, можно прямо в скрипте сохранить массив данных (если он не очень большой) и при первом запуске - выгрузить всё в базу.
    Или выложить куда нибудь файл и циклом перенести в базу пользователя. Можно любые варианты придумать.

    Или мне надо будет подгружать базу из URL и распаковывать её в AppData юзера, дописывая файл Settings.ini?

    После запуска скрипта база заблокируется и вы ни чего не сможете сделать с файлами.

    Оптимальное решение - это экспортировать базу и сообщить пользователю о том, что он может её скачать и импортировать.

  • Z

    Проблема с капчей

    Поддержка
    0 Votes
    16 Posts
    4324 Views
    Z

    Спасибо вам огромное.
    Хотелось бы увидеть нормальное вики конечно )
    Но это так пожелание.