Скорость парсинга - так и должно быть?



  • По форуму искал, увидел сообщение про антивирус(https://community.bablosoft.com/topic/7918/в-запуске-скрипт-работает-в-7-раз-медленнее). На ПК win10, антивирус вырезан.

    Суть проблемы: Простой парсер берет 4 текстовых блока на странице, склеивает в строку и добавляет в таблицу. С одной страницы получается 50 строк, эти 50 подходов выполняются в цикле (50*4=200).
    Нормально ли что этот процесс занимает в режиме запуска столько же сколько и в режиме отладки? Может надо какую то кнопку нажать, которую я не вижу? 60-70 секунд.
    В режиме отладки нигде затупов нет, каждый кубик выполняется с одинаковой скоростью.



  • @fobos Нормально. Просто решение ваше медленное. Лучше парсить или http клиентом, или хотябы получать код страницы, а затем через xpath собирать данные



  • Спасибо за наводку, буду изучать :)


Log in to reply