@brotok Попробуйте взять весь HTML код страницы и выполнить следующий код:
[[LOV_CASE]] = [[CODE_HTML]].toLowerCase();где
CODE_HTML - это HTML код страницы
LOV_CASE - HTML код с полностью нижним регистром.
Лучше базу использовать на таком объеме.
И имейте ввиду, что удаление строки в ресурсе, приведет к удалению всех дублей.
А ты через встроенный менеджер базы данных в меню база вверху пробовал через импорт из csv файла ? только разметить файл надо.
Кроме того, можно поставить клиент для mongodb и подключится к базе, тогда можно через командную строку загрузить дайнные из файла.
https://metanit.com/nosql/mongodb/2.3.php
внизу статьи загрузка из файла.