@kuzkuz Можно сделать вот так
Первым делом записываем данные в отдельный файл, после записываем в базу
Во второй раз скрипт проверяет если эти данные в файле и если есть переходит на след. данные, так как это уже повтор, если нету записывает в базу
Проверку делаем через логику IF