@Foppy скорее всего в файле-задании строки просто размножены и не отличаются друг от друга никак. Поэтому баз при ошибке вытирает все копии строки.
Правится это добавлением в строку уникального идентификатора( порядковый номер строки или рандомный набор символов, который не будет использоваться в работе и будет стоять, например, последним в строке и не попадать под уже существующий парсинг csv строки).
В этом случае при краше будет удалятся только строка, которая была в работе.
Сохранение порядка строк при многопоточной обработке
-
На входе имеется файл, состоящий из n-го количества строк на русском. Функция-переводчик в многопоточном режиме обрабатывает эти строки и записывает в другой файл. Следующий вопрос: как реализовать в файле-приемнике исходный порядок строк, разные потоки завершают работу в разное время и строки записываются в произвольном порядке?
-
пиши в глобальный массив - ключ - номер строки
потом пробеги по массиву и сохрани в файт -
This post is deleted!
-
@pavelduglas В теории звучит хорошо, но не совсем понятно как с этим глобальным списком работать в многопоточном режиме при произвольном количестве потоков? В случае с файлом-ресурсом всё просто - закончились строки и скрипт прекращает работу. Со списком что-то не вдупляю как организовать полноценный многопоток