Как в конце каждого потока проверять "Результаты" на дубли, чтобы во время парсинга гугла в окне "Результаты" строки всегда были без повторов?

[Revers]

@Fox Каким образом проверять наличие в файле сохраняемой ссылки ?

[DrPrime]

@Revers с вашим объемом данных это будет ресурсоемко - нужно будет прочитать файл в список и проверить​ существование строки в списке.
П.с. небольшое примечание к моему способу выше - после того, как перезапишите файл, очистите переменную, в которую вы читали файл, это можно сделать действием установить переменную, например​ в значение 0, или выполнить код delete VAR_имя_переменной

[Fox]

@Revers Экшен Читать файл links.txt, содержит (список), If ![[LIST_CONTAINS]] то сохранить результат в файл, с галочками добавить символ окончания строки и дописывать файл.

[Revers]

Ok. Буду тестить.

[Revers]

@DrPrime Как обстоят дела с ютубом? Там при входе нет хэша(да, я смотрел то 5 часовое видео)?

[Fox]

@Revers Я согласен с @DrPrime каждую найденную ссылку сравнивать со всем списком очень ресурсоёмкий процесс. А вот периодическая очистка от дублей конечного результата будет оптимальным вариантом.

[DrPrime]

@Revers еще не смотрел

[Revers]

Как правильно записывать в файл?, чтобы не возникало [02:55:55] Поток №1 : Все данные были обработаны для links

[DrPrime]

@Revers получать расположение ресурса, куда пишем результаты, и с этим адресом работать в с файловой системой

[xclsv]

@Revers
Как вариант, можно писать все значения, выводимые в результат, в базу. Перед каждым выводом проверять наличие значения в базе довольно легко.