Разработать скрипт для быстрой сверки больших текстовых файлов
Есть файл с фамилиями и именами размером в 100 Гб. Требуется разработать скрипт на Python, с помощью которого можно будет удобно и главное быстро сверять основной файл с другими (более мелкими) - от 10 Мб до 1 Гб. Редко - больше. В основном файле фамилии и имена написаны только на латинице и разделяются знаком :
Иногда приходится сверять мелкие списки фамилий с тем, что уже есть в основном файле. И после этой проверки сохранить содержимое проверяемого файла на 2 новых: уникальные фамилии и имена в одном файле... Читать дальше...