1
Bagaimana cara menghapus duplikat baris dalam filefile multi-GB yang besar?
Pertanyaan saya mirip dengan pertanyaan ini tetapi dengan beberapa kendala yang berbeda: Saya memiliki \ndaftar kata terbatas besar - satu kata per baris. Ukuran file berkisar dari 2GB hingga 10GB. Saya perlu menghapus garis duplikat. Proses dapat mengurutkan daftar selama menghapus duplikat tetapi tidak diperlukan. Ada cukup ruang pada partisi …