Приветствую всех!
Очередная проблема с большими файлами.
Есть папка со словарями 5-6G каждый, ну предположим 10 шт.
Нужно сравнить их на предмет повторяющихся строк и, естественно, убрать оные.
Я так понимаю, нужно сначала их разбить на более мелкие, а потом сравнивать.
Да, скорость обработки и потребляемые ресурсы - самые главные критерии.
Помогите пожалуйста!
Похожие темы
- Форум Виртуальная платежная карта (2015)
- Новости Выпуск minidjvu-mod 0.9m02 (2021)
- Форум Дескрипторы в ОС (2022)
- Форум Linux Mandrake 7.0 RE и Netscape 4.7 (2000)
- Форум Linux Mandrake 7.0 RE и Netscape 4.7 (2000)
- Форум Как ограничить из сети доступ в Интернет по времени? (2020)
- Форум ARM vs. x86, Notebook vs. Raspberry Pi (2015)
- Форум Пытаюсь грызть bash, зубы крошатся (2022)
- Форум Сортировка точек (2012)
- Форум mysql сортировка (2011)