Команда uniq сравнивает каждую входную строку с предыдущей. Она может сворачивать, подсчитывать и выбирать группы соседних одинаковых строк, но не ищет разделённые дубликаты по всему файлу.
Text-Fu · Урок 14
uniq (уникальные строки)
Научитесь сворачивать, подсчитывать и фильтровать соседние группы одинаковых строк с помощью uniq.