Научитесь использовать команду uniq в Unix и Linux с этими практическими примерами.
Команда uniq в Unix и Linux используется для фильтрации дублированного текста. Она может использоваться сама по себе, но обычно используется вместе с другими командами, такими как определение избыточной информации в файле. Читать
