Удалить Дублирующиеся Строки

Найдите одинаковые строки в документе и удалите дубликаты, чтобы очистить ваш текст.

Duplicates removed: 0

Очистка текста

Описание


Используйте этот текстовый инструмент, чтобы найти уникальные строки в документе обычного текста и удалить копии для очистки текста. Этот инструмент может быть полезен, чтобы избежать повторяющегося содержания в списке.

Учет регистра


Когда учет регистра включен, дубликаты будут удалены только в том случае, если они совпадают с регистром букв оригинала. Отключите его, чтобы выполнять поиск без учета регистра (match case off).

Связанные инструменты


  • Удалить пробелы - Удалите ведущие и завершающие пробелы (пробелы и табуляции) и преобразуйте множественные пробелы в одиночные пробелы.
  • Удалить пустые строки - Избавьтесь от всех строк в тексте, состоящих только из пробелов или табуляций.

Уберите повторные строки, сохранив первое вхождение. Очистите список подписей, источников или значений перед дальнейшей обработкой.

Как пользоваться

Вставьте по одному пункту на строку. Настройте регистр и обрезку пробелов, затем удалите повторы. Проверьте сохранённое написание.

Пример

Apple, Pear и Apple на отдельных строках дадут Apple и Pear. Совпадение apple и Apple зависит от настройки регистра.

Вопросы и ответы

Пробелы делают строки разными?

Да. Включите обрезку для сравнения без внешних пробелов. Оставьте её выключенной, если важны отступы.

Практическая задача

До очистки выберите правило. Коды товара могут различать регистр, обычные подписи нет. Зафиксируйте настройку для сравнения с другой базой.

Дополнительный вопрос

Какой дубль останется?

Сохраняется первое совпадение. Если поздняя запись содержит нужный контекст, объедините сведения до удаления.

Детали для проверки результата

Деталь Пояснение
Порядок и сортировка Разворот меняет текущую последовательность с конца к началу. Сортировка вычисляет новый порядок по значениям. Перевёрнутый список не становится автоматически упорядоченным по нужному правилу.
Естественная сортировка Естественная сортировка сравнивает числовые части как числа, символьная как знаки. Поэтому подписи с 2 и 10 меняются местами при смене метода без изменения их текста.
Учёт регистра Поиск с учётом регистра различает прописные и строчные буквы. Игнорирование регистра объединяет часть различий, но не превращает разные написания и формы слова в один термин.
Обрезка и содержание Обрезка удаляет знаки с края, а не из середины. Обрезка всего текста отличается от обработки каждой строки. В коде и структурированных данных сохраняйте смысловые отступы.
Пробельные символы Обычный пробел, табуляция, неразрывный пробел и пробел нулевой ширины являются разными знаками. Они могут выглядеть похоже. Выбирайте точную очистку, а не считайте всё пустое одинаковым.
Концы строк Перенос может быть записан как LF или CRLF. В редакторе они выглядят похоже, но состоят из разных знаков. Побайтовое сравнение и хеш зависят от записи, включая последний перенос.

ИИ Инструменты