Нормализатор слов / фраз

Обработка и улучшение качества списка слов

Список слов, которые обрабатываем

Убрать символы

Заменить "ё" на "е"

Убрать дубликаты Считать перестановки дубликатами

Убрать дублирующие пробелы между словами Убрать пробелы и табуляции по краям Удалить пустые строки Преобразовать в нижний регистр Замена пробелов на табуляцию