重複行・空行を削除

整理のしかた

• 3つの整理は別々に選べます。 選んだものだけを行い、どれも選ばなければ文章は変わりません。選んだ設定はこの端末に保存されます（文章は保存しません）。
• 順番は「行頭・行末の空白 → 空行 → 重複行」です。空白を削除する設定のときは、空白を除いた後の行で重複を判定します。
• 重複行は、文字の並びが完全に同じ行です。最初に出てきた行を残し、行の順番は変えません。大文字と小文字、全角と半角は別の文字として扱います。
• 空行は、何もない行と、空白だけの行です。空行は重複行として扱わないため、重複行だけを削除しても段落の区切りは残ります。
• 空白は、半角・全角スペース、タブ、ノーブレークスペースなどです。ゼロ幅スペースなどの見えない文字は空白として扱いません。

見た目が同じでも別の行になる場合

「が」を1文字で入力した行と、「か」に濁点の文字を組み合わせた行のように、見た目が同じでも文字の並びが違う行は、別の行として残します。 このような行があるときは、件数をお知らせに表示します。表記ゆれの統一やスペルの修正は行いません。

改行と保存

• 改行は LF・CRLF・CR のどれでも1つの区切りとして扱います。結果の改行は LF です。最後の改行の有無は入力に合わせます。
• 「テキストファイルで保存」は、UTF-8（BOMなし）の text-cleanup.txt を保存します。

上限

入力は最大500,000文字（UTF-16単位）です。一覧には先頭から2,000行までを表示し、コピー・保存には全文が含まれます。