重複行の削除
リストから重複した行を削除します。大文字と小文字の区別、比較前の空白トリム、最初または最後に出現した行を残すオプション、結果の並べ替え（任意）に対応しています。
使い方
- 1 入力欄にリストを貼り付けます。1行につき1項目にしてください。
- 2 比較方法を調整します。大文字・小文字の区別、比較前の空白トリム、重複行のうち最初または最後を残すかを選べます。
- 3 任意で、結果をアルファベット順に並べ替えます。
- 4 重複を除去したリストをコピーします。
このツールを使う理由
- デフォルトでは元の順序がそのまま保持され、勝手に並べ替えられることはありません。
- 大文字・小文字を区別しないオプションを使うと、Apple・apple・APPLEは1つの項目としてまとめられます。
- 空白トリムのオプションは、行頭・行末の空白の違いを無視して比較します。
- カウンターには、実際に削除された行数が正確に表示されます。
よくある質問
空白行も重複として扱われますか？
はい。複数の空白行は1つにまとめられます。空白トリムのオプションを有効にすると、空白文字だけの行も同様にまとめられます。
「最後の行を残す」オプションはどのように動作しますか？
デフォルトの「最初の行を残す」では、最初に出現した行以降の重複がすべて削除されます。「最後の行を残す」を選ぶと、それ以前の出現を削除し、最後に出現した位置の行を残します。後から出てくる項目により新しいデータが入っている場合に便利です。
大文字・小文字を区別しない場合、比較はどのように行われますか？
比較用のキーを作る際に一時的に小文字へ変換しているだけで、実際に残る行の出力は元の大文字・小文字表記のまま保たれます。
関連するツールはありますか？
結果を長さや数値順に並べ替えたい場合はSort Linesを、特定のパターンに一致する行だけを残したい場合はFilter Linesをご利用ください。
重複行の削除 とは？
重複行の削除は、テキストリストから重複している行を取り除くツールです。ブラウザ上だけで動作し、大文字・小文字を区別するかどうかの設定、比較前に各行の空白をトリムするオプション、重複した行のうち最初または最後の出現を残す選択、そして結果を並べ替えるオプションを備えています。
機能
最初または最後を保持
各行の最初または最後の出現を保持しながら、重複を削除します。
大文字小文字・トリムのオプション
大文字・小文字を区別せずに照合し、比較前に空白をトリムできます。ソートオプションも利用可能です。
100%プライベート
お使いのデバイス上で動作します — テキストがアップロードされることは一切ありません。
例
Input
a
b
a
cOutput
a
b
c主な用途
-
1
リストの整理
貼り付けたリストから重複するメールアドレス、URL、キーワードを削除します。
-
2
ログ行の重複排除
繰り返されるログエントリをまとめて、ユニークなイベントだけを確認します。
-
3
ユニークなデータの準備
インポートや分析の前に、重複のない値のセットを作成します。
Zerethonのdeduplicate-linesツールは、ブラウザ上でテキストから重複行を削除し、最初（または最後）の出現を保持します。大文字・小文字を区別しない照合、比較前の空白トリム、結果のアルファベット順ソートのオプションも用意されています。すべてクライアント側で処理され、データがアップロードされることはありません。
- カテゴリ
- クリエイター
- 料金
- 無料
- プライバシー
- ブラウザベース
- 登録
- 不要
参考文献
- Set — JavaScript — MDN
- uniq（Unixユーティリティ） — Wikipedia
プライバシー
明記されない限り、データがブラウザの外に送信されることはありません。重複行の削除 は完全にクライアント側で動作します — サーバーへのアップロードなし、ログなし、入力内容のトラッキングなし。
関連ツール
YouTubeサムネイルダウンローダー
YouTube動画のサムネイルを利用可能なすべての解像度でダウンロードできます。動画URLを貼り付けるだけです。
ツールを開くOpen Graphプレビュー
URLをSNSでシェアしたときにどう表示されるか確認できます。Facebook、Twitter、LinkedIn、Slackでのシェアカードをプレビューします。
ツールを開く単語数・文字数カウント
単語数、文字数、文の数、段落数を瞬時にカウント。読書時間、朗読時間、頻出キーワードも同時に表示します。
ツールを開くLorem Ipsumジェネレーター
Lorem Ipsumのダミーテキストを段落・文・単語単位で生成します。HTMLタグで囲むオプションつき。
ツールを開くZerethon Social で作成・共有・成長しよう
無料登録。ポイントを獲得し、実績を集め、世界中のクリエイターとつながりましょう。