重複行の削除
リストデータから重複している行を取り除き、一意(ユニーク)なリストへと整理します。
入力したデータはサーバーに送りません。すべてブラウザ内で処理するので、APIキーや機密情報も安心して使えます。
▶このツールについて
大量のリストから、同じ内容の行(重複行)を自動で探し出して「1つだけ」残して削除するツールです。顧客のメールアドレスの整理や、大量のURLリスト名寄せ処理などを、数クリックで正確に終わらせます。
「エクセルベースの名簿から重複している人を消したい」「アクセスログの中からユニークなIPアドレスだけを抽出したい」といった、大量のデータ整理をあっという間に行います。データを貼り付けるだけで、同じ行を自動判別してきれいにユニーク化(一意化)。重複のうち「最初に出てきた方を残すか、最後に出た方を残すか」といったオプションや、前後の余計なスペースを無視して比較する設定もあるため、実務でかゆいところに手が届きます。
ツール操作
使い方
- テキスト(1行1項目)を入力欄に貼り付けます
- 「重複削除」をクリックします
- 重複した行が削除され、最初/最後の出現を残すか選択できます
いつ使うか
メールアドレス・URL一覧の重複削除、ログのユニーク化に。
使用例
A\nB\nA\nC → A\nB\nC(最初の出現を残す)
よくある質問
重複の判定は?
行単位で完全一致したものを重複とみなします。前後の空白はトリムして比較するオプションもあります。
大文字小文字を区別する?
デフォルトでは区別します。オプションで区別しない(小文字に統一して比較)も選択可能です。
重複行を削除する方法は?
このツールにテキスト(1行1項目)を貼り付け「重複削除」をクリック。重複した行が自動で削除されます。
メールアドレス一覧の重複を削除するには?
1行1アドレスで貼り付け、このツールで重複削除。最初の出現を残すか最後を残すか選択できます。
URLリストの重複を削除するには?
1行1URLで貼り付け、このツールで重複削除。大量のURLからユニークなものだけを抽出できます。
最初の出現と最後の出現の違いは?
最初を残すと上にある行が優先、最後を残すと下にある行が優先。データの性質で選択します。
重複削除でデータは失われる?
重複した行のみ削除。ユニークな行はすべて残ります。元データのバックアップは推奨します。
ログの重複行を削除するには?
ログを貼り付けてこのツールで重複削除。同じエラーメッセージの重複などが整理されます。
空白をトリムして比較するとは?
行の前後のスペース・タブを無視して比較。" a "と"a"を同じとみなします。
重複削除ツールはデータを送信する?
いいえ。すべてブラウザ内で完結。リストの内容はサーバーに送信されません。