重複行削除ツール

テキストやCSVファイルの重複行をまとめて削除します。名簿の名寄せ、ログの整理、リストの重複チェックなどに。処理はすべてブラウザ内で行われ、入力したデータが外部サーバーに送信されることはありません。

.txt / .csv ファイルはドラッグ&ドロップでも読み込めます(文字コードは UTF-8 / Shift_JIS を自動判定)
② オプション
残す位置
キー列指定(CSV向け)

列を指定すると、その列の値が同じ行を重複として扱います(例:メールアドレスの列で名簿の重複を検出)。※引用符付きCSV(フィールド内にカンマを含む "…" 形式)には未対応です。キー列を指定した入力に引用符が含まれると、誤った削除を防ぐため処理を止めてお知らせします。列の数が足りない行は削除せず残し、警告を表示します。

使い方

  1. 上の入力欄にテキストを貼り付けるか、.txt / .csv ファイルを読み込みます(ドラッグ&ドロップも可能です)。
  2. 必要に応じてオプションを選びます。「残す位置」で重複のうち先勝ち・後勝ちを選べます。CSVの名簿なら「キー列指定」で、メールアドレスや電話番号の列だけを見て重複判定もできます。
  3. 「重複を削除する」を押すと、結果と統計(元の行数・削除した重複行数・残った行数)が表示されます。重複していた行の内訳も確認できます。
  4. 結果はコピーボタンでそのまま使えるほか、.txt ファイルとしてダウンロードできます。出力の改行は LF に統一されます。

特徴

  • ブラウザ内処理で外部送信なし:名簿や顧客リストのような機微なデータも、サーバーに送らずに処理できます。
  • 一括・無制限・無料:会員登録なし、件数の上限なしで使えます。
  • 大容量対応:10万行規模のテキストでも固まらないよう、高速な方式で処理しています。
  • キー列指定:CSVの特定の列(メールアドレス等)の値で重複を判定できます。行全体が違っていても、キーが同じなら重複として検出します。
  • 重複の内訳を表示:どの行が何件重複していたかを一覧で確認できます。

よくある質問

入力したデータがサーバーに送信されることはありますか?

ありません。このツールの処理はすべてお使いのブラウザの中で完結します。名簿・顧客リストなどのデータを安心して貼り付けられます。ページを閉じれば入力内容は残りません。

CSVの特定の列だけで重複を判定できますか?

できます。「キー列指定」で区切り文字(カンマ/タブ)と列番号を指定すると、その列の値が同じ行を重複として扱います。たとえばメールアドレスが3列目なら、列に「3」と入力してください。

何行まで処理できますか?

上限は設けていません。10万行程度のテキストでも実用的な速度で処理できるよう実装しています。ただし、極端に大きなファイルではお使いの端末の性能によって時間がかかる場合があります。

プライバシーについて

このツールは入力データを外部サーバーへ送信しません。ファイル読み込み・重複判定・ダウンロード生成まで、すべてブラウザ内で処理されます。詳しくはプライバシーポリシーをご覧ください。