本文へスキップ
SPCXTools

重複行の削除

リストやテキストから重複行を削除。大文字・小文字の無視、空白のトリミング、並べ替えオプション付き。

ローカルで動作 — ファイルは端末から出ません

ツールを読み込み中…

重複行の削除の使い方

  1. 1入力ボックスにリストやテキストを貼り付けます。1行に1項目ずつ入力してください。
  2. 2重複がすぐに削除されます。各行の最初の出現が元の位置に保持されます。
  3. 3オプションを調整します:大文字・小文字の無視、空白のトリミング、空行の削除、または結果をA→Z順かZ→A順に並べ替え。
  4. 4クリーンアップされたリストをコピーするか、テキストファイルとしてダウンロードします。ステータス行には、削除された行数が表示されます。

あらゆるリストから重複行を削除

スプレッドシート、エクスポートデータ、ログ、コピー&ペーストで集めたリストには、ほとんどの場合、重複が含まれています。このツールは、ワンステップで重複行を削除し、各行の最初の出現を保持するため、リストの元の順序が維持されます。オプション設定により、大文字・小文字を同一として扱ったり、余分な空白を無視したり、空白行を削除したり、結果を並べ替えたりすることができます。すべてがブラウザ内でローカルに実行されるため、メールアドレスや顧客IDなどの機密性の高いリストでも、お使いのコンピューターからデータが外部に送信されることはありません。

オプションの説明

  • 大文字・小文字を無視 – Londonとlondonが同じ行として扱われます。
  • 空白をトリミング – 比較前に各行の先頭と末尾にあるスペースやタブを削除します。「消えない重複」のよくある原因です。
  • 空行を削除 – 空白行を完全に削除します。
  • 並べ替え – 元の順序を維持するか、自然言語に対応した自然順ソートでA→ZまたはZ→Aに並べ替えます。

ステータス行には、入力された行数、ユニークな出力行数、削除された重複行数と空白行数が報告されます。

便利な使い方

メールリストと連絡先リスト。 複数のソースからの登録リストを統合し、メーリングツールにインポートする前に重複アドレスを削除します。実際にはメールアドレスで大文字・小文字は区別されないため、大文字・小文字を無視をオンにすると便利です。

SEOのキーワード調査。 さまざまなツールからエクスポートしたキーワードは、重複が多くなりがちです。すべてを貼り付けて重複を削除し、並べ替えることで、クリーンなマスターリストを作成できます。

データクリーニング。 ピボットテーブルを作成することなく、スプレッドシートの列(商品コード、都市、カテゴリなど)からユニークな値を取得します。

開発者と管理者の方へ。 ログの行、IPアドレス、パッケージ名、ファイルパスの重複を削除します。正規表現テスターと組み合わせることで、まずログから値を抽出し、ここで重複を削除することができます。

ヒント

  • 重複を削除するのではなく、リストの2つのバージョン間の変更点を見つけたい場合は、差分チェッカーをご利用ください。
  • 項目が改行ではなくカンマで区切られている場合は、まず(エディタの検索・置換機能などで)カンマを改行に置き換えてから、結果をここに貼り付けてください。
  • 残った項目数を数えたいですか?ステータス行に表示されるほか、文字数カウンターで詳細な統計情報を確認することもできます。

よくある質問

重複した行のうち、どちらが保持されますか?
最初に出現した行が保持され、それ以降の重複は削除されます。そのため、並べ替えを選択しない限り、リストの元の順序は維持されます。
「大文字・小文字を無視」は何をしますか?
このオプションを有効にすると、Apple、apple、APPLEのように大文字・小文字の違いしかない行は、重複として扱われます。最初に出現したバージョンの表記がそのまま保持されます。
見た目が同じなのに削除されない行があるのはなぜですか?
おそらく、行末のスペースやタブなど、目に見えない文字が原因です。行頭・行末の空白を無視するには、空白をトリミングを有効にしてください。ノーブレークスペースや異なる種類のダッシュなどは、テキストの実際の差異として扱われます。
並べ替えは数字をどのように処理しますか?
並べ替えは自然順ソートを使用するため、item 2はitem 10の前に来ます。また、アクセント付き文字は、基本となる文字と一緒に並べ替えられます。
リストのサイズに制限はありますか?
固定の制限はありません。数十万行のリストでも、すべてブラウザ内で一瞬で処理されます。
データはアップロードされますか?
いいえ。リストはお使いのデバイス上で処理され、どこにも送信されません。メールリスト、顧客データ、社内IDなどの取り扱いに便利です。