コンテンツへスキップ

重複削除 · 並べ替え · 最初を残す

重複行の削除

「apple」が3回出てくる7行のリストから完全に同じ行の重複を削除すると、5行が残ります。ご自分のリストを貼り付けて、重複を削除してください。

結果は、テキストやオプションを変更するたびに更新されます。並べ替えを選ばない限り、出力は入力の行の順序を保ちます。テキストがこのタブの外に出ることはありません。

Scanned by NortonTM Safe Web

概要

価格
料金なし
アカウント
不要
アップロード
対象外 — リストはタブの外に出ません
残すモード
最初のコピー、最後のコピー、一意の行のみ、重複する行のみ
並べ替え
入力順、A→Z、Z→A、自然順。ページの言語の並べ替え規則を使用
サイズ上限
1テキストあたり5,000,000文字

残すモードごと・並べ替え順ごとの同じリスト

サンプルのリストは、apple、Banana、apple、cherry、banana、空行1つ、appleです。これらの表はツールと同じコードから作られています。↵は改行を表します。

各モードで残る行(完全一致での比較)
残す行残った行数削除された行数結果
最初のコピー52apple↵Banana↵cherry↵banana↵
最後のコピー52Banana↵cherry↵banana↵↵apple
一意の行のみ43Banana↵cherry↵banana↵
重複する行のみ16apple
リストitem10、item2、Item1の並べ替え順ごとの結果
並べ替え結果
入力順を保つitem10↵item2↵Item1
A→ZItem1↵item10↵item2
Z→Aitem2↵item10↵Item1
自然順Item1↵item2↵item10

重複した行を削除する手順

1

リストを貼り付ける

ボックスに1行に1項目ずつ入れます。サンプルのリストが最初から入っています。WindowsとUnixのどちらの改行にも対応し、結果にはテキストが使っている種類の改行が保たれます。

2

重複とみなす範囲を選ぶ

「大文字小文字を無視」をオンにすると「Apple」と「apple」が同じ行として扱われ、「各行の前後の空白を除去」で各行の先頭と末尾のスペースが取り除かれ、「空行を削除」で空白の行が除かれます。残す行は、最初のコピー、最後のコピー、一意の行のみ、重複する行のみから選べます。

3

必要なら並べ替えてからコピー

並べ替えを「入力順を保つ」のままにするか、A→Z、Z→A、または自然順(item2がitem10より前)で並べ替えます。「コピー」を押すか、結果を.txtファイルとしてダウンロードします。タイルには、読み込んだ行数、削除した行数、残した行数が表示されます。

重複の見つけ方

各行は、ほかの行と文字単位で全体を比較されます。2つの行が重複になるのは、完全に同じ場合だけです。ただし「大文字小文字を無視」や「前後の空白を除去」をオンにすると、大文字小文字や両端のスペースを無視して比較します。「最初を残す」は各行の最初のコピーを、「最後を残す」は最後のコピーを残します。「一意の行のみ」はちょうど1回だけ現れる行を残し、「重複する行のみ」は2回以上現れる各行のコピーを1つ残します。

並べ替えは重複を削除した後に行われ、ブラウザーのIntl.Collatorを通してページの言語の並べ替え規則を使うため、äのような文字はその言語が定める位置に並びます。自然順は数字の連なりを数として読み、item2はitem10より前に来ますが、通常のA→Zではitem10が先になります。並べ替えは安定しているため、その言語で等しいとみなされる行は入力の順序のままになります。「削除した行」のタイルは、「空行を削除」で除かれた空白の行を含め、出力にないすべての行を数えます。テキストは5,000,000文字まで使えます。

重複行の削除の質問

リストから重複した行を削除するには?

1行に1項目のリストを貼り付けます。前の行を繰り返す行は削除され、最初のコピーが元の位置に残ります。リスト「apple, banana, apple, cherry」は「apple, banana, cherry」になります。タイルに期待した数が表示されたら、結果をコピーします。

最初を残す、最後を残す、一意の行のみ、重複する行のみの違いは?

リストa, b, aの場合、最初を残すとa, b、最後を残すとb, a、一意の行のみだとb(aは2回出てくるため)、重複する行のみだとa(2回以上現れる行のコピー1つ)になります。重複をどうしたいかに合ったモードを選んでください。

「Apple」と「apple」は重複ですか?

既定では重複ではありません。行は完全に一致するかどうかで比較されるため、大文字小文字やスペースの違いで2つの行は別のものになります。「大文字小文字を無視」をオンにすると同じ行として扱われ、「前後の空白を除去」で行頭と行末のスペースが無視されます。「最初を残す」では、最初の綴りが残ります。

自然順の並べ替えとは何ですか?

自然順は、数字の連なりを数として読みます。自然順では、item1、item2、item10の行はその順序のままです。通常のA→Zの並べ替えでは、文字1が2より前に並ぶため、item10がitem2より前に来ます。ファイル名や番号付きのリストに使ってください。

行の元の順序は保たれますか?

はい、並べ替えを選ばない限り保たれます。並べ替えを「入力順を保つ」にすると、残った行はテキストにあった順序で表示されます。並べ替えは安定しているため、等しいと比較される行も入力の順序を保ちます。

リストはどのくらいの大きさまで使え、アップロードされますか?

テキストは5,000,000文字まで使え、短い行が300,000行あるリストでも1秒足らずで処理されます。アップロードはありません。処理はブラウザーのタブ内で実行され、タブを閉じるとテキストは破棄されます。