Visual Studio Codeで重複する行を削除するにはどうすればよいですか？

次のテキストがあるとします。

abc
123
abc
456
789
abc
abc

すべての「abc」行を削除して、1つだけ保持したい。並べ替えてもかまいません。結果は次のようになります。

abc
123
456
789

行の順序が重要でない場合

行がアルファベット順に並べ替えられていない場合は、次の手順を実行します
_{（この関連質問に基づいて：正規表現を使用してファイルから重複する行を見つけて削除するにはどうすればよいですか？）}

1. Control+F

2. 「置換モード」を切り替えます

3. 「正規表現を使用」（.*記号の付いたアイコン）を切り替えます

4. で、検索フィールドに入力し^(.*)(\n\1)+$

5. 「置換」フィールドに、$1

6. （「すべて置換」）をクリックします。

行の順序が重要なのでソートできない場合

この場合は、VS Code以外の解決策を使用するか（こちらを参照）、または-ドキュメントがそれほど大きくなく、[すべて置換]ボタンをスパム送信してもかまわない場合は、前の手順に従いますが、手順4および5に従います。これらを入力してください：（_{ソートせずに特定の重複する行を削除に
基づく）}

注意：行が多すぎるファイル（1000以上）のブロック。VSコードがクラッシュする可能性があります。場合によっては空白行が導入されることがあります。

• 検索：((^[^\S$]*?(?=\S)(?:.*)+$)[\S\s]*?)^\2$(?:\n)?

• と置き換えます：$1

次に、重複するオカレンスが存在する回数だけ「すべて置換」ボタンをクリックします。

ボタンをクリックしたときに行数の減少が止まれば十分です。ドキュメントの最後の行に移動して、それを監視します。

これは非常に興味深い拡張です：Transformer

特徴：

• ユニークなライン
• 新しいドキュメントとしての一意の行
• フィルターライン
• 新しいドキュメントとして行をフィルター
• 行を並べ替え
• 行を長さで並べ替え
• カーソルに合​​わせる
• CSVを調整
• コンパクトCSV
• 新しいドキュメントにコピー
• 行を選択
• JSONとしての行
• トリムライン
• 重複する行を新しいドキュメントとしてカウントする
• マクロ

重複する行を削除する場合：

• ドキュメントから重複する行を削除します

• 選択されている場合、または選択されていない場合は現在のブロックで動作します

私は "Unique Lines"コマンド以外にはあまり遊んだことがありませんが、かなりうまくできているようです（マクロレコーダーを試すなど）。

@ Marc.2377の返信に追加します。

順序が重要で、重複する行の最後だけを保持することを気にしない場合、重複する空でない行のみを削除する場合は、次の正規表現を検索します。

^(.+\n)(?=(?:.*\n)*?\1)

重複する空行も削除したい場合は、*代わりに+

^(.*\n)(?=(?:.*\n)*?\1)

何も入れ替えない。

これは1行を取り、さらにいくつか（おそらく0）の行を探し、その後にまったく同じ行を探します。取られた行を削除します。

これは、1回限りの正規表現です。置換ボタンをスパムする必要はありません。

同じ問題が発生し、Visual Studio Codeパッケージの「Sort lines」が見つかりました。詳細については、Visual Studio Codeマーケットプレイスを参照してください（例：行の並べ替え）。

このパッケージには、「並べ替え（一意）」オプションがあり、それが私のために行われました。行頭/行末の空白に注意してください。行が一意であると見なされるかどうかに影響します。

DupChecker拡張機能をインストールし、を押して、F1「重複チェック」と入力します。

重複をチェックし、削除するかどうかを尋ねます。

検索して正規表現に置き換えてください。

• 検索： ^(.+)((?:\r?\n.*)*)(?:\r?\n\1)$

• 交換： $1$2

最初のグループにいくつかの差異を導入することが可能です。

実際にはVisual Studio Codeではありませんが、機能すれば機能します。

1. 新しいExcelスプレッドシートを開く
2. データを列に貼り付けます
3. [ データ ]タブに移動します
4. データの列を選択します（まだ選択していない場合）。
5. [ 重複の削除]をクリックします（バーの中央にあります）
6. クリックOKして重複を削除します。

あなたがVisual Studio Codeを指定したので、それは最良の答えではありませんが、私が言ったように：それが機能する場合、それは機能します:)