MySQLデータベースの重複レコードを引き出したいのですが。これは次のようにして行うことができます：
SELECT address, count(id) as cnt FROM list
GROUP BY address HAVING cnt > 1その結果：
100 MAIN ST 2重複している各行が表示されるようにプルします。何かのようなもの：
JIM JONES 100 MAIN ST
JOHN SMITH 100 MAIN STこれをどのように行うことができるかについての考えはありますか？最初のコードを実行してから、コード内の2番目のクエリで重複を調べることを回避しようとしています。
回答:
重要なのは、このクエリを書き直して、サブクエリとして使用できるようにすることです。
SELECT firstname,
lastname,
list.address
FROM list
INNER JOIN (SELECT address
FROM list
GROUP BY address
HAVING COUNT(id) > 1) dup
ON list.address = dup.address;SELECT date FROM logs group by date having count(*) >= 2->having(DB::raw('count(*)'), '>', 2)クエリに追加する必要がありました。どうもありがとう！
>=2？使用するだけHAVING COUNT(*) > 1
なぜテーブル自体をINNER JOINしないのですか？
SELECT a.firstname, a.lastname, a.address
FROM list a
INNER JOIN list b ON a.address = b.address
WHERE a.id <> b.idアドレスが3つ以上存在する可能性がある場合は、DISTINCTが必要です。
WHERE a.id > b.id新しい重複のみを除外するように変更DELETEしました。これにより、結果に対して直接実行できます。比較を切り替えて、古い重複をリストします。
このクエリを使用してメールアドレスで重複するユーザーを検索...
SELECT users.name, users.uid, users.mail, from_unixtime(created)
FROM users
INNER JOIN (
SELECT mail
FROM users
GROUP BY mail
HAVING count(mail) > 1
) dupes ON users.mail = dupes.mail
ORDER BY users.mail;重複が複数のフィールドに依存していることもわかります。これらの場合は、以下の形式を使用できます。
SELECT COUNT(*), column1, column2
FROM tablename
GROUP BY column1, column2
HAVING COUNT(*)>1;重複アドレスの検索は、特に精度が必要な場合は、見かけよりもはるかに複雑です。この場合、MySQLクエリでは不十分です...
私はSmartyStreetsで働いています。SmartyStreetsでは、検証や重複除外などの問題に取り組んでおり、同様の問題を抱えた多くの多様な課題を見てきました。
リストの重複にフラグを付けるサードパーティのサービスがいくつかあります。これをMySQLサブクエリのみで実行しても、アドレス形式と標準の違いは考慮されません。USPS（米国住所用）には、これらの標準を作成するための特定のガイドラインがありますが、そのような操作を実行することが認定されているベンダーはほんの一握りです。
したがって、たとえば、テーブルをCSVファイルにエクスポートして、対応するリストプロセッサに送信するのが最善の方法です。SmartyStreetsの一括アドレス検証ツールは、数秒から数分で自動的に実行されます。「重複」と呼ばれる新しいフィールドとその中の値で重複行にフラグを立てYます。
別の解決策は、次のようにテーブルのエイリアスを使用することです。
SELECT p1.id, p2.id, p1.address
FROM list AS p1, list AS p2
WHERE p1.address = p2.address
AND p1.id != p2.idこの場合に実際に行っているのは、元のリストテーブルを取得し、そこから2つのp retendテーブル（p 1とp 2）を作成して、住所列（3行目）で結合を実行することだけです。4行目は、同じレコードが結果セットに複数回表示されないようにします（「重複した重複」）。
これにより、1つのテーブルパスで重複が選択され、サブクエリは選択されません。
SELECT *
FROM (
SELECT ao.*, (@r := @r + 1) AS rn
FROM (
SELECT @_address := 'N'
) vars,
(
SELECT *
FROM
list a
ORDER BY
address, id
) ao
WHERE CASE WHEN @_address <> address THEN @r := 0 ELSE 0 END IS NOT NULL
AND (@_address := address ) IS NOT NULL
) aoo
WHERE rn > 1このクエリは、にROW_NUMBER()存在するものOracleを実際にエミュレートしますSQL Server
詳細については、私のブログの記事を参照してください。
MySQLます。FROM (SELECT ...) aoo、サブクエリです:-P
SELECT firstname, lastname, address FROM list
WHERE
Address in
(SELECT address FROM list
GROUP BY address
HAVING count(*) > 1)SELECT users.name, users.uid, users.mail, from_unixtime(created) FROM users INNER JOIN ( SELECT mail FROM users GROUP BY mail HAVING count(mail) > 1 ) dup ON users.mail = dup.mail ORDER BY users.mail, users.created;
select * from table_name t1 inner join (select distinct <attribute list> from table_name as temp)t2 where t1.attribute_name = t2.attribute_nameあなたのテーブルでは次のようなものになります
select * from list l1 inner join (select distinct address from list as list2)l2 where l1.address=l2.addressこのクエリは、リストテーブル内のすべての個別の住所エントリを提供します...名前などの主キー値がある場合、これがどのように機能するかはわかりません。
最速の重複削除クエリ手順：
/* create temp table with one primary column id */
INSERT INTO temp(id) SELECT MIN(id) FROM list GROUP BY (isbn) HAVING COUNT(*)>1;
DELETE FROM list WHERE id IN (SELECT id FROM temp);
DELETE FROM temp;個人的にこのクエリは私の問題を解決しました：
SELECT `SUB_ID`, COUNT(SRV_KW_ID) as subscriptions FROM `SUB_SUBSCR` group by SUB_ID, SRV_KW_ID HAVING subscriptions > 1;このスクリプトが行うことは、テーブルに複数存在するすべてのサブスクライバーIDと、見つかった重複の数を表示することです。
これはテーブルの列です：
| SUB_SUBSCR_ID | int(11) | NO | PRI | NULL | auto_increment |
| MSI_ALIAS | varchar(64) | YES | UNI | NULL | |
| SUB_ID | int(11) | NO | MUL | NULL | |
| SRV_KW_ID | int(11) | NO | MUL | NULL | |それがあなたにも役立つことを願っています！
Find duplicate Records:
Suppose we have table : Student
student_id int
student_name varchar
Records:
+------------+---------------------+
| student_id | student_name |
+------------+---------------------+
| 101 | usman |
| 101 | usman |
| 101 | usman |
| 102 | usmanyaqoob |
| 103 | muhammadusmanyaqoob |
| 103 | muhammadusmanyaqoob |
+------------+---------------------+
Now we want to see duplicate records
Use this query:
select student_name,student_id ,count(*) c from student group by student_id,student_name having c>1;
+--------------------+------------+---+
| student_name | student_id | c |
+---------------------+------------+---+
| usman | 101 | 3 |
| muhammadusmanyaqoob | 103 | 2 |
+---------------------+------------+---+重複する行をすばやく確認するには、単一の単純なクエリを実行します
ここでは、テーブルにクエリを実行して、同じuser_id、market_place、skuの重複行をすべてリストしています。
select user_id, market_place,sku, count(id)as totals from sku_analytics group by user_id, market_place,sku having count(id)>1;重複する行を削除するには、削除する行を決定する必要があります。たとえば、IDが小さい方（通常は古い方）、またはその他の日付情報が含まれている可能性があります。私の場合、新しいIDが最新の情報であるため、低いIDを削除したいだけです。
まず、正しいレコードが削除されるかどうかを再確認します。ここでは、削除される重複からレコードを選択しています（一意のIDによって）。
select a.user_id, a.market_place,a.sku from sku_analytics a inner join sku_analytics b where a.id< b.id and a.user_id= b.user_id and a.market_place= b.market_place and a.sku = b.sku;次に、削除クエリを実行して、複製を削除します。
delete a from sku_analytics a inner join sku_analytics b where a.id< b.id and a.user_id= b.user_id and a.market_place= b.market_place and a.sku = b.sku;バックアップ、ダブルチェック、検証、バックアップの検証、実行。
パワーロードの答えは確かに最高で、もう1つの変更をお勧めします。LIMITを使用して、dbが過負荷にならないようにします。
SELECT firstname, lastname, list.address FROM list
INNER JOIN (SELECT address FROM list
GROUP BY address HAVING count(id) > 1) dup ON list.address = dup.address
LIMIT 10WHEREがない場合や結合を行う場合は、LIMITを使用することをお勧めします。小さい値から始め、クエリの負荷をチェックしてから、制限を増やします。