我想在MySQL数据库中取出重复的记录。这可以用:
SELECT address, count(id) as cnt FROM list
GROUP BY address HAVING cnt > 1
结果是:
100 MAIN ST 2
我想要拖动它，以便它显示复制的每一行。喜欢的东西:
JIM JONES 100 MAIN ST
JOHN SMITH 100 MAIN ST
有什么想法可以做到吗?我试图避免做第一个，然后在代码中用第二个查询查找重复。
当前回答
为什么不直接INNER JOIN表本身呢?
SELECT a.firstname, a.lastname, a.address
FROM list a
INNER JOIN list b ON a.address = b.address
WHERE a.id <> b.id
如果地址可能存在两次以上，则需要DISTINCT。
其他回答
要快速查看重复的行，可以运行一个简单的查询
在这里，我正在查询表，并列出所有重复的行相同的user_id, market_place和sku:
select user_id, market_place,sku, count(id)as totals from sku_analytics group by user_id, market_place,sku having count(id)>1;
要删除重复的行，必须决定要删除哪一行。例如id较低(通常较旧)或其他日期信息。在我的情况下，我只是想删除较低的id，因为较新的id是最新的信息。
首先仔细检查是否正确的记录将被删除。在这里，我正在选择将被删除的副本中的记录(通过唯一id)。
select a.user_id, a.market_place,a.sku from sku_analytics a inner join sku_analytics b where a.id< b.id and a.user_id= b.user_id and a.market_place= b.market_place and a.sku = b.sku;
然后我运行delete查询来删除dupes:
delete a from sku_analytics a inner join sku_analytics b where a.id< b.id and a.user_id= b.user_id and a.market_place= b.market_place and a.sku = b.sku;
备份，双重检查，验证，验证备份，然后执行。
从列表中选择地址where address = any (Select address from (Select address, count(id) CNT from list group by address with CNT > 1) as t1)按地址排序
内部子查询返回具有重复地址的行 外层子查询返回重复地址的地址列。 外层子查询必须只返回一列，因为它被用作操作符'= any'的操作数。
我们也可以发现重复依赖于不止一个字段。对于这些情况，您可以使用下面的格式。
SELECT COUNT(*), column1, column2
FROM tablename
GROUP BY column1, column2
HAVING COUNT(*)>1;
通过此查询通过电子邮件地址查找重复用户…
SELECT users.name, users.uid, users.mail, from_unixtime(created)
FROM users
INNER JOIN (
SELECT mail
FROM users
GROUP BY mail
HAVING count(mail) > 1
) dupes ON users.mail = dupes.mail
ORDER BY users.mail;
寻找重复地址比看起来要复杂得多，特别是当你要求准确性时。在这种情况下，一个MySQL查询是不够的…
我在SmartyStreets工作，在那里我们解决验证和重复数据删除等问题，我看到过很多类似问题的不同挑战。
有一些第三方服务会在列表中为你标记重复项。仅使用MySQL子查询来执行此操作不会考虑地址格式和标准的差异。美国邮政总局(USPS)有一定的指导方针来制定这些标准，但只有少数供应商获得了执行此类操作的认证。
因此，我建议您最好的答案是，例如，将表导出到CSV文件中，并将其提交给有能力的列表处理程序。其中一个是LiveAddress，它会在几秒钟到几分钟内自动为你完成。它将用一个名为“duplicate”的新字段和一个Y值标记重复的行。
