mysql去重怎么写 mysql sql去重

怎么删除重复的Mysql数据？

MYSQL里有五百万数据，但大多是重复mysql去重怎么写的，真实的就180万，于是想怎样把这些重复的数据搞出来，在网上找了一圈，好多是用NOT IN这样的代码，这样效率很低，自己琢磨组合了一下，找到一个高效的处理方式，用这个方式，五百万数据，十来分钟就全部去除重复了，请各位参考。

第一步mysql去重怎么写：从500万数据表data_content_152里提取出不重复的字段SFZHM对应的ID字段到TMP3表

1 create table tmp3 as select min(id) as col1 from data_content_152 group by SFZHM;

第二步：创建新表RES

1234 CREATE TABLE `res` (`id` int(11),`sfz` char(20)) ENGINE=MyISAM;

第三步：把TMP3表ID对应到data_content_152里需要提取的数据添加到RES表的SFZ字段

1 INSERT INTO res (sfz) SELECT sfzhm FROM data_content_152,tmp3 where data_content_152.id=tmp3.col1

至此，就在MYSQL里实现了，给数据表data_content_152完全删除重复数据，把去重复后的数据导入到RES表。

相关问答

Q1: mysql中去重 用group by优化distinct 用法

在使用 MySQL 时，有时需要查询出某个字段不重复的记录，这时可以使用mysql提供的distinct这个关键字来过滤重复的记录，但是实际中我们往往用distinct来返回不重复字段的条数（count(distinct id)）,其原因是distinct只能返回他的目标字段，而无法返回其他字段，例如有如下表user:

用distinct来返回不重复的用户名：select distinct name from user;，结果为：

这样只把不重复的用户名查询出来了，但是用户的id，并没有被查询出来：select distinct name,id from user;，这样的结果为：

distinct name,id 这样的mysql 会认为要过滤掉name和id两个字段都重复的记录，如果sql这样写：select id,distinct name from user，这样mysql会报错，因为distinct必须放在要查询字段的开头。

所以一般distinct用来查询不重复记录的条数。

如果要查询不重复的记录，有时候可以用group by ：

select id,name from user group by name;

Q2: mysql查询时如何去除重复数据

MySQL 过滤重复数据

有些 MySQL 数据表中可能存在重复的记录mysql去重怎么写，有些情况mysql去重怎么写我们允许重复数据的存在mysql去重怎么写，但有时候mysql去重怎么写我们也需要删除这些重复的数据。

如果mysql去重怎么写你需要读取不重复的数据可以在 SELECT 语句中使用 DISTINCT 关键字来过滤重复数据。

from 树懒学堂- 一站式数据知识学习平台

你也可以使用 GROUP BY 来读取数据表中不重复的数据：

Q3: mysql,sqlserver数据库去重

b. 方法：

☆根据dname分组，查找出deptno最小的。然后再查找deptno不包含刚才查出来的。这样就查询出了所有的重复数据（除了deptno最小的那行）

方法2

删除重复的行

单个字段的如果会了，多个字段也非常简单。就是将group by 的字段增加为你想要的即可。

此处只写一个，其他方法请仿照一个字段的写即可。

查询结果不含指定字段重复

2.表需要删除重复的记录（重复记录保留1条），

3.查询重复

4.1、查找表中多余的重复记录，重复记录是根据单个字段（peopleId）来判断

4.2、删除表中多余的重复记录，重复记录是根据单个字段（peopleId）来判断，只留有rowid最小的记录

4.3、查找表中多余的重复记录（多个字段）

4.4、删除表中多余的重复记录（多个字段），只留有rowid最小的记录

4.5、查找表中多余的重复记录（多个字段），不包含rowid最小的记录

4.6.消除一个字段的左边的第一位：

4.7.消除一个字段的右边的第一位：

4.8.假删除表中多余的重复记录（多个字段），不包含rowid最小的记录

查询重复

Q4: mysql怎么去除重复数据

MySQL 删除重复数据

有些 MySQL 数据表中可能存在重复mysql去重怎么写的记录，有些情况mysql去重怎么写我们允许重复数据mysql去重怎么写的存在，但有时候我们也需要删除这些重复的数据。

本章节我们将为大家介绍如何防止数据表出现重复数据及如何删除数据表中的重复数据。

删除重复数据

如果你想删除数据表中的重复数据，你可以使用以下的SQL语句：

from 树懒学堂 - 一站式数据知识平台

当然你也可以在数据表中添加 INDEX（索引） 和 PRIMAY KEY（主键）这种简单的方法来删除表中的重复记录。方法如下：

关于mysql去重怎么写和mysql sql去重的介绍到此就结束了，不知道你从中找到你需要的信息了吗 ？如果你还想了解更多这方面的信息，记得收藏关注本站。