如何删除一组数据中的相同数据?

来源:百度知道 编辑:UC知道 时间:2024/05/28 16:09:57
在tex文本中有一组数据,数据量很大,有几十万个数据,而在这组数据中又有很多重复的数据,且重复不止一次,怎样能比较方便地删除这几十万个数据中的相同数据呢?
希望大家帮帮忙啊,最近每天搞这个,原本就近视的眼睛,再这样下去就要成盲人了...........

如果你安装了EXCEL2007,可以将数据拷贝到Excel中,然后选中重复列,删除重复项即可。

如果没有Excel2007,可以将数据导入数据库,Access最简单,执行几个查询,将数据导出来就可以了。
1、按重复列排序;
2、为按重复列排序,选择重复行的所有第一条记录做标记;
3、删除未标记的行。
4、将数据导回到Text文件。

导入到SQL中,用语句删除,瞬间可完成。人工累》..

用查找替换,把那个数据用空格替换掉!SQL也是可行的

查找/替换