有点难度，关于去除“重复”(已解决)

thtfzhaobo

[quote]原帖由 xyh_bear 于 2009-8-6 16:11 发表
用以下代码测试你那38340行数据，只需要140秒左右，可以说算最快的了。
楼主再要嫌慢，那就没办法了。

我已经在30秒附近了，最快你恐怕谈不上了

yes2boy

其实思路都是一样的, 出现差异在哪,源码啊源码啊

thtfzhaobo

我还在等结果，看看结果多少条，一会告诉你在我机器上需要多长时间，刚运行1万

zldccmx

我的算法是，将12个数据分成两段
如："3 16 19 4 15 5 18 6 14 11 13 22"
则组合成
" 3 16 19 4 15 5 18 6 14 11 13 22 3 16 19 4 15 5 18 6 14 11 " & chr(10) & " 3 22 13 11 14 6 18 5 15 4 19 16 3 22 13 11 14 6 18 5 15 4 "
第一条直接写进字典，当后面的数据读进来之后，两头加空格与已经生成的字典各KEY进行相似性比较，看是否包含居已有的字典中
如，后面来了一组数据　为 "6 14 11 13 22 3 16 19 4 15 5 18" ,则可以判断为重复数据，"22 13 11 14 6 18 5 15 4 19 16 3"也是重复数据
之所以前后加空格，是避免"2 13 11 14 6 18 5 15 4 19 16 3"这一组数据认作重复。

thtfzhaobo

341秒，8514条结果

zldccmx

原帖由 xyh_bear 于 2009-8-6 16:11 发表
用以下代码测试你那38340行数据，只需要140秒左右，可以说算最快的了。
楼主再要嫌慢，那就没办法了。

附件为：561954

具体实现思路如下：

利用 Dictionary 字典，主键唯一性。

1、逆向逐 ...

应该说，你可能没有理解透楼主的意思
并不是判断数据重合，不能打乱排列，所以你一说排序就错了！

zldccmx

数据排列顺序不能改变，楼主，是不是这样理解

xyh_bear

哈哈，楼主是38340行哦，你的代码测试过这么多吗？

Zamyi

原帖由 zldccmx 于 2009-8-6 16:30 发表
数据排列顺序不能改变，楼主，是不是这样理解

对，就是每一组数据最多只有12种重复

[ 本帖最后由 Zamyi 于 2009-8-6 16:40 编辑 ]

xyh_bear

我没理解错，我是对行的12个数排序到一个字符串，真正在表格中并没有排序哦

你运行一下附件看看嘛