关于数据很多的大文件去重(保留最后一次)

ykcbf1100 · 发表于 2025-3-28 13:57

shiruiqiang 发表于 2025-3-28 13:07
说实话，是否可以这样：
要达到lz的要求，从表2到表1，字典的值就等于最后一个，就是顺序有点不同

也是一种思路。表3的数据是先表1后表2的，这样的话，表循环是不是应该从1至2这样？

lizhipei78 · 发表于 2025-3-28 15:19

shiruiqiang 发表于 2025-3-28 13:07
说实话，是否可以这样：
要达到lz的要求，从表2到表1，字典的值就等于最后一个，就是顺序有点不同

这个确实是，可以少一个字典

lizhipei78 · 发表于 2025-3-28 15:43

受shiruiqiang 大佬启发，一个字典就可以了

lizhipei78 · 发表于 2025-3-28 15:44

大文件去重.rar (18.49 KB, 下载次数: 3)

lizhipei78 · 发表于 2025-3-28 16:35

本帖最后由 lizhipei78 于 2025-3-28 16:38 编辑

用一个字典减少一次循环，不知道速度能不能上来

lizhipei78 · 发表于 2025-3-28 17:12

本帖最后由 lizhipei78 于 2025-3-28 17:18 编辑

受30楼大佬启发，改变循环顺序，速度应该有所上升
微信截图_20250328171036.png

lizhipei78 · 发表于 2025-3-28 17:14

本帖最后由 lizhipei78 于 2025-3-28 17:19 编辑

大文件去重.rar (18.82 KB, 下载次数: 2)

阿煮 · 发表于 2025-3-29 09:21

lizhipei78 发表于 2025-3-28 17:14

厉害了

也费心了非常感谢。虽然看不懂JSA但是以后万一学了呢非常感谢

用户名		自动登录	找回密码
密码			免费注册

[求助] 关于数据很多的大文件去重(保留最后一次)