每页100万行用select case分类超慢，如何优化

pyfans

huang1314wei 发表于 2017-8-13 09:58
没有附件，不知道你在说什么

根据weight来给分类，给cate赋值，weight 0-1之间，cate为1，1-2之间cate为2，...，4-5为5，weight>5以上cate为6，用for + select case很简单，但是2个sheet接近200万行很慢，所以不知道有什么更好的方法。wieght是带两位小数的。
不需要具体代码，只要指导一下大致的方法就行。多谢

vendor	weight	cate
a	3.00
a	2.00
a	2.00
a	10.00
b	6.00
b	10.00
b	10.00
b	3.00
c	9.00
c	5.00
c	1.00
c	9.00
c	9.00
b	2.00
b	2.00
b	3.00
b	4.00
b	2.00
a	4.00
a	7.00
a	8.00

paciguard

pyfans 发表于 2017-8-13 15:28
多谢，我去研究一下

不同的条件，可以使用多个sql。。。

zhangzhang21

pyfans 发表于 2017-8-13 15:27
多谢，这个我去研究一下。

另外，请问，如果用vba读取csv文件处理数据，csv里的数据可以超过500万行吗 ...

不管怎么样都不是长久之计

你这个级别的数据就应该找你们IT部门，弄个SQL数据库

香川群子

pyfans 发表于 2017-8-13 15:38
根据weight来给分类，给cate赋值，weight 0-1之间，cate为1，1-2之间cate为2，...，4-5为5，weight>5以上 ...

dim t&，weight#
t = Int（[weitht]）+1
If t > 6 then t = 6

这样应该速度很快的。

huang1314wei

pyfans 发表于 2017-8-13 15:38
根据weight来给分类，给cate赋值，weight 0-1之间，cate为1，1-2之间cate为2，...，4-5为5，weight>5以上 ...

不用那么多判断，用一个判断条件即可，另外使用数组不要使用单纯的单元格循环

smhf_6

本人也倾向于数据库，电子表格是用于计算的，一般情况下2003的65536也是用不足的，故2003使用是很轻巧的，而10万、20万等等也是偶尔发生，2010有104万行，但2010太笨重，好多操作在2003是很方便的，但到2010总是提示系统资源不足。
而楼主居然要用足，且用2个表，这还怎么工作啊？个人认为，按你的数据量，恐怕小型数据库也不够吧

pyfans

zhangzhang21 发表于 2017-8-13 15:51
不管怎么样都不是长久之计

你这个级别的数据就应该找你们IT部门，弄个SQL数据库

是，这是正解。但是it一直拖，拖了一年了。

笑着...两年过去

pyfans 发表于 2017-8-13 15:27
多谢，这个我去研究一下。

另外，请问，如果用vba读取csv文件处理数据，csv里的数据可以超过500万行吗 ...

1. CSV好像并没有行限制，我几过千万行的

复制代码

pyfans

香川群子 发表于 2017-8-13 16:08
dim t&，weight#
t = Int（[weitht]）+1
If t > 6 then t = 6

对，单条件确实快多了。配合数组，刚才试了300万，才10秒不到，赞！

pyfans

huang1314wei 发表于 2017-8-13 17:44
不用那么多判断，用一个判断条件即可，另外使用数组不要使用单纯的单元格循环

多谢，刚才试着用了一下数组，超快！