开个贴讨论一下VBA怎样实现多核心处理大量数据（结论发表）

chentx

EXCEL本来就是设计用来处理小型数据的，你叫它去千万级的数据，不是不行，只是太勉为其难。
不要小看VBA也不要迷信VBA，知道什么地方用什么软件才是正道。
当然，楼主提的问题是如何多线程处理数据，后面的回复有点离题了。但是微软把VBA设计成不支持多线程也是有他的理由，毕竟安全、准确比快速更要占首位。

xiamen168

星剑所指 发表于 2012-7-10 15:27
当然还有一个方法，就是把一个工作簿表分成10个簿，分到10电脑处理数据，处理完了再合并成一个

首先，感谢大家踊跃发言，各抒己见。

把工作簿分成几份，每份工作薄里都含VBA程序，然后手动或程序打开这几份工作表并执行之，
如果多核心的CPU就都全力运行，
这确实是一种方法！
当然，没必要去购买多台电脑了

灰袍法师

xiamen168 发表于 2012-7-10 17:30
首先，感谢大家踊跃发言，各抒己见。

把工作簿分成几份，每份工作薄里都含VBA程序，然后手动或程序打开 ...

这个方法应该是不行的
VBA的解释器依赖于Excel，而Excel任何时候只能有一个副本在运行，不信你自己试一下
我觉得唯一在一台电脑运行多个VBA的方法是：在虚拟机里面运行
当然，1000万数据也看是怎么处理，如果是排序，读取复制这些低端操作，根本不需要多线程，也就几分钟的事情。

liucqa

灰袍法师 发表于 2012-7-10 17:39
这个方法应该是不行的
VBA的解释器依赖于Excel，而Excel任何时候只能有一个副本在运行，不信你自己试一下 ...

可以开多个application吧

灰袍法师

liucqa 发表于 2012-7-10 17:43
可以开多个application吧

可以开多个excel，但是运行的只有一个，其它的都在后台挂起排队。
你可以搞两个不断改变单元格内容的VBA，就会发现只有一个单元格在变动。

liucqa

灰袍法师 发表于 2012-7-10 18:01
可以开多个excel，但是运行的只有一个，其它的都在后台挂起排队。
你可以搞两个不断改变单元格内容的VBA ...

是因为没加doevents导致独占吧

灰袍法师

liucqa 发表于 2012-7-10 18:09
是因为没加doevents导致独占吧

加 doevent 的话，速度暴降到1/10以下
结果十个同时运行的VBA，实际上速度还不如单独一个VBA，没有任何实用意义。

liucqa

一般多线程的场合比较适合异步提交网页，等待服务器返回数据。

计算什么的单线程和多线程差别确实不大。

灰袍法师

liucqa 发表于 2012-7-10 18:55
一般多线程的场合比较适合异步提交网页，等待服务器返回数据。

计算什么的单线程和多线程差别确实不大。

是的，纯数值计算的话。
8核即使全部用上也就顶多8倍速度，没什么意义
改用VB编译出来就有5倍提速效果了
VB编译出DOS命令行程序，同时运行8个，Windows就自动帮你多进程，包管8核都是忙的。
我觉得这样比研究VBA如何实现多线程要简单安全高效得多。
不知道楼主的数据要怎么个处理法
不过一般的查询汇总之类，VBA对付千万级别是没问题的
我在这个帖的附件，就有这样的运行数据。对800万的字典进行1亿次查询，也就不到三分钟嘛。。。。。。
http://club.excelhome.net/thread-688274-1-1.html

耗时 =  149.5859秒

检测到连续可用内存 = 1216 MB

实际使用内存 = 946 MB

哈希表总记录数的峰值 = 8244965[/td] [/tr]

哈希表总查找次数 = 116166198[/td] [/tr]

xiamen168

灰袍法师 发表于 2012-7-10 19:11
是的，纯数值计算的话。
8核即使全部用上也就顶多8倍速度，没什么意义
改用VB编译出来就有5倍提速效果了 ...

不错不错，不愧是法师呀！学习了！

不过，另外还有一种方法让VBA也能多核处理，您听说过吗？