ExcelHome技术论坛

 找回密码
 免费注册

QQ登录

只需一步,快速开始

快捷登录

搜索
EH技术汇-专业的职场技能充电站 妙哉!函数段子手趣味讲函数 Excel服务器-会Excel,做管理系统 Excel Home精品图文教程库
HR薪酬管理数字化实战 Excel 2021函数公式学习大典 Excel数据透视表实战秘技 打造核心竞争力的职场宝典
300集Office 2010微视频教程 数据工作者的案头书 免费直播课集锦 ExcelHome出品 - VBA代码宝免费下载
用ChatGPT与VBA一键搞定Excel WPS表格从入门到精通 Excel VBA经典代码实践指南
楼主: zhaogang1960

[讨论] SQL顺序连接多个工作簿速度的疑问,解释合理加技术分2分

  [复制链接]

TA的精华主题

TA的得分主题

发表于 2014-3-11 13:17 | 显示全部楼层
本帖最后由 百度不到去谷歌 于 2014-3-11 13:18 编辑
HHAAMM 发表于 2014-3-11 13:16
弄不明白!!

不过对于这种循环打开,建议 set cnn 这些语句应该写在循环外面,或许Provider都应该写在外 ...

你放外面试试 速度更慢的!

TA的精华主题

TA的得分主题

发表于 2014-3-11 13:20 | 显示全部楼层
本帖最后由 没名字了 于 2014-3-11 13:25 编辑

回复又丢了,坑爹的验证。白写了那么多。
只有连接的那个过程不是最慢的,而是比过程2快。这也正说明,当系统遇到没有声明的执行语句,需要通过自己默认的方式去处理。之所以比过程2快是快在循环的执行上。

点评

多次遇到,EH网速突然降低,无法回复  发表于 2014-4-2 09:24

TA的精华主题

TA的得分主题

 楼主| 发表于 2014-3-11 13:26 | 显示全部楼层
[广告] VBA代码宝 - VBA编程加强工具 · VBA代码随查随用  · 内置多项VBA编程加强工具       ★ 免费下载 ★      ★使用手册
HHAAMM 发表于 2014-3-11 13:16
弄不明白!!

不过对于这种循环打开,建议 set cnn 这些语句应该写在循环外面,或许Provider都应该写在外 ...

谢谢郝版参与讨论
循环打开有其他用途,当我们不知道工作簿(或数据库)的工作表名时,我们会用ADOX、或OpenSchema方法取得工作表名,后者比较方便,速度也较快,这样就必须循环打开每个工作簿

另外,请看19楼,仅在第一次连接时使用   Set rs = cnn.Execute(SQL)速度更快  
If i <1 Then
i = i + 1
Set rs = cnn.Execute(SQL)
End If

TA的精华主题

TA的得分主题

发表于 2014-3-11 13:27 | 显示全部楼层
zhaogang1960 发表于 2014-3-11 13:17
程序1和程序3比较,前者有查询,速度很快,后者只有连接,没有查询,速度很慢
程序3没有查询,当然就不可 ...

是过程1和过程2
Sub ADO加数组已知工作表名_1() '使用Set rs = cnn.Execute(SQL),arr = rs.GetRows
tt = Timer
    Dim cnn As Object, rs As Object, SQL$, Mypath$, MyName$, arr, brr(1 To 60000, -1 To 11), i&, j&, m&, n&
    Application.ScreenUpdating = False
    Mypath = ThisWorkbook.Path & "\"
    MyName = Dir(Mypath & "*.xls")
    Do While MyName <> ""
        If MyName <> ThisWorkbook.Name Then
            Set cnn = CreateObject("ADODB.Connection")
            cnn.Open "Provider=Microsoft.Jet.OLEDB.4.0;Extended Properties=Excel 8.0;Data Source=" & Mypath & MyName
            SQL = "select * from [Sheet1$a2:l] where 被拆迁人 is not null"
            Set rs = cnn.Execute(SQL)
            arr = rs.GetRows
            For i = 0 To UBound(arr, 2)
                m = m + 1
                brr(m, -1) = m
                For j = 0 To 11
                    brr(m, j) = arr(j, i)
                Next
            Next
        End If
        MyName = Dir()
    Loop
    [a1].CurrentRegion.Offset(2).ClearContents
    [a3].Resize(m, 13) = brr
    rs.Close
    cnn.Close
    Set rs = Nothing
    Set cnn = Nothing
    MsgBox Timer - tt
End Sub

Sub ADO加数组已知工作表名_2() 'arr = cnn.Execute(SQL).GetRows
tt = Timer
    Dim cnn As Object, SQL$, Mypath$, MyName$, arr, brr(1 To 60000, -1 To 11), i&, j&, m&, n&
    Application.ScreenUpdating = False
    Mypath = ThisWorkbook.Path & "\"
    MyName = Dir(Mypath & "*.xls")
    Do While MyName <> ""
        If MyName <> ThisWorkbook.Name Then
            Set cnn = CreateObject("ADODB.Connection")
            cnn.Open "Provider=Microsoft.Jet.OLEDB.4.0;Extended Properties=Excel 8.0;Data Source=" & Mypath & MyName
            SQL = "select * from [Sheet1$a2:l] where 被拆迁人 is not null"
            arr = cnn.Execute(SQL).GetRows
            For i = 0 To UBound(arr, 2)
                m = m + 1
                brr(m, -1) = m
                For j = 0 To 11
                    brr(m, j) = arr(j, i)
                Next
            Next
        End If
        MyName = Dir()
    Loop
    [a1].CurrentRegion.Offset(2).ClearContents
    [a3].Resize(m, 13) = brr
    cnn.Close
    Set cnn = Nothing
    MsgBox Timer - tt
End Sub

这两个过程比较

TA的精华主题

TA的得分主题

发表于 2014-3-11 13:28 | 显示全部楼层
没名字了 发表于 2014-3-11 13:20
回复又丢了,坑爹的验证。白写了那么多。
只有连接的那个过程不是最慢的,而是过程2快。这也正说明,当系统 ...

一直在说set rs这句决定快慢的啊 现在就是讨论为什么这一句加不加会对效率产生影响 和执行循环都没关系的
最后都用arr = cnn.Execute(SQL).GetRows来赋值数组的情况下
set rs加与不加也
也就是说rs就算不在后续语句中用 只要这么执行过 就能加速

TA的精华主题

TA的得分主题

 楼主| 发表于 2014-3-11 13:31 | 显示全部楼层
百度不到去谷歌 发表于 2014-3-11 13:28
一直在说set rs这句决定快慢的啊 现在就是讨论为什么这一句加不加会对效率产生影响 和执行循环都没关系的 ...

是这样,正如19楼所说的,只有第一次使用了set rs就可以加速了,而且是要稍微更快些

TA的精华主题

TA的得分主题

发表于 2014-3-11 13:31 | 显示全部楼层
这是分别运行过程1和过程2,然后删除查询结果后保存的文件大小

运行过程2

运行过程2

运行过程1

运行过程1

TA的精华主题

TA的得分主题

发表于 2014-3-11 13:33 | 显示全部楼层
百度不到去谷歌 发表于 2014-3-11 13:17
你放外面试试 速度更慢的!

如果每次创建对象和创建一次如果没差别或差距是反过来的,那真是没天理了!!

TA的精华主题

TA的得分主题

发表于 2014-3-11 13:36 | 显示全部楼层
HHAAMM 发表于 2014-3-11 13:33
如果每次创建对象和创建一次如果没差别或差距是反过来的,那真是没天理了!!

是啊 所以太奇葩了 cnn和rs的使用在这里完全违反常规了

TA的精华主题

TA的得分主题

发表于 2014-3-11 13:38 | 显示全部楼层
我的测试结果
序号        仅一次set rs        循环set rs        无set rs
1        0.2890625        0.32421875        2.00390625
2        0.296875        0.3515625        2.0234375
3        0.28515625        0.328125        2.0234375
4        0.27734375        0.328125        2.0078125
5        0.296875        0.328125        2.015625
6        0.3359375        0.3984375        2.02734375
7        0.296875        0.33984375        2.01953125
8        0.28125        0.328125        2.02734375
9        0.3203125        0.34765625        2.0703125
10        0.2890625        0.3359375        2.10546875
均值        0.296875        0.341015625        2.032421875
有兴趣可以运行test宏 在本机上测试一下 百思不得其解了

SQL顺序连接多个工作簿速度的疑问.rar

311.14 KB, 下载次数: 29

您需要登录后才可以回帖 登录 | 免费注册

本版积分规则

手机版|关于我们|联系我们|ExcelHome

GMT+8, 2024-4-28 04:24 , Processed in 0.043368 second(s), 8 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 1999-2023 Wooffice Inc.

沪公网安备 31011702000001号 沪ICP备11019229号-2

本论坛言论纯属发表者个人意见,任何违反国家相关法律的言论,本站将协助国家相关部门追究发言者责任!     本站特聘法律顾问:李志群律师

快速回复 返回顶部 返回列表