ExcelHome技术论坛

 找回密码
 免费注册

QQ登录

只需一步,快速开始

快捷登录

搜索
EH技术汇-专业的职场技能充电站 妙哉!函数段子手趣味讲函数 Excel服务器-会Excel,做管理系统 效率神器,一键搞定繁琐工作
HR薪酬管理数字化实战 Excel 2021函数公式学习大典 Excel数据透视表实战秘技 打造核心竞争力的职场宝典
让更多数据处理,一键完成 数据工作者的案头书 免费直播课集锦 ExcelHome出品 - VBA代码宝免费下载
用ChatGPT与VBA一键搞定Excel WPS表格从入门到精通 Excel VBA经典代码实践指南
查看: 111|回复: 2

[求助] TABLE.BUFFER 使用场景疑问

[复制链接]

TA的精华主题

TA的得分主题

发表于 2024-12-11 09:10 | 显示全部楼层 |阅读模式
[广告] VBA代码宝 - VBA编程加强工具 · VBA代码随查随用  · 内置多项VBA编程加强工具       ★ 免费下载 ★      ★使用手册
本帖最后由 flashevil 于 2024-12-11 09:14 编辑

假设A表是一个做了一长串步骤的中间表(无需加载)
接下来B,C...表都要引用A表做 左连接。

我目前的做法是 每个表 左连接A表前 单独插入一个 BUFFER(A)的步骤 ,然后 左连接引用这个步骤而不是A表

想问的问题是:
那如果多个表都要调用A,是不是可以 直接在 A表 的最后一个步骤中 在外面套一层TABLE.BUFFER就可以了?
A表本身数据量很大,JOIN后刷新非常慢,想优化一下。
请大佬们指点下优化思路

PS:这种情景下TABLE.BUFFER的上限一般是对多大的表适合这样?会不会如果A表太大了,这样BUFFER 内存吃不消?

TA的精华主题

TA的得分主题

发表于 2024-12-12 13:52 | 显示全部楼层
在Power Query中,TABLE.BUFFER函数对提高运算效率可能有一定的作用,但具体效果取决于多种因素。

TABLE.BUFFER是一个表缓存函数,它的作用是将表缓存在内存中,以便在计算过程中与外部更改隔离。通过缓存表,可以减少对原始数据的重复读取,从而可能提升后续步骤的处理速度。这在处理大数据集或复杂查询时尤其有用,因为频繁的磁盘访问和数据读取会显著影响性能。

然而,需要注意的是,TABLE.BUFFER并不总是能提高性能。在某些情况下,它甚至可能导致性能下降。这是因为读取所有数据并将其存储在内存中需要额外的成本,特别是当数据量非常大时。此外,缓冲还阻止了下游折叠(downstream folding),这可能会影响某些操作的性能。

因此,在使用TABLE.BUFFER时,建议根据具体情况进行测试和评估。如果观察到性能提升,则可以继续使用该函数;如果性能没有改善或反而下降,则可能需要考虑其他优化策略。

总的来说,TABLE.BUFFER是提高Power Query运算效率的一种可能方法,但其效果因具体情况而异。在优化查询性能时,建议综合考虑多种因素,包括数据量、查询复杂度、硬件资源等,以找到最佳的优化方案。

TA的精华主题

TA的得分主题

发表于 2024-12-12 13:55 | 显示全部楼层
中间过程表与数据源隔离,用这个buffer函数,不如将中间表导出后再导入,后者效果明显.
您需要登录后才可以回帖 登录 | 免费注册

本版积分规则

手机版|关于我们|联系我们|ExcelHome

GMT+8, 2024-12-25 02:57 , Processed in 0.032794 second(s), 8 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 1999-2023 Wooffice Inc.

沪公网安备 31011702000001号 沪ICP备11019229号-2

本论坛言论纯属发表者个人意见,任何违反国家相关法律的言论,本站将协助国家相关部门追究发言者责任!     本站特聘法律顾问:李志群律师

快速回复 返回顶部 返回列表