如何用PQ实现同一文件夹下多个文件中相同名称工作表的汇总

PQ小学生

PQ小学生 发表于 2018-12-5 22:48
这个方法 简单 强大  我的结构有点冗杂 做了一些复杂的运算 但并没有这个来的快

不过 如将其变成自定义函数就更方便一些 省得再进到PQ内做修改

PQ小学生

123-456789 发表于 2018-12-5 21:35
为了测试PQ的性能，我将楼主的sheet1表复制了5万份，文件大小466M,按楼主的要求进行提取。5万份表格导入PQ ...

多次测试后 发现还是没有你说的那样快  可能我的电脑配置也受制约 7分钟加载400行数据。。。
不过我修改了一下你的代码 将首字符提取与接下来的判断句并做一起 即
=if Text.StartsWith([],"共") then null else []
另外我将其改成了自定义函数
参看附件

碧水红叶

123-456789 发表于 2018-12-5 21:35
为了测试PQ的性能，我将楼主的sheet1表复制了5万份，文件大小466M,按楼主的要求进行提取。5万份表格导入PQ ...

大神能提供一下详细的操作步骤吗？学习一下。

PQ小学生

经过再次的测试 我已经尽力将步骤优化  当前实测速度为 7.5分钟加载1280个文件  不知是否满意当前的效果
其他坛友讲述的效果我始终达不到
主要在于示例转换文件上的步骤设置
打开附件后 可以查看相关步骤 （如附图一）
其实：
从文件夹加载数据在PQ内部的运作是先做一个示例转换 然后其他文件均按此逻辑合并进来
我将查询变成了函数 方便文件夹位置的选择
使用时只需双击fx图标的查询 填入文件夹所在地址即可（如附图二、三）

c-coming

PQ小学生 发表于 2018-12-4 23:17
刚才就这个问题测试过  不建议一起将几千个文件一起运行  建议以300个文件做一个文件夹 分几次运行完毕 然 ...

现在遇到个问题：有200+商品，某些数据是一个商品一天的数据单独是一个xls文件的。怎么保存和读取比较合适？直接丢在同个文件夹里面，然后查询该文件夹，是否可行？（其实我也能自己先试试，不过刚好看到就问问有没好的方式先）

PQ小学生

这是可行的

永在战场

123-456789 发表于 2018-12-5 21:35
为了测试PQ的性能，我将楼主的sheet1表复制了5万份，文件大小466M,按楼主的要求进行提取。5万份表格导入PQ ...

厉害！不过才五万行数据。