茶水零食捧上：PQ计算过程把文件放大了4倍，以致不能导入PP

大寒123

zpy2 发表于 2022-9-17 16:35
数据清洗，正则表达式，sql更方便，pq上个正则表达式没那么容易而且快。
能可以看看我的回复，有很多sql ...

大佬，突然想到一个问题还要请教您。
最开始选择pq，还有个原因是模型做完是给别人用的，PQ在Excel里可以发送到别人那里，改一下数据源路径可以直接使用，数据库需要怎么实现这种传递呢？

zpy2

大寒123 发表于 2022-9-17 18:06
大佬，突然想到一个问题还要请教您。
最开始选择pq，还有个原因是模型做完是给别人用的，PQ在Excel里可 ...

数据库做成报表输出啊，可以输出到excel给别人，如果你是给别人操作，要动态报表，还要掌握一门编程语言。

大寒123

zpy2 发表于 2022-9-17 20:31
数据库做成报表输出啊，可以输出到excel给别人，如果你是给别人操作，要动态报表，还要掌握一门编程语言 ...

这个编程语言，该不会是要推荐Python吧……一个财务要学的代码语言越来越多了……
业务数据是不断更新的，目前因为人工处理效率低，才定期做一次。
之前预期是能用PQ完成，这样就可以把工具给到使用者，他们可以直接看到各自负责部分的结果，领导也能实时了解总体结果，当然这个任务给到我时，我也知道知识欠缺，没有承诺多快能完成，才有了学习pq的过程。
如您所说SQL简单的话，我应该也还有时间继续学，只是现在看来可能还需要一门编程语言

zpy2

大寒123 发表于 2022-9-17 22:42
这个编程语言，该不会是要推荐Python吧……一个财务要学的代码语言越来越多了……
业务数据是不断更新的 ...

样就可以把工具给到使用者，他们可以直接看到各自负责部分的结果，领导也能实时了解总体结果

感觉。。。。

一句话，知难行易。慢慢接触就熟悉了。

sql递归涉及到算法的，

如上图，
我到现在差不多10年了，也没搞明白。也可能也是接触少。

polook

导入过程中几百M的很常见，目前我遇到的无法完成查询都是步骤里报错导致

弄个10万或1万行测试看看

大寒123

polook 发表于 2022-9-19 16:24
导入过程中几百M的很常见，目前我遇到的无法完成查询都是步骤里报错导致

弄个10万或1万行测试看看

powerquery的查询都可以完成，只是不能同步到powerpivot。
然后就尝试了一下，查询完成后导入powerpivot的上限，1000条行，1万不行（等了10分钟），但是源数据上百万行，几千几千拆会很麻烦，正在学习数据库，考虑用数据库完成了

fengbao008

大的数据量还是不要用QP，我有个6000多条的数据，因为select用的多，也像你这种情况，文件越来越大越来越大，到后面没操作一步都要等待。

hall0819

大寒123 发表于 2022-9-17 16:18
谢谢你~
不选择再导入数据库处理，是因为目前不会数据库，如果无解，那我学习一下数据库，换个方向解决 ...

可以试试写 DAX 解决，不过 DAX 难度比 SQL 更大。。。

PowerBI极客

PQ导入PP有2G内存限制，你用的是32位OFFICE把，升到64位可以取消这个限制。
这个问题放在模型里解决不难，试试把含XX日期的多列逆透视一下，和原表建立关系

大寒123

fengbao008 发表于 2022-10-12 16:56
大的数据量还是不要用QP，我有个6000多条的数据，因为select用的多，也像你这种情况，文件越来越大越来越大 ...

运行慢有不同的情况，我遇到两种情况，一种是计算方法不够好，优化公式后解决了，另一种原因不知道，但是关闭后台预览数据后，计算就能秒出结果了