powerquery如何合并多个csv或者txt文件

kevinzhao0102 · 发表于 2020-1-19 11:52

合并多个excel文件网上的教程很多，但是合并csv文件就傻眼了，不能用workbook函数去解决...

文件太大就不一一上传了
我随便捣鼓了一下，

在content这个箭头展开貌似是可以展开，但是我不确定是不是全部的数据，展开以后有七百万条，我甚至都不知道应该怎么下手了。

kevinzhao0102 · 发表于 2020-1-19 12:10

本帖最后由 kevinzhao0102 于 2020-1-19 13:03 编辑

有人咩 www

libo5563 · 发表于 2020-1-19 13:34

本帖最后由 libo5563 于 2020-1-19 13:51 编辑

CSV 文件可以用别的软件打开一下，查看最后一行，再回pq里检查最后一行数据，可以用Table.LastN() 取最后一行，比较一下或者在pq里翻转表，看第一行（不建议这个，700万行，估计时间不短）如果CSV文件可以查到总行数，也可以在pq用Table.RowCount() 计算一下CSV文件的行数比较一下

kevinzhao0102 · 发表于 2020-1-19 15:17

libo5563 发表于 2020-1-19 13:34
CSV 文件可以用别的软件打开一下，查看最后一行，再回pq里检查最后一行数据，可以用Table.LastN() 取最后一 ...

这个貌似可以用记事本打开，txt文件貌似和csv文件都统一当作csv文件处理。
我不知道怎么展开，可以教教我咩。
是像我说的一样，直接展开？？？然后检查一下最后一行是否一致就可以了。

libo5563 · 发表于 2020-1-19 15:49

http://club.excelhome.net/thread-1467704-1-1.html 看看这个

kevinzhao0102 · 发表于 2020-1-19 15:51

libo5563 发表于 2020-1-19 15:49
http://club.excelhome.net/thread-1467704-1-1.html 看看这个

谢谢受益匪浅

kevinzhao0102 · 发表于 2020-1-19 15:54

libo5563 发表于 2020-1-19 15:49
http://club.excelhome.net/thread-1467704-1-1.html 看看这个

请问您知道powerquery如何转换时间戳么...七百万行的数据excel处理不了，我也不想一个个文件处理（一共三十几个文件）

libo5563 · 发表于 2020-1-19 16:05

所有表格合并起来，无非是为了汇总，如果700万的数据，添加三列，来提取时间，年月日等信息，就要3*7百万次计算，想想都会卡，对源数据就合并表格，导入power pivot里，在power pivot里建一个时间表，连接时间表和合并的数据源表，再出透视表来统计，速度会好很多，当然了，需要学习power pivot了

kevinzhao0102 · 发表于 2020-1-19 22:17

libo5563 发表于 2020-1-19 16:05
所有表格合并起来，无非是为了汇总，如果700万的数据，添加三列，来提取时间，年月日等信息，就要3*7百 ...

毫无头绪..因为没学过powerpivot 明天就是截止日期了呜呜呜。谢谢您

		自动登录	找回密码
密码			免费注册

[求助] powerquery如何合并多个csv或者txt文件