用ACCESS或者SQL SERVER处理EXCEL大表

shepdog

这个数据量，首先要考虑的是数据分解，把数据量降下来，本机的话，再用Access处理。联网的话，必须用SQL数百万的记录，如果数据列多，或者查询设置不合理，Access也会慢得蛋疼。

hunpo

shepdog 发表于 2013-1-4 21:56
这个数据量，首先要考虑的是数据分解，把数据量降下来，本机的话，再用Access处理。联网的话，必须用SQL数百 ...

两个问题：
1.首先，如何进行数据分解呢？
2.其次，如果数据分解了，如何做vlookup呢？
呵呵，等您的指点

shepdog

hunpo 发表于 2013-1-8 10:59
两个问题：
1.首先，如何进行数据分解呢？
2.其次，如果数据分解了，如何做vlookup呢？

不好意思，没什么好指点的。
数据分解，取决于你对数据关系的理解，包括主键和外键的意义。
比如销售订单，可以用客户ID，关联客户信息，而不需要把客户各方面的信息都列出来。那么，销售订单表的客户ID，就是外键；客户ID在客户资料表，就是主键。
当你明白数据关系，Vlookup就不是问题了。PS：数据库就应再想Vlookup这个概念，用户要用的信息是视图表。

shepdog

hunpo 发表于 2013-1-8 10:59
两个问题：
1.首先，如何进行数据分解呢？
2.其次，如果数据分解了，如何做vlookup呢？

不好意思，没什么好指点的。
数据分解，取决于你对数据关系的理解，包括主键和外键的意义。
比如销售订单，可以用客户ID，关联客户信息，而不需要把客户各方面的信息都列出来。那么，销售订单表的客户ID，就是外键；客户ID在客户资料表，就是主键。
当你明白数据关系，Vlookup就不是问题了。PS：在数据库就不应再想Vlookup这个概念，你是设计者，用户要用的信息是视图表。

hunpo

如果把处理放到内存中处理应该是最快的方法，而不是读到数据库来处理，你觉得呢？ 但是说归说，做应该怎么做呢？

incognito

4张表640多万，不算大。现在是大数据时代，呵呵。

如果用内存处理，可以使用PowerPivot;
如果用数据库，可以直接查询处理，或Analysis Service。

下面的图，其中一个表3100多万行，Excel 2013 可以直接导入：

hunpo

高手，真想拜你为师,Analysis Service方便还是直接查询方便啊？

lwqms

incognito 发表于 2013-1-11 14:45
4张表640多万，不算大。现在是大数据时代，呵呵。

如果用内存处理，可以使用PowerPivot;

高手，怎么导入呀
我现在有两张表：
一个是80多万条，一个是70多万条
我安装了excel2013,但是真的不知道如何处理呀，求指导！

xjb_test

{:soso_e100:}

incognito

lwqms 发表于 2013-1-24 10:35
高手，怎么导入呀
我现在有两张表：
一个是80多万条，一个是70多万条

不是高手，呵呵

传个附件上来。