有处理海量数据经验的来指点一二

chenzyyysl · 发表于 2011-4-26 17:02

最近上司要求做EXCEL数据处理，从大量的数据中做数据挖掘，数据量估计上G，还没仔细确定。原来的本本肯定不能用了，想用一个 THINK PAD 15吋（15.4，15.6）的，有那些型号可选？应注意那些方面？
5000-10000左右。

hanlunacy · 发表于 2011-4-26 17:12

数据量上G？！我这破电脑开个100mb以上的excel就费劲了。。。。

koosky · 发表于 2011-4-29 15:03

我的电脑一样不敢处理这个问题！

dg831451 · 发表于 2011-4-29 21:09

上G的数据。是一个文件还是多文件？还有如果是多个文件的话。那么一个文件一般多大？以及是什么类型的文件？
XLS？SQL的文件？

建议用SQL吧。。这么大的数据以及这么多的数据。。。XLS存储？？？？

还有最好还是配置台式的电脑。10000的台式如果是处理一个上G的SQL文件都还不敢说怎么好。。。更何况本本

ivan2401 · 发表于 2011-4-29 22:44

如果就做一次的时间不长的话可以去学校什么的租机房几天~~

车靓恭司 · 发表于 2011-4-30 08:59

我这个电脑处理个20M的EXCEL表都卡的动不了.....

chenzyyysl · 发表于 2011-4-30 19:42

谢谢各位，刚接手的工作，这几天才基本搞清楚。
多个EXCEL文件，可能需要同时打开。
有现成的数据库系统、机房等，但基本上没有用上，很可惜。原来IT与业务部门间有一些非技术因素合作不好。
我想先把原来的EXCEL流程熟悉后，再上数据库。以后有问题再向EH请教。

现在选了一个 thinkpad E50, 这贴就是在此机上发的。

jssy · 发表于 2011-4-30 19:54

处理上G数据量的数据，用Excel，即使是Excel2010可能也不是一个好的选择。

寂寞情 · 发表于 2011-5-3 13:36

都是高人啊

记得回家 · 发表于 2011-5-4 23:37

都是高人

		自动登录	找回密码
密码			免费注册

[求助] 有处理海量数据经验的来指点一二

呵呵