posted by wap, platform: Meizu MX4
anaconda自带的spyder，一个包连ide，numpy，xlrd，sklearn什么的全给你一起装好不用四处找

我也用python处理excel，几十兆十万条以上的数据分分种处理完。但是建议至少转存成csv，可以不用xlrd这个累赘的东西

posted by wap, platform: Meizu MX4

引用:

原帖由 @爱骑车的胖子  于 2016-4-26 08:27 发表
必须csv 原始数据转过了 我还要考虑过滤一下 给用access的人

我的excel算是中量级

基本单个大小在50MB

你别听ls这帮人瞎忽悠，轻量级编程和码农的需求完全不一样。

我从开始学python到拿来干活总共只用了一周，你让我花好几个礼拜折腾ide，打包模块和markup这不是本末倒置么？我看中anaconda就是装上直接用。你这个级别的数据量，回归分析，图表什么的估计少不了，一边学，一边写，一边测试效率很高。

posted by wap, platform: Meizu MX4

引用:

原帖由 @爱骑车的胖子  于 2016-4-26 20:35 发表
谢谢

我看看
其实单个文件个头不大 文件太多 20GB吧 我先实验一下

我的文件比你小一点，30m，40m大小的样子。不过你要有这么多文件，我建议还是导入到db里用sql处理，否则以后管理起来很麻烦。