csv问题

615769472

遇到了 一个读取CSV文件的问题，CSV文件里面数据的分隔符号不是很规整，同一行当中，有分号也有逗号，大概如下："aaa","bbb","ccc","ddd","eee","fff","ggg"
"a,aa","b,("b")b","c"c",c","ddd","eee","fff","ggg"

正确的应该是每两个分号之间是一个字段，不同的字段用逗号间隔，但是数据里面会出现分号套分号又包含逗号的情况，我先用逐行读取的方式，发现无法预知所有的特殊情况。

又采用ADO的方式读取，没有发生混乱，但是读取速度非常慢。所用的SQL很简单，就一个字段限制条件，select 字段1 from 文件 Where 字段1 = 'a',
差不多10分钟才能将内容存入数组，而且存入数组的数据有70多万行，经常出现内存溢出。

源文件有500多万行，150列，5个G左右，我们工作当中只能使用excel，没有其他的工具。请问在这种情况下，还有什么好办法吗？

jsqb

excel最大100多万，不溢出才怪呢

615769472

jsqb 发表于 2018-6-6 06:19
excel最大100多万，不溢出才怪呢

文件是500万行，读取到数组中只有70万行