每天定时从FTP上下载一份上百万数据量的压缩文件到服务器，然后解压，再然后读取这批文件，一个文件可能就1KB,可能一个文件夹里有上百万个文件，怎样快速的读取这批文件的信息，然后插入数据库呢，读完一个文件要同时把这个文件备份到另一个目录下，同时原目录下这个文件也要删除，请问各位大神，有什方法可以快速的写入数据，有没有demo参考一下，本人是菜鸟中菜鸟来的！
这个基本上选取一个你熟悉的脚本语言来做，就比较简单
比如python
你用urllib库下载文件，ZipFile解压，open打开文件，读取内容，通过mysql存储数据库，mysqldb类库存入数据库，shutil类库删除文件