mysql 导入 很大的 CSV ?
1.3G千万级的csv文件,mysqlworkbench导入2天了还不到一半,果断停掉,用load data infile,只要6分钟全部ok,不需要纠结了,就用load data
■网友
做过一个2X10^7条数据,13G+的csv导入,在workbench里用语句load data导入大概耗时1500s,或者你不放心可以先linux切个4,5份(百万级数据量)出来一个个试,大约每个400s上下
■网友
可以看下这篇文章(数据库是SQL Server),http://t.cn/8s2zVva,其中的思路值得参考(awk拼接INSERT字符串)。
■网友
mysql使用Load data infile命令导入.csv比使用workbench图形界面快多了。
■网友
写个脚本来导啊
■网友
有空闲机器就用空闲机器导入然后写个shell慢慢插入没有就用awk处理一下,慢慢插入
推荐阅读
- 电动车第一线|电动车配多大的电池,可以跑100公里以上?师傅告诉你真实答案!
- 人会和 AI 相爱吗
- 经观汽车|日系车企中的“异类”?东风日产将导入e-POWER技术大干增程式混动 | 经观汽车
- 应届生选一个比较大的互联网公司还是一个小但赚钱的游戏公司好
- 某些公司招聘要求中的精通mysql是啥程度
- 雅阁|3款优惠大的合资中型车!亚洲龙最高降1.4万、天籁直降3万
- 怎样学习与研究DCN
- 汽车|2020年汽车行业最大的乌龙,可能就是一汽丰田“傲澜”了!
- 新浪微博之类平台,怎样抵御群体性人身攻击
- vegas 11导入素材的时候为啥会出现空隙呢新人求助!