目前用的MYSQL,存放在笔记本SSD跑的,发现除了磁盘100%占用,其余效用都很低。
感觉是磁盘限制,速度,整体200G的数据我才导入了4G的一个子表,进表就需要20分钟。
索引一直超时失败,我直接设置了12000s,也用了12分钟
请求支招,这种体量的数据,是不是用集群或者云服务好一点?这方面不是太懂
你看看一张数据表有多少数据量,如果过大就分表分库处理
数据初始化的时候,表上先不要加索引,等数据导完再加索引。
另外,不要逐行insert,直接用mysql的load data。
你看到磁盘占用100%,那不一定是写入占用,可能是查询占用