简单记录一下的mysql 大批量数据导入:
大批量数据导入情况下,如果还每条数据插入一次,那么效率毫无疑问是非常慢的,每次都需要进行io操作,所以,循环拼接sql进行插入操作,毫无疑问是简单高效的,直接上图:
实体类直接放到list中,可以根据需要,自己调整,数据量达到多少进行一次插入操作:
mapper中,sql进行拼接,相当于 insert into 表名(字段,字段2...) values (值,值2),(值,值2)... :
本地测试,一分钟批量插入大概10w条左右,110w数据,耗时10分钟--12分钟。测试出来的效率,仅供参考。