java 如何批量插入数据

java 如何批量插入数据,第1张

通过jdbc就可以执行批量插入了。

以下案例:

1、逐条执行10万次

2、分批执行将10万分成m批,每批n条,分多种分批方案来执行。

/**

* 批处理执行

*

* @param m 批次

* @param n 每批数量

* @throws Exception 异常时抛出

*/

public static void testInsertBatch(int m, int n) throws Exception {

init()//初始化环境

Long start = System.currentTimeMillis()

for (int i = 0i <mi++) {

//从池中获取连接

Connection conn = myBroker.getConnection()

Statement stmt = conn.createStatement()

for (int k = 0k <nk++) {

String sql = "\n" +

"insert into testdb.tuser \n" +

"\t(name, \n" +

"\tremark, \n" +

"\tcreatetime, \n" +

"\tupdatetime\n" +

"\t)\n" +

"\tvalues\n" +

"\t('" + RandomToolkit.generateString(12) + "', \n" +

"\t'" + RandomToolkit.generateString(24) + "', \n" +

"\tnow(), \n" +

"\tnow()\n" +

")"

//加入批处理

stmt.addBatch(sql)

}

stmt.executeBatch() //执行批处理

stmt.close()

myBroker.freeConnection(conn)//连接归池

}

Long end = System.currentTimeMillis()

System.out.println("批量执行" + m + "*" + n + "=" + m * n + "条Insert *** 作,共耗时:" + (end - start) / 1000f + "秒!")

}

可以使用java中的模块化编程思想,分成两个模块,一个模块用来收集数据,将收集到的数据存储在一个数组中,另一个模块用来处理每20条数据中选择一条进行入库。

1.收集数据:// 声明一个数组,用于存储收集到的数据String[] dataArray = new String[20]// 循环收集数据,每次收集20条for(int i=0i<20i++){    dataArray[i] = getDataFromSource()}

2.处理数据:// 随机生成一个数字,作为要入库的数据的索引int index = (int)(Math.random() * 20)// 取出要入库的数据String data = dataArray[index]// 将数据入库insertDataIntoDB(data)


欢迎分享,转载请注明来源:内存溢出

原文地址: https://outofmemory.cn/sjk/9902333.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2023-05-03
下一篇 2023-05-03

发表评论

登录后才能评论

评论列表(0条)

保存