以下案例:
1、逐条执行10万次
2、分批执行将10万分成m批,每批n条,分多种分批方案来执行。
/**
* 批处理执行
*
* @param m 批次
* @param n 每批数量
* @throws Exception 异常时抛出
*/
public static void testInsertBatch(int m, int n) throws Exception {
init()//初始化环境
Long start = System.currentTimeMillis()
for (int i = 0i <mi++) {
//从池中获取连接
Connection conn = myBroker.getConnection()
Statement stmt = conn.createStatement()
for (int k = 0k <nk++) {
String sql = "\n" +
"insert into testdb.tuser \n" +
"\t(name, \n" +
"\tremark, \n" +
"\tcreatetime, \n" +
"\tupdatetime\n" +
"\t)\n" +
"\tvalues\n" +
"\t('" + RandomToolkit.generateString(12) + "', \n" +
"\t'" + RandomToolkit.generateString(24) + "', \n" +
"\tnow(), \n" +
"\tnow()\n" +
")"
//加入批处理
stmt.addBatch(sql)
}
stmt.executeBatch() //执行批处理
stmt.close()
myBroker.freeConnection(conn)//连接归池
}
Long end = System.currentTimeMillis()
System.out.println("批量执行" + m + "*" + n + "=" + m * n + "条Insert *** 作,共耗时:" + (end - start) / 1000f + "秒!")
}
可以使用java中的模块化编程思想,分成两个模块,一个模块用来收集数据,将收集到的数据存储在一个数组中,另一个模块用来处理每20条数据中选择一条进行入库。
1.收集数据:// 声明一个数组,用于存储收集到的数据String[] dataArray = new String[20]// 循环收集数据,每次收集20条for(int i=0i<20i++){ dataArray[i] = getDataFromSource()}
2.处理数据:// 随机生成一个数字,作为要入库的数据的索引int index = (int)(Math.random() * 20)// 取出要入库的数据String data = dataArray[index]// 将数据入库insertDataIntoDB(data)
欢迎分享,转载请注明来源:内存溢出
评论列表(0条)