使用場(chǎng)景:
測(cè)試時(shí)需要插入100w甚至1000w,1億以上的數(shù)據(jù),跑sql腳本循環(huán)插入或者程序遍歷插入非常慢。
//DELIMITER DROP PROCEDURE if EXISTS createAmountCount; create PROCEDURE createAmountCount() BEGIN DECLARE i int; set i=0; drop table if exists person ; create table person( id int not null auto_increment, name varchar(40) not null, age int, primary key(id) )engine=innodb charset=gb2312; while i<10000 DO insert into person (name, age) values(CONCAT('usercode',i)); set i=i+1; end while; END; //DELIMITER CALL createAmountCount();
解決思路:
- 寫入文件
- 文件導(dǎo)入到MySQL中
實(shí)現(xiàn)舉例(以100w為例)
1. 使用sql 生成100w數(shù)據(jù)到txt文件中。
public static void main(String[] args) throws IOException { // TODO Auto-generated method stub BufferedWriter writer = new BufferedWriter(new FileWriter(new File("D:/driver/data.txt"), true)); for(int i=0;i<1000000;i++){ if(i%10==0){ writer.write("趙"+(i/10)+"t"+ (int)(Math.random()*100)+"n"); }if(i%10==1){ writer.write("錢"+(i/10)+"t"+ (int)(Math.random()*100)+"n"); } if(i%10==2){ writer.write("孫"+(i/10)+"t"+ (int)(Math.random()*100)+"n"); }if(i%10==3){ writer.write("李"+(i/10)+"t"+ (int)(Math.random()*100)+"n"); } if(i%10==4){ writer.write("鄭"+(i/10)+"t"+ (int)(Math.random()*100)+"n"); }if(i%10==5){ writer.write("吳"+(i/10)+"t"+ (int)(Math.random()*100)+"n"); } if(i%10==6){ writer.write("周"+(i/10)+"t"+ (int)(Math.random()*100)+"n"); }if(i%10==7){ writer.write("王"+(i/10)+"t"+ (int)(Math.random()*100)+"n"); } if(i%10==8){ writer.write("張"+(i/10)+"t"+ (int)(Math.random()*100)+"n"); }if(i%10==9){ writer.write("劉"+(i/10)+"t"+ (int)(Math.random()*100)+"n"); } } writer.close(); }
2. 數(shù)據(jù)庫中將數(shù)據(jù)導(dǎo)入表中:
create table person( id int not null auto_increment, name varchar(40) not null, age int, primary key(id) )engine=innodb charset=gb2312; load data local infile 'D:/driver/data.txt' into table person(name,age); select count(*) from person;
耗費(fèi)時(shí)間:
[SQL]load data local infile 'D:/driver/data.txt' into table person(name,age); 受影響的行: 1000000 時(shí)間: 10.067s
本方案的缺點(diǎn):
1.權(quán)限。 非admin用戶沒有導(dǎo)入。
2. 寫文件代碼。對(duì)測(cè)試人員來說,寫文件不僅僅限于JAVA,可以使用任何語言實(shí)現(xiàn)之。