数据库

首页 » 常识 » 预防 » 你向Mysql数据库插入w
TUhjnbcbe - 2020/12/29 17:35:00
北京治疗严重白癜风的医院         https://jbk.39.net/yiyuanzaixian/bjzkbdfyy/
多线程插入(单表)多线程插入(多表)预处理SQL多值插入SQL事务(N条提交一次)多线程插入(单表)问:为何对同一个表的插入多线程会比单线程快?同一时间对一个表的写操作不应该是独占的吗?答:在数据里做插入操作的时候,整体时间的分配是这样的:链接耗时(0%)发送qury到服务器(20%)解析qury(20%)插入操作(10%*词条数目)插入indx(10%*Indx的数目)关闭链接(10%)从这里可以看出来,真正耗时的不是操作,而是链接,解析的过程。MySQL插入数据在写阶段是独占的,但是插入一条数据仍然需要解析、计算、最后才进行写处理,比如要给每一条记录分配自增id,校验主键唯一键属性,或者其他一些逻辑处理,都是需要计算的,所以说多线程能够提高效率。多线程插入(多表)分区分表后使用多线程插入。预处理SQL普通SQL,即使用Statmnt接口执行SQL预处理SQL,即使用PrpardStatmnt接口执行SQL使用PrpardStatmnt接口允许数据库预编译SQL语句,以后只需传入参数,避免了数据库每次都编译SQL语句,因此性能更好。

Stringsql="insrtintotstdb.tusr(nam,rmark,crattim,updattim)valus(?,?,?,?)";for(inti=0;im;i++){//从池中获取连接Connctionconn=myBrokr.gtConnction();PrpardStatmntpstmt=conn.prparStatmnt(sql);for(intk=0;kn;k++){pstmt.stString(1,RandomToolkit.gnratString(12));pstmt.stString(2,RandomToolkit.gnratString(24));pstmt.stDat(,nwDat(Systm.currntTimMillis()));pstmt.stDat(4,nwDat(Systm.currntTimMillis()));//加入批处理pstmt.addBatch();}pstmt.xcutBatch();//执行批处理pstmt.clos();myBrokr.frConnction(conn);//连接归池}多值插入SQL普通插入SQL:INSERTINTOTBL_TEST(id)VALUES(1)多值插入SQL:INSERTINTOTBL_TEST(id)VALUES(1),(2),()使用多值插入SQL,SQL语句的总长度减少,即减少了网络IO,同时也降低了连接次数,数据库一次SQL解析,能够插入多条数据。事务(N条提交一次)在一个事务中提交大量INSERT语句可以提高性能。1、将表的存储引擎修改为myisam2、将sql拼接成字符串,每条左右提交事务。

///summary///执行多条SQL语句,实现数据库事务。////summarymysql数据库///paramnam="SQLStringList"多条SQL语句/parampublicvoidExcutSqlTran(ListstringSQLStringList){using(MySqlConnctionconn=nwMySqlConnction(connctionString)){if(DBVariabl.flag){conn.Opn();MySqlCommandcmd=nwMySqlCommand();cmd.Connction=conn;MySqlTransactiontx=conn.BginTransaction();cmd.Transaction=tx;try{for(intn=0;nSQLStringList.Count;n++){stringstrsql=SQLStringList[n].ToString();if(strsql.Trim().Lngth1){cmd.CommandTxt=strsql;cmd.ExcutNonQury();}//后来加上的if(n0(n%==0

n==SQLStringList.Count-1)){tx.Commit();tx=conn.BginTransaction();}}//tx.Commit();//原来一次性提交}catch(Systm.Data.SqlClint.SqlExcptionE){tx.Rollback();thrownwExcption(E.Mssag);}}}}10w条数据大概用时10s!参考资料:原文:

1
查看完整版本: 你向Mysql数据库插入w