Mysql使用存儲過程快速添加百萬數據的示例代碼

Posted on by

前言

為瞭體現不加索引和添加索引的區別，需要使用百萬級的數據，但是百萬數據的表，如果使用一條條添加，特別繁瑣又麻煩，這裡使用存儲過程快速添加數據，用時大概4個小時。
創建一個用戶表

CREATE TABLE `t_sales` (
  `id` int(11) NOT NULL AUTO_INCREMENT,
  `username` varchar(32) COLLATE utf8_bin DEFAULT NULL COMMENT '用戶名',
  `password` varchar(64) COLLATE utf8_bin DEFAULT NULL COMMENT '密碼 MD5存儲',
  `register_time` timestamp NULL DEFAULT NULL COMMENT '註冊時間',
  `type` int(1) DEFAULT NULL COMMENT '用戶類型 1,2,3,4 隨機',
  PRIMARY KEY (`id`),
  KEY `idx_username` (`username`) USING BTREE
)

然後創建存儲過程，批量添加數據。

  • 用戶名以常量和數字拼接
  • 密碼是MD5密碼
  • 註冊時間是當前時間隨機往前推幾天
  • type是取1-4隨機范圍值
create procedure salesAdd()
begin 
 declare i int default 11;
   while i <= 4000000 do
         insert into blog.t_sales
         (`username`,`password`,`register_time`,type) values
         (concat("jack",i),MD5(concat("psswe",i)),from_unixtime(unix_timestamp(now()) - floor(rand() * 800000)),floor(1 + rand() * 4)); 
         set i = i + 1; 
   end while; 
end

然後調用存儲過程

call salesAdd()

改進版

雖然使用存儲過程添加數據相對一個個添加更加便捷，快速，但是添加幾百萬數據要花幾個小時時間也是很久的，後面在網上找到不少資料，發現mysql每次執行一條語句都默認自動提交，這個操作非常耗時，所以在在添加去掉自動提交。設置 SET AUTOCOMMIT = 0;

create procedure salesAdd()
begin 
 declare i int default 1;
 set autocommit = 0;   
   while i <= 4000000 do
         insert into blog.t_sales
         (`username`,`password`,`register_time`,type) values
         (concat("jack",i),MD5(concat("psswe",i)),from_unixtime(unix_timestamp(now()) - floor(rand() * 800000)),floor(1 + rand() * 4)); 
         set i = i + 1; 
   end while;
 set autocommit = 1;     
end

執行時間387秒，約為六分鐘，其中還有一半時間用於md5、隨機數的計算。

[SQL]
call salesAdd();
受影響的行: 0
時間: 387.691s

到此這篇關於Mysql使用存儲過程快速添加百萬數據的文章就介紹到這瞭,更多相關Mysql添加百萬數據內容請搜索WalkonNet以前的文章或繼續瀏覽下面的相關文章希望大傢以後多多支持WalkonNet！

推薦閱讀：