前言
為了體現(xiàn)不加索引和添加索引的區(qū)別,需要使用百萬級的數(shù)據(jù),但是百萬數(shù)據(jù)的表,如果使用一條條添加,特別繁瑣又麻煩,這里使用存儲過程快速添加數(shù)據(jù),用時大概4個小時。
創(chuàng)建一個用戶表
CREATE TABLE `t_sales` (
`id` int(11) NOT NULL AUTO_INCREMENT,
`username` varchar(32) COLLATE utf8_bin DEFAULT NULL COMMENT '用戶名',
`password` varchar(64) COLLATE utf8_bin DEFAULT NULL COMMENT '密碼 MD5存儲',
`register_time` timestamp NULL DEFAULT NULL COMMENT '注冊時間',
`type` int(1) DEFAULT NULL COMMENT '用戶類型 1,2,3,4 隨機',
PRIMARY KEY (`id`),
KEY `idx_username` (`username`) USING BTREE
)
然后創(chuàng)建存儲過程,批量添加數(shù)據(jù)。
- 用戶名以常量和數(shù)字拼接
- 密碼是MD5密碼
- 注冊時間是當(dāng)前時間隨機往前推幾天
- type是取1-4隨機范圍值
create procedure salesAdd()
begin
declare i int default 11;
while i = 4000000 do
insert into blog.t_sales
(`username`,`password`,`register_time`,type) values
(concat("jack",i),MD5(concat("psswe",i)),from_unixtime(unix_timestamp(now()) - floor(rand() * 800000)),floor(1 + rand() * 4));
set i = i + 1;
end while;
end
然后調(diào)用存儲過程
改進版
雖然使用存儲過程添加數(shù)據(jù)相對一個個添加更加便捷,快速,但是添加幾百萬數(shù)據(jù)要花幾個小時時間也是很久的,后面在網(wǎng)上找到不少資料,發(fā)現(xiàn)mysql每次執(zhí)行一條語句都默認(rèn)自動提交,這個操作非常耗時,所以在在添加去掉自動提交。設(shè)置 SET AUTOCOMMIT = 0;
create procedure salesAdd()
begin
declare i int default 1;
set autocommit = 0;
while i = 4000000 do
insert into blog.t_sales
(`username`,`password`,`register_time`,type) values
(concat("jack",i),MD5(concat("psswe",i)),from_unixtime(unix_timestamp(now()) - floor(rand() * 800000)),floor(1 + rand() * 4));
set i = i + 1;
end while;
set autocommit = 1;
end
執(zhí)行時間387秒,約為六分鐘,其中還有一半時間用于md5、隨機數(shù)的計算。
[SQL]
call salesAdd();
受影響的行: 0
時間: 387.691s
到此這篇關(guān)于Mysql使用存儲過程快速添加百萬數(shù)據(jù)的文章就介紹到這了,更多相關(guān)Mysql添加百萬數(shù)據(jù)內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
您可能感興趣的文章:- MySQL 到底是如何做到多版本并發(fā)的?
- mysql過濾復(fù)制思路詳解
- MySQL 外鍵(FOREIGN KEY)用法案例詳解
- MySQL如何利用存儲過程快速生成100萬條數(shù)據(jù)詳解
- Python接口自動化淺析pymysql數(shù)據(jù)庫操作流程
- MySQL事務(wù)控制流與ACID特性
- MySQL去除重疊時間求時間差和的實現(xiàn)
- Mysql數(shù)據(jù)庫中datetime、bigint、timestamp來表示時間選擇,誰來存儲時間效率最高
- MySQL的全局鎖和表級鎖的具體使用
- 基于Redo Log和Undo Log的MySQL崩潰恢復(fù)解析