MySQL快速生成大量测试数据（100万、1000万、1亿）

#建测试表
drop table if exists t;
CREATE TABLE t (
  id int NOT NULL AUTO_INCREMENT PRIMARY KEY comment '自增主键', 
  dept tinyint not null comment '部门id',
  name varchar(30) comment '用户名称',
  create_time datetime not null comment '注册时间', 
  last_login_time datetime comment '最后登录时间'
) comment '测试表';
#手工插入第一条测试数据，后面根据此行数据作为基础进行插入
insert into t values(1,1,'user_1', '2018-01-01 00:00:00', '2018-03-01 12:00:00');
set @i=1;


#==================此处拷贝反复执行，直接符合预想的数据量===================
#执行20次即2的20次方=1048576 条记录（100万）
#执行23次即2的23次方=8388608 条记录（800万）
#执行24次即2的24次方=16777216 条记录（1600万）
#执行25次即2的25次方=33554432 条记录（3300万）
#执行26次即2的26次方=67108864 条记录（6700万）
#执行27次即2的27次方=134217728 条记录（1亿3千万）
#......
insert into t(id, dept, name, create_time, last_login_time) 
select @i:=@i+1,
  left(rand()*10,1) as dept,   #随机生成1~10的整数
  concat('user_',@i),   #按序列生成不同的name
  date_add(create_time,interval +@i*cast(rand()*100 as signed) SECOND), #生成有时间大顺序随机注册时间
  date_add(date_add(create_time,interval +@i*cast(rand()*100 as signed) SECOND), interval + cast(rand()*1000000 as signed) SECOND) #生成有时间大顺序的随机的最后登录时间
from t;
#==================此处结束反复执行=====================
#创建索引(视情况执行)
create index idx_dept on t(dept);
create index idx_create_time on t(create_time);
create index idx_last_login_time on t(last_login_time);
复制

# 初始化变量
mysqlHost='localhost'   # mysql Host
mysqlPort=3306          # mysql端口
mysqlUser='root'        # mysql账号
mysqlPwd='123456'       # mysql密码
useDBName='test'        # 测试表所在的库名
runBatch=10             # 循环次数 runBatch=20生成104万记录；23生成838万记录，24生成1677万记录，25生成3300万记录...
tableName='t'           # 测试表表名


sql="
  create database if not exists ${useDBName};
  # 建测试表
  CREATE TABLE ${tableName} (
    id int NOT NULL AUTO_INCREMENT PRIMARY KEY comment '自增主键', 
    dept tinyint not null comment '部门id',
    name varchar(30) comment '用户名称',
    create_time datetime not null comment '注册时间', 
    last_login_time datetime comment '最后登录时间'
  ) comment '测试表';
  #手工插入第一条测试数据，后面根据此行数据作为基础进行插入
  insert into ${tableName} values(1,1,'user_1', '2018-01-01 00:00:00', '2018-03-01 12:00:00');
"
echo "${sql}" | mysql -h${mysqlHost} -u${mysqlUser} -p${mysqlPwd} -P${mysqlPort} ${useDBName}


sql="set @i = 1;"
# 循环拼接SQL
for i in $(seq 1 ${runBatch}); do
  sql="${sql}
    insert into ${tableName}(id, dept, name, create_time, last_login_time) 
    select @i:=@i+1,
      left(rand()*10,1) as dept,
      concat('user_',@i), 
      date_add(create_time,interval +@i*cast(rand()*100 as signed) SECOND),
      date_add(date_add(create_time,interval +@i*cast(rand()*100 as signed) SECOND), interval + cast(rand()*1000000 as signed) SECOND) 
    from ${tableName};
    "
done
echo "${sql}" | mysql -h${mysqlHost} -u${mysqlUser} -p${mysqlPwd} -P${mysqlPort} ${useDBName}
复制