大数据测试数据生成工具v1.0 --百万级别一键导出TXT,JSON,MYSQL 。---HIVE专属工具

大数据测试数据生成工具v1.0 --百万级别一键导出TXT,JSON,MYSQL 。---HIVE专属工具,第1张

目录

生成演示生成5百万条记录(4个字段):

一次最大最好在5百万以内,在多就分开生成,主键可以接上上一个

总共生成了3次,一共400MB的txt

使用教程:

1:先安装python环境(有python请跳过),python安装完成后,在点击环境依赖安装。

2:双击启动。

3:等待出现下图中内容 。

4:打开浏览器输入127.0.0.1地址,因我使用的是chrom,推荐也使用chrom。

 5:点击左侧新建表,在d出窗口输入表名 。

6:新建成功后,在左侧所有表里,点击刚刚新建的表。

7:设计好需要的字段后,点击保存表,在点击新建的表 。

8:第7部完成后右侧会出现,需要向字段插入的值,设置好每个字段需要的值,切记!!点保存表!--不同类型字段使用方法在最下

9:设置完字段需要的值吗,后输入需要生成记录的条数,然后点生成数据。 

10:可以一直点击生成数据,会显示当前状态(开始生成数据,正在生成数据,数据生成完成),直到出现“数据生成完成,可以导出”后就可以进行TXT,JSON,MYSQL按需导出。

11:导出TXT,JSON演示

 12:导出mysql演示

字段类型使用说明:


生成演示生成5百万条记录(4个字段):

一次最大最好在5百万以内,在多就分开生成,主键可以接上上一个 总共生成了3次,一共400MB的txt

提示:

软件使用flask开发web,python开发,所以支持多人,但不能多人同时使用 = =,同时间只能一个人用,一个人用完,下个人即可开始使用。

开发原因:学习大数据的路上却不了测试数据 ,可是找了找都不和我胃口,于是!数据生成器诞生!-.-

使用教程:

图片不清晰,在压缩包里有原图

数据生成.rar(包含python环境,原图截图)

1:先安装python环境(有python请跳过),python安装完成后,在点击环境依赖安装。

2:双击启动。

3:等待出现下图中内容 。

4:打开浏览器输入127.0.0.1地址,因我使用的是chrom,推荐也使用chrom。

 5:点击左侧新建表,在d出窗口输入表名 。

6:新建成功后,在左侧所有表里,点击刚刚新建的表。

7:设计好需要的字段后,点击保存表,在点击新建的表 。

8:第7部完成后右侧会出现,需要向字段插入的值,设置好每个字段需要的值,切记!!点保存表!--不同类型字段使用方法在最下

9:设置完字段需要的值吗,后输入需要生成记录的条数,然后点生成数据。 

10:可以一直点击生成数据,会显示当前状态(开始生成数据,正在生成数据,数据生成完成),直到出现“数据生成完成,可以导出”后就可以进行TXT,JSON,MYSQL按需导出。

11:导出TXT,JSON演示

说明:

txt可以自定义分隔符

json有两种模式,默认数组模式,差别请看下图。

 12:导出mysql演示

 说明:

需提前在数据库中键好表,字段类型要与工具表一致

输入  地址,用户名,密码,数据库名,表名,点击导入 即可在控制台看到进度!


字段类型使用说明:

Int类型:当勾选“随记录大小自增后”默认初始值为1,可自定义初始值,在第一个输入框输入开始值

这样就会从自定义初始值开始,随数据大小自增。

String类型:可多选数值中包含哪些内容(都不选默认为字母) ,长度不输入默认为5

种子自定义说明

随机模式:输入随机种子数量,例如输入2,就会只随机2个,比如“aa,bb”后续数据也只会要么是aa,要么是bb。

固定模式:输入固定种子,用逗号分割。例如:“wasd,uhjk”,后续的数据要么是wasd,要么是uhjk

默认模式:即是正常模式会随机每个值

date类型:随机生成日期

开始:设置日期起始值

结束:设置日期终止值

日期自增:会随着数据大小,从起始值开始自增日期 。

List类型:选择需要的泛型目前只支持String和Int,会生成5个 元素的List集合

Map类型:选择需要的泛型目前只支持String和Int,会随机生成5个键值对

Key类型:Map键的类型

Value类型:Map值的类型 


!!!!我会一直更新,维护这个软件!!!

如遇到问题可私信我解决

本文章纯原创,未经允许,不可转载!

欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/langs/915647.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2022-05-16
下一篇 2022-05-16

发表评论

登录后才能评论

评论列表(0条)

保存