大数据测试数据生成工具v1.0 --百万级别一键导出TXT,JSON,MYSQL 。---HIVE专属工具
目录
生成演示生成5百万条记录(4个字段):
一次最大最好在5百万以内,在多就分开生成,主键可以接上上一个
总共生成了3次,一共400MB的txt
使用教程:
1:先安装python环境(有python请跳过),python安装完成后,在点击环境依赖安装。
2:双击启动。
3:等待出现下图中内容 。
4:打开浏览器输入127.0.0.1地址,因我使用的是chrom,推荐也使用chrom。
5:点击左侧新建表,在弹出窗口输入表名 。
6:新建成功后,在左侧所有表里,点击刚刚新建的表。
7:设计好需要的字段后,点击保存表,在点击新建的表 。
8:第7部完成后右侧会出现,需要向字段插入的值,设置好每个字段需要的值,切记!!点保存表!--不同类型字段使用方法在最下
9:设置完字段需要的值吗,后输入需要生成记录的条数,然后点生成数据。
10:可以一直点击生成数据,会显示当前状态(开始生成数据,正在生成数据,数据生成完成),直到出现“数据生成完成,可以导出”后就可以进行TXT,JSON,MYSQL按需导出。
11:导出TXT,JSON演示
12:导出mysql演示
字段类型使用说明:
生成演示生成5百万条记录(4个字段):
一次最大最好在5百万以内,在多就分开生成,主键可以接上上一个
总共生成了3次,一共400MB的txt
提示:
软件使用flask开发web,python开发,所以支持多人,但不能多人同时使用 = =,同时间只能一个人用,一个人用完,下个人即可开始使用。
开发原因:学习大数据的路上却不了测试数据 ,可是找了找都不和我胃口,于是!数据生成器诞生!-.-
使用教程:
图片不清晰,在压缩包里有原图
下载:https://wwb.lanzouw.com/ilfRl04lhlaj 密码:c324
(包含python环境,原图截图)
1:先安装python环境(有python请跳过),python安装完成后,在点击环境依赖安装。
2:双击启动。
3:等待出现下图中内容 。
4:打开浏览器输入127.0.0.1地址,因我使用的是chrom,推荐也使用chrom。
5:点击左侧新建表,在弹出窗口输入表名 。
6:新建成功后,在左侧所有表里,点击刚刚新建的表。
7:设计好需要的字段后,点击保存表,在点击新建的表 。
8:第7部完成后右侧会出现,需要向字段插入的值,设置好每个字段需要的值,切记!!点保存表!--不同类型字段使用方法在最下
9:设置完字段需要的值吗,后输入需要生成记录的条数,然后点生成数据。
10:可以一直点击生成数据,会显示当前状态(开始生成数据,正在生成数据,数据生成完成),直到出现“数据生成完成,可以导出”后就可以进行TXT,JSON,MYSQL按需导出。
11:导出TXT,JSON演示
说明:
txt可以自定义分隔符
json有两种模式,默认数组模式,差别请看下图。
12:导出mysql演示
说明:
需提前在数据库中键好表,字段类型要与工具表一致
输入 地址,用户名,密码,数据库名,表名,点击导入 即可在控制台看到进度!
字段类型使用说明:
Int类型:当勾选“随记录大小自增后”默认初始值为1,可自定义初始值,在第一个输入框输入开始值
这样就会从自定义初始值开始,随数据大小自增。
String类型:可多选数值中包含哪些内容(都不选默认为字母) ,长度不输入默认为5
种子自定义说明
随机模式:输入随机种子数量,例如输入2,就会只随机2个,比如“aa,bb”后续数据也只会要么是aa,要么是bb。
固定模式:输入固定种子,用逗号分割。例如:“wasd,uhjk”,后续的数据要么是wasd,要么是uhjk
默认模式:即是正常模式会随机每个值
date类型:随机生成日期
开始:设置日期起始值
结束:设置日期终止值
日期自增:会随着数据大小,从起始值开始自增日期 。
List类型:选择需要的泛型目前只支持String和Int,会生成5个 元素的List集合
Map类型:选择需要的泛型目前只支持String和Int,会随机生成5个键值对
Key类型:Map键的类型
Value类型:Map值的类型
!!!!我会一直更新,维护这个软件!!!
如遇到问题可私信我解决
本文章纯原创,未经允许,不可转载!
大数据测试数据生成工具v1.0 --百万级别一键导出TXT,JSON,MYSQL 。---HIVE专属工具相关推荐
- 二维码生成工具V1.0
二维码生成工具V1.0 (安装 Microsoft .NET Framework 4.5) 功能一.基础配置是用来完成中间带Logo图标的配置功能,生成操作中,如果是要带图标时,必需上传: 功能二.单 ...
- 大数据学习系列:Hadoop3.0苦命学习(五)
传送门: 大数据学习系列:Hadoop3.0苦命学习(一) 大数据学习系列:Hadoop3.0苦命学习(二) 大数据学习系列:Hadoop3.0苦命学习(三) 大数据学习系列:Hadoop3.0苦命学 ...
- 大数据面试吹牛草稿V2.0
面试吹牛之前先打个草稿! 本文首发于微信公众号[五分钟学大数据],公众号上有很多大数据学习方法,学习文档,最全的大数据面试八股文等 各位面试官好! 1. 我叫 xxx,毕业于 xxx,之前在 xxx ...
- 大数据学习系列:Hadoop3.0苦命学习(一)
传送门: 大数据学习系列:Hadoop3.0苦命学习(一) 大数据学习系列:Hadoop3.0苦命学习(二) 大数据学习系列:Hadoop3.0苦命学习(三) 大数据学习系列:Hadoop3.0苦命学 ...
- 大数据学习系列:Hadoop3.0苦命学习(七)
传送门: 大数据学习系列:Hadoop3.0苦命学习(一) 大数据学习系列:Hadoop3.0苦命学习(二) 大数据学习系列:Hadoop3.0苦命学习(三) 大数据学习系列:Hadoop3.0苦命学 ...
- 宏观大数据-模型部署说明 V1.3.1
宏观大数据-模型部署说明 V1.3.1 模型部署 2. 准备工作 2.1 获取最新版本 2.1.1 查看钉钉群公告 2.1.2 确认最新版本 [截至2021-10-13最新版本为:模型部署文档\V1. ...
- 通用Excel导入工具V1.0 使用说明
通用Excel导入工具V1.0 使用说明 有时候我们的数据存放在Excel中(特别是对于用户来说更喜欢使用Excel收集一些常用数据),而系统又需要这些数据来处理其他业务,那么此时我们就需要将这些数据 ...
- 程序安装包制作工具 v1.0官方版
2019独角兽企业重金招聘Python工程师标准>>> 名称:程序安装包制作工具 v1.0官方版 版本:1.0更新日期:2016-06-27 大小:2.9MB软件语言:简体中文 软件 ...
- 在线语音转文字工具V1.0
在线语音转文字工具V1.0 介绍 在线语音转文字工具V1.0,采用C#开发语音基于Framework4.5开发,主要采用百度语音识别SDK,实现了在线文本转语音的功能,可以转换后直接播放.有需要的朋友 ...
最新文章
- 创建虚拟环境 安装pytorch 0.3.1
- 不为人知的动网7.1 SQL版注入漏洞
- 如何按PHP中给定键的值对关联数组进行排序?
- 《伊万博士: 进化》利用三角剖分算法复刻《超越光速》地图机制
- java安全编码指南之:锁的双重检测
- 深度增强学习--DDPG
- tensorflow学习之常用函数总结:tensorflow.cast()函数
- 演示如何利用log4net记录程序日志信息
- qt获取桌面路径(暂定应用Windows)
- 【火炉炼AI】机器学习042-NLP文本的主题建模
- BZOJ2795/2890/3647 [Poi2012]A Horrible Poem 【字符串hash】
- 无法在web服务器上启动调试。调试失败,因为没有启用集成windows身份验证
- matlab频谱分析_想知道有限精度对FFT的影响?Matlab仿真看看
- linux 端口映射
- 高级商务办公软件应用【6】
- 最新视频磨皮降噪神器 轻轻松松完成视频磨皮!Beauty box
- unity shader - 毛发渲染,飘逸的毛发
- 【MAC IDEA】 修改‘.vmoptions’文件导致idea程序无法启动
- 《编程珠玑,字字珠玑》45678读书笔记——编程技巧
- C语言输出各种类型数据的方式