在oracle中 生成大规模数据 500万条 (使用导入数据方式 sqlldr 导入命令 *.ctl文件)
在Oracle中导入数据
Oracle中导入数据时,使用的文件后缀是*.ctl
命令是 sqlldr
sqlldr username/password control = 'TBL_EMP,ctl'
从postgre中导出部分数据
psql saison -c 'select user_id, user_name from user order by 1,2' user_list.txt -A -F, -t
生成的文件 user_list.txt
100001,xiaoming
100002,xiaowang
ctl 文件
load data
infile user_list.txt
APPEND into table TBL_EMP
FILDS TERMINATED BY ","
trailing nullcols
(
user_unique_key SEQUENCE(MAX),
user_id,
user_name,
user_pin_id ":user_id",
user_berthday "20120202",
pay_month 10000,
user_flag "1"
)
说明:①
程序有两个DB,其中一个DB是postgre另外一个是oracle
在postgre中生成数据后,导出两个数据库相关联的部分 user_id user_name
postgre 中的数据库表是 user
Oracle 中的数据库表是 TBL_EMP
---------------------------
说明:②
关于 SEQUENCE(MAX) 的作用
这里没有使用序列,这里的作用是使这个字段自增
比如这个字段是一个char 10
那么生成的字段为
1000000000
1000000001
1000000002
。。
。。
。。
注意:①
在linux下执行这个命令时
要设置ORACLE_HOME这个环境变量
export ORACLE_HOME=/u01/app/oracle//product/10.2/db_1
否则会报错
Message 2100 not found; No message file for product=RDBMS, facility=ULMessage 2100 not found; No message file for product=RDBMS, facility=UL
注意:②
ORACLE_SID 也需要配置
注意③
在ctl文件所在目录下执行这个命令
在oracle中 生成大规模数据 500万条 (使用导入数据方式 sqlldr 导入命令 *.ctl文件)相关推荐
- 大规模数据生成 (500万条数据)
前言: 最近有一个作业需要 对 大规模数据 进行 性能测试 需要500万条数据,这是一个很大的量,我们无法通过cvs文件这种方式把数据导入数据库 我开始想到了一个解决方案,使用java程序,循环500 ...
- 500万条微博数据来源分析
最近项目不是特别忙,想做一些微博方面的分析和处理工作,如果自己现爬取微博数据,积累数据比较慢,恰好看到北理工张华平老师分享的500万条微博数据,直接借用他的数据分析.下载地址是:http://www. ...
- 记一次500万条数据查询的优化
1.公司业务系统数据平台今早发现有个接口响应很慢,经过逐一排查后,发现问题所在.该接口是做的一个单表查询,表的数据有500万条左右. 下面是表结构 下面是优化前的查询 SELECT count(IP) ...
- oracle默认表达式uuid,Oracle中生成uuid的方法
Oracle中生成uuid的方法 下载LOFTER客户端 在Oracle SQL 提供了一个生成uuid的函数sys_guid: http://download.oracle.com/docs/cd/ ...
- python获取游戏数据_Python 爬取 3 万条游戏评分数据,原来程序员最爱玩的游戏竟然是.........
原标题:Python 爬取 3 万条游戏评分数据,原来程序员最爱玩的游戏竟然是...... 作者 |量化小白H 责编 | 胡巍巍 本文爬取了豆瓣游戏网站上所有可见的游戏评分数据进行分析,全文包括以下几 ...
- 咱们500万条数据测试一下,如何合理使用索引加速?
5 如何合理使用索引加速 tips: 500万条建表sql参照网盘sql脚本 [root@linux-141 bin]# ./mysql -u root -p itcast < product_ ...
- Python看春运,万条拼车数据背后的春节迁徙地图
Python看春运,万条拼车数据背后的春节迁徙地图 今天是正月初九,春运返程也已过半.这篇文章,作者对北京.上海.广州.深圳.杭州等地 1万多条出行数据进行分析,得出了一些有意思的结论,并且绘制了这几 ...
- 26万条抖音数据背后的推荐逻辑以及严重失调的男女比例
数据洞察 1.数据介绍 数据区间是2018年2月1日-5月10日,历时两个月,累计260968条. 采集过程中,对作者做了去重处理,也就是说每个作者只取了TA的一条视频数据. 这也代表着我们拥有26W ...
- Python爬取2万条相亲网站数据!看看中国单身男女都在挑什么!
想必昨天的七夕节,一定是有人欢喜有人忧的一天,朋友圈里的晒照惹恼了我的一个程序员朋友,在昨晚怒爬2万条相亲网站数据,做了一次相亲男女画像! 话不多说,我们今天就以"世纪佳缘"这个相 ...
最新文章
- 深入分析SpringBoot源码如何内嵌Tomcat容器?
- sql express 会提供iis 服务
- Pycharm Matplotlib 图像不显示问题
- 教你禁用右键,也教你如何破解
- [Oracle11g] 通过伪列查询
- ubnutu18.10拔除硬盘后进行recovery mode
- Goland使用技巧
- Mysql触发器与动态完整性
- 从命令行安装IIS 7.0
- DTU与组态王组态软件配置说明
- 《痞子衡嵌入式半月刊》 第 2 期
- 2022年 iOS面试题总结
- 《非暴力沟通》-- 马歇尔.卢森堡
- 利用gretna计算小世界网络属性等图论指标笔记
- 往虚拟机中导入虚拟硬盘出现错误 返回 代码: E_INVALIDARG (0x80070057)的解决方法
- Java 应用结构规范
- vue中trigger用法
- 在线生成favorite ico的网站
- 关于MediaCode播放H265/hevc的总结
- 【因果推断的统计方法】综述与个人理解
热门文章
- Python之代码性能分析工具(时间+内存)
- aws终止实例后还收费吗_「技术选型」AWS 和 AZURE的全面比较
- App列表之拖拽ListView(上)
- 基于wxpython+MySQL--实现人脸检测识别的宿舍人脸检测系统
- 计算机组成原理实验存储器部件实验,计算机组成原理实验_存储器部件教学实验...
- 记element + xlsx 导出表格数据重复的坑
- P4475 巧克力王国(KDTree)
- 2018双十一苏宁20+篇技术干货全整理
- Leetcode 53. Maximum SubarrayJAVA语言
- 《面向机器智能的TensorFlow实践》导读