为什么要迁移?

首先从运营成本考虑,用Mysql可以节约不少的费用。另一方面,Mysql的稳定性及功能不断地提高与增强,基本上可以满足客户的需求,如支持多 节点部署,数据分区等。还有就是Mysql使用方便,比Oracle简单易用。故客户就要求将已有的Oracle数据表与内容迁移到Mysql来。

为什么要自己写脚本?

迁移的表与数据都蛮多的,有几百张表。因此手工完成不太方便。也尝试了一些免费的迁移工具,如:MySQLMigrationTool等,发现转移 的字段类型不太符合要求(可能是原来的Oracle表设计得不太好),会导致数据不太完整,觉得不是太可靠,所以决定自己写迁移脚本放心一些,有不符合要求的也可立即调整,所以就开始吧。

所用到的技术支持

1.php5

2.php oci8

3.mysql 5.1

迁移表结构

获取schema所有表

用以下语句可以从Oracle中获得schema中所有的表名

SELECT table_name FROM user_tables

然后可以遍历所有表向mysql进行表结构的创建与数据的迁移工作。

获取单个表的所有字段与类型

用以下语句可以从oracle中获得单个表的所有字段与类型

SELECT COLUMN_NAME, DATA_TYPE, DATA_LENGTH, NULLABLE, DATA_DEFAULTFROM USER_TAB_COLUMNS   WHERE TABLE_NAME = UPPER('{$table_name}') ORDER BY column_id ASC

这样可以得知表字段的名称,类型,长度,是否允许为空,默认值。因为oracle与mysql的字段类型并不完全兼容,故需要建立字段类型的对应关系表。

Oracle

Mysql

number(<11)>

int

number(>11)

bigint

varchar

varchar

varchar2(<255)>

varchar

varchar2(>255)

text

clob

text

date

date

获取单个表的Primary Foreign Unique Key用以下语句可以从oracle中获得单个表的Primary Foreign Unique Key

SELECT C.CONSTRAINT_NAME, C.CONSTRAINT_TYPE, C.R_CONSTRAINT_NAME, C.DELETE_RULE,CC.COLUMN_NAME      FROM USER_CONSTRAINTS C, USER_CONS_COLUMNS CCWHERE C.TABLE_NAME=upper('{$table_name}') AND C.CONSTRAINT_TYPE!='C'AND C.CONSTRAINT_NAME=CC.CONSTRAINT_NAME AND C.OWNER=CC.OWNER AND C.TABLE_NAME=CC.TABLE_NAMEORDER BY C.CONSTRAINT_TYPE, C.CONSTRAINT_NAME, CC.POSITION

获取单个表的索引

用以下语句可以从oracle中获得单个表的索引

SELECT T.INDEX_NAME,T.COLUMN_NAME,I.INDEX_TYPE FROM USER_IND_COLUMNS T,USER_INDEXES IWHERE T.INDEX_NAME = I.INDEX_NAME AND T.TABLE_NAME = I.TABLE_NAME ANDT.TABLE_NAME = UPPER('{$table_name}')

这样可以获知表的索引名称,被索引的字段。

将所有的表信息组装成mysql的表结构 有了表名,字段信息,主键,Foreign, Unique.索引等信息,就可以将表结构建立起来。由于oracle没有自增字段,一个变通的方法是用primary key做为mysql中的自增字段,因为在oracle中没办法准确地知道哪个字段用到了seq来做自增,用这种方法也不是很准确。

迁移视图

获取schema所有views。用以下语句可以从oracle中获取schema所有views

SELECT VIEW_NAME,TEXT      FROM USER_VIEWS

这样可以获得view的名称及建立view的构成语句。

Oracle与Mysql不兼容的view处理

Oracle的对view的构建语句比较宽松一些,mysql中对view的构建语句要严格些,from不能从子查询中构建,也就是人样的让语句是不被允许的。

CREATE VIEW `view_name` AS SELECT * FROM (SELECT * FROM table_name) ...

那么处理这样的view,有一个办法是将子查询再建立成一个view,将子查询替换成新建立的view名即可。

迁移数据

数据的迁移,从Oracle数据库中select出数据,拼装成Mysql的insert语句就可以了。需要注意的两点:一是oracle的日期类 型的数据格式与mysql的日期类型格式不太一致,所以要用TO_CHAR(field_name, 'YYYY-MM-DD')将其转换成mysql的相应的数据格式;二是oracle中的clob字段的内容要用 oci_fetch_array($stid, OCI_ASSOC|OCI_RETURN_NULLS|OCI_RETURN_LOBS)将其取出,插入到mysql的text字段。 在mysql插入大量数据时,还要注意,在window的my.ini或my.cnf默认max_allowed_packet是1M要将其改为

[mysqld]...max_allowed_packet = 16M...

要不会出现mysql goes away的错误,linux版本没有这个问题,因为其默认值就是16M。

不能迁移的内容

Oracle中的触发器、存储过程与Mysql中是不一样的,所以不能通过脚本程序自动迁移过去。要手工进行重写。

总结

从Oracle向Mysql数据迁移,table结构与数据是基本上可以平移过去的,view有些还不是完全兼容oracle的语句,所以要对其作 出一些中间表。触发器与存储过程是不能平移的,这两部份需要重写。表结构平移过去后,看是否都比较合适,如果觉得不太好还可以通过alter等语句对其进 行相应的调整。在导入大量数据时还要注意一下mysql的配置文件(my.ini或my.cnf)里的max_allowed_packet值,这应设置 得太小,以免导入数据时出错或导不进去或乱码等不稳定因素。

【编辑推荐】

【责任编辑:彭凡 TEL:(010)68476606】

点赞 0

mysql数据迁移 脚本_PHP将数据从Oracle向Mysql数据迁移实例相关推荐

  1. php调mysql接口头文件_php基础系列:PHP连接MySQL数据库用到的三种API

    参考自php手册.本文没有太大意义,仅为方便自己上网查阅. 1.PHP的MySQL扩展 2.PHP的mysqli扩展 3.PHP数据对象(PDO) MySQL扩展函数 这是设计开发允许PHP应用与My ...

  2. swoole异步mysql有什么用_php如何使用SwooleTaskWorker实现异步操作Mysql(代码)

    本篇文章给大家带来的内容是关于php如何使用SwooleTaskWorker实现异步操作Mysql(代码),有一定的参考价值,有需要的朋友可以参考一下,希望对你有所帮助. 在一般的 Server 程序 ...

  3. oracle数据泵整库备份,详解oracle 12c通过数据泵expdp/impdp工具实现对数据备份、恢复...

    标签: 简介 Oracle Database 10g引入了最新的数据泵(Data Dump)技术,数据泵导出导入(EXPDP和IMPDP)的作用 1.实现逻辑备份和逻辑恢复 2.数据库用户之间移动对象 ...

  4. mysql数据库 quota_shell脚本抓取用户存储quota写道mysql并展现到grafana面板

    通过shell脚本抓取存储home用户的空间使用情况,写到excel文件里,再导入到mysql数据库,最后通过grafana进行展示 vi aa.sh #!/bin/bash Date=date +& ...

  5. oracle 数据导入不成功,node.js往oracle数据库插入数据失败

    源码: var oracledb = require('oracledb'); oracledb.getConnection({ user: "hr", password: &qu ...

  6. php 读取mysql 二维数组_PHP操作 二维数组模拟mysql函数

    PHP操作 二维数组模拟mysql函数 public function monimysqltest(){ $testarray=array( array('ss'=>'1','dd'=>' ...

  7. mysql not like 没用_PHP - 使用NOT LIKE时,mysql查询不起作用

    我有一个正在构建的查询字符串,当我使用LIKE时它工作正常,但它不适用于NOT LIKE $sWhere = ""; if ( $_GET['sSearch'] != " ...

  8. oracle数据如何导入hadoop,hadoop hive 与 Oracle 互相导入数据

    #1.在Oracle上建立要处理的表 create table SOURCE_TABLE_NAME as SELECT t.*,rownum as row_num FROM SOURCE_TABLE_ ...

  9. python分析人口出生率代码_国家统计局居然也能用的上Python?人口数据Python脚本了解一下?...

    原标题:国家统计局居然也能用的上Python?人口数据Python脚本了解一下? 通过采集国家统计局"国家数据"网站中提供的中国历年人口数据,并对数据进行可视化的探索,发现了一些有 ...

最新文章

  1. MBTiles 1.2 规范翻译
  2. web前端技术亮点_Web前端开发职业技术要求规划
  3. script链接标签前置无法读取的解决
  4. 常见的mysql集群
  5. ElasticSearch 5.3源码学习 —— Segments_N 文件详解
  6. python地图空间可视化神器folium实现以阿里巴巴园区为中心绘制租房小区位置信息
  7. 固态硬盘故障检测_固态硬盘有坏道怎么办(ssd坏块检测工具)
  8. 弘辽科技:淘宝店铺信用等级怎么看?信用等级怎么提升?
  9. 绘画教程:动漫人体肌肉的详细画法
  10. VLIW的前世今生:为什么DL加速器都青睐于它
  11. Enable debug logging for this logger for a complete list of JARs that were scanned but no TLDs were
  12. 【钉钉-场景化能力包】IoT物联网设备协同
  13. win10开机内存占用过高
  14. 【经验帖】深度学习如何训练出好的模型
  15. MVC.Net: 解决Attempted to access an unloaded appdomain的问题
  16. 傅里叶变换基函数可视化
  17. Flask刚开始遇到的问题UnicodeDecodeError: ‘utf-8‘ codec can‘t decode byte 0xbb in position 0: invalid start
  18. 如何让搜搜soso收录我的网站
  19. ExcelVBA之传递函数
  20. 数据结构与算法(程序员常用的十种算法:上1~5)

热门文章

  1. 每日程序C语言16-找出比赛对手名单
  2. mysql windows 安装_Windows 安装 Mysql(zip格式)
  3. 前端模拟数据的技术方案(二)
  4. mysql,mybatis常用小知识点
  5. 【php学习笔记】ticks篇
  6. Html5音乐可视化之音乐的获取和播放
  7. 影响布局的inline-block的空白符的问题
  8. ethercat主站控制软件TwinCAT的安装
  9. Day11多态部分-3
  10. [JSP暑假实训] 三.MySQL数据库基本操作及Servlet网站连接显示数据库信息