天萃荷净

开发DBA反映在测试数据表插入数据,Oracle dblink两库连接插入同步数据时数据量异常

一、诡异Oracle dblink起源

今天开发拿过来一条sql,说有诡异现象,sql如下

INSERT INTO TAB_CS_CALLLOG

select c.user_logon,/*工号*/c.user_name,/*姓名*/a.call_id,/*通话id*/

a.caller_nbr,/*主叫号码*/a.called_nbr,/*被叫号码*/d.start_time,/*呼入时间*/

b.call_time,/*接听时间*/b.end_time,/*结束时间*/b.call_dura,/*时长*/

to_number(b.call_time-d.start_time)*24*3600,/*等待时长*/

decode(c.user_logon,null,0,1),/*类型*/

case

when substr (a.CALLED_NBR,7, 2) = '00'

then '广东移动'

when substr (a.CALLED_NBR,7, 2) = '01'

then '浙江移动'

when substr (a.CALLED_NBR,7, 2) = '02'

then '福建'

when substr (a.CALLED_NBR,7, 2) = '03'

then '四川'

when substr (a.CALLED_NBR,7, 2) = '04'

then '河南'

when substr (a.CALLED_NBR,7, 2) = '05'

then '湖北'

when substr (a.CALLED_NBR,7, 2) = '06'

then '北京CSIP'

when substr (a.CALLED_NBR,7, 2) = '07'

then '陕西'

when substr (a.CALLED_NBR,7, 2) = '08'

then '吉林'

when substr (a.CALLED_NBR,7, 2) = '09'

then '江西'

when substr (a.CALLED_NBR,7, 2) = '10'

then '宁夏'

when substr (a.CALLED_NBR,7, 2) = '11'

then '太原'

when substr (a.CALLED_NBR,7, 2) = '12'

then '江苏移动'

when substr (a.CALLED_NBR,7, 2) = '13'

then 'e掌管'

when substr (a.CALLED_NBR,7, 2) = '15'

then 'e多商'

when substr (a.CALLED_NBR,7, 2) = '18'

then '江苏联通'

end 区域

from cscnew.a@cs a,cscnew.b@cs b,cscnew.c@cs c,cscnew.d@cs d

where a.call_serial=b.call_serial(+)

and b.call_serial=d.call_serial(+)

and b.user_id=c.user_id(+)

and substr(a.CALLED_NBR,1, 6) = '951654'

and length (a.CALLED_NBR) = 15

and b.fail_reason is null

and a.end_time>=to_date('20110822000000','yyyymmddhh24miss')

and a.end_time然后我进行了测试,证实了她所说的诡异:

1、直接执行select语句需要1.7S左右,但是加上insert inot后,执行时间需要6分钟

2、直接select结果集为602条,加上insert into后,结果集为598条(少4条),如果直接执行select,除掉and b.fail_reason is null限制条件也刚好602条

二、查询相关资料,得到Oracle dblink的一些解释

1、dblink执行有两种方式,一种是在远处数据库执行完,然后结果返回,另一种是把远程的表下载到本来,然后执行

2、如果把远程的表下载到本地,空值或者null可能会发生变化(怀疑是空值转化为null,未证实)

三、根据这些解释,进行猜想

1、只执行select的时候,应该是在远程执行完,传输结果回来;而执行insert into的时候,是把远程的表全部下载到本地,然后执行出结果,而数据量本身比较大,所以比较慢

2、在把表从远程下载到本地的过程中,fail_reason 列的null值可以发生了变化,或者空值变为了null,所以数据多了4条

四、事实证明猜想

1、查询远程表大小,发现a表50m,b表400m,c表10m,d表100m左右,传输过来需要一定的时间

2、既然猜测是由于要把表传输到本地而导致这样的结果产生,那么处理方法就是让程序在远程计算出结果,然后传输到本地,查询了一些资料,上面说insert into会导致driving_site提示无效,那么我想到一个用视图的办法解决这个问题:在目标端建立一个关于本查询中无参数的视图,然后在本地通过dblink调用视图,这样总该先在远程执行出结果传输到本地了吧。

2.1)建立目标端视图

create or replace view v_tab

select c.user_logon,/*工号*/c.user_name,/*姓名*/a.call_id,/*通话id*/

a.caller_nbr,/*主叫号码*/a.called_nbr,/*被叫号码*/d.start_time,/*呼入时间*/

b.call_time,/*接听时间*/b.end_time,/*结束时间*/b.call_dura,/*时长*/

to_number(b.call_time-d.start_time)*24*3600,/*等待时长*/

decode(c.user_logon,null,0,1),/*类型*/

case

when substr (a.CALLED_NBR,7, 2) = '00'

then '广东移动'

when substr (a.CALLED_NBR,7, 2) = '01'

then '浙江移动'

when substr (a.CALLED_NBR,7, 2) = '02'

then '福建'

when substr (a.CALLED_NBR,7, 2) = '03'

then '四川'

when substr (a.CALLED_NBR,7, 2) = '04'

then '河南'

when substr (a.CALLED_NBR,7, 2) = '05'

then '湖北'

when substr (a.CALLED_NBR,7, 2) = '06'

then '北京CSIP'

when substr (a.CALLED_NBR,7, 2) = '07'

then '陕西'

when substr (a.CALLED_NBR,7, 2) = '08'

then '吉林'

when substr (a.CALLED_NBR,7, 2) = '09'

then '江西'

when substr (a.CALLED_NBR,7, 2) = '10'

then '宁夏'

when substr (a.CALLED_NBR,7, 2) = '11'

then '太原'

when substr (a.CALLED_NBR,7, 2) = '12'

then '江苏移动'

when substr (a.CALLED_NBR,7, 2) = '13'

then 'e掌管'

when substr (a.CALLED_NBR,7, 2) = '15'

then 'e多商'

when substr (a.CALLED_NBR,7, 2) = '18'

then '江苏联通'

end 区域

from cscnew.a a,cscnew.b b,cscnew.c c,cscnew.d d

where a.call_serial=b.call_serial(+)

and b.call_serial=d.call_serial(+)

and b.user_id=c.user_id(+)

and substr(a.CALLED_NBR,1, 6) = '951654'

and length (a.CALLED_NBR) = 15

and b.fail_reason is null

2.2)本地调用远程视图

INSERT INTO TAB_CS_CALLLOG

select * from v_tab@cs a where

a.end_time>=to_date('20110822000000','yyyymmddhh24miss')

and a.end_time2.3)执行结果2.3S完成数据插入,而且条数也是598条,证明我的猜想是正确的,更重要的是解决了今天这个让人疑惑的问题

--------------------------------------ORACLE-DBA----------------------------------------

最权威、专业的Oracle案例资源汇总之【案例】Oracle dblink 数据库连接dblink insert插入数据时异常分析

oracle exp 无效dblink,【案例】Oracle dblink 数据库连接dblink insert插入数据时异常分析...相关推荐

  1. oracle 10035 err 942,案例:Oracle日志报错 Fatal NI connect error 12170 TNS-12535 TNS-00505

    天萃荷净 Oracle数据库alert日志文件报错Fatal NI connect error 12170,通过查看mos相关文章找到解决办法 今天在一台服务器的日志文件中,发现如下信息: Fatal ...

  2. oracle log block size,案例:Oracle无法启动报错ORA-00218: block size 0 重建控制文件

    天萃荷净 oracle数据库无法启动报错ORA-00218故障,通过重建控制文件解决文件损坏问题 遇到一个案例在数据库启动的时候报ORA-00218错误,而这个故障的引起原因是因为重建控制文件的时候, ...

  3. oracle没用过元数据,案例:Oracle RAC asm备份元数据之md_backup和md_restore 好处与

    天萃荷净 Oracle rAC asm备份元数据之md_backup和md_restore好处与坏处 在11g的asm中增加了md_backup和md_restore命令,用来备份和还原asm的元数据 ...

  4. oracle goldengate 数据库实例,案例:Oracle goldengate报错ggsci: error while loading shared libraries:...

    天萃荷净 Oracle goldengate配置时报错ggsci: error while loading shared libraries 在部署goldengate过程中发现如下错误: [orac ...

  5. oracle dul 扫描磁盘,案例:Oracle dul数据挖掘 磁盘损坏dul提取数据文件中表的数据及l...

    天萃荷净 通过使用Oracle DUL工具提取损坏磁盘里的数据库文件中的表及lob字段中内容 在有次8i的库恢复中,因为硬盘损坏导致几个表出现很多诡异性坏块,尝试使用dul对其进行挖掘数据,当时使用d ...

  6. 【Oracle】插入数据时出现“ ORA-00001: unique constraint”

    背景: 后台服务测试过程中,发现往oracle数据库表中插数据出现一个错误 unique constraint,如下: ### Error updating database. Cause: java ...

  7. oracle 自增id函数,oracle插入数据时自增ID的解决思路

    一直在用MySQL,从来没有为自增ID发过愁,这初到oracle上,连自增ID都让我挠头,好在互联网资源丰富,我在充分吸取精华后,把我的一点经验总结出来给大家分享分享- 1. 创建一个sequence ...

  8. oracle新增id怎么写,oracle插入数据时自增ID的解决思路

    一直在用MySQL,从来没有为自增ID发过愁,这初到oracle上,连自增ID都让我挠头,好在互联网资源丰富,我在充分吸取精华后,把我的一点经验总结出来给大家分享分享- 1. 创建一个sequence ...

  9. oracle列名无效字符,案例学习Oracle错误:ORA-00904 invalid column name

    ORA-00904 invalid column name ORA-00904: 无效的列名 Cause The column name entered is either missing or in ...

最新文章

  1. 苹果系统里面 dictionary 如何加入中文词典
  2. Java高效读取大文件
  3. Docker知识1:Docker-hub简介
  4. ObservableCollection 类 详解
  5. Wyn Enterprise 核心功能:系统集成
  6. 服务器系统重置,云服务器系统重置
  7. 解决虚拟机VMware运行Ubuntu时无法和主机之间复制粘贴的问题
  8. 1345.跳跃游戏IV-LeetCode
  9. Android SurfaceFlinger vsync信号产生与分发
  10. Linux下maven安装
  11. 0/1背包——动态规划
  12. 卡地亚计算机辅助设计,工程图纸电子版用什么软件看
  13. 【老生谈算法】matlab实现追赶法算法——追赶法算法
  14. 基于asp.net719圆通快递物流管理系统
  15. ArcGIS在水文水资源、水环境中的实践技术应用及案例分析
  16. 效率倍升:逐浪HMS主题大师1.2-全渠道自动打包、快速传送、锁屏提取、资源审计,移动主题设计辅助利器(全面支持华V米O)
  17. usb接口供电不足_分享电脑usb接口供电不足解决方法
  18. 北京程序员平均工资达2万!你拖后腿了吗?
  19. 数据库系统概论--第三章 关系数据库标准语言SQL
  20. 获取自己win10系统的产品密匙

热门文章

  1. ICRA 2022杰出论文:把自动驾驶2D图像转成鸟瞰图,模型识别准确率立增15%
  2. 设计模式之美(4)-创建型-建造者模式
  3. 朴素贝叶斯分类器简单实例
  4. [Bzoj2733][Hnoi2012] 永无乡(BST)(Pb_ds tree)
  5. Sublime Text 3143 Win32版本暴力破解过程
  6. python中 fitz 库和 pdfplumber 混合操作
  7. 数字图像基础理论:频谱vs功率谱vs能谱
  8. matlab烧到哪里,MATLAB在锅炉燃烧中的应用
  9. FEM/前端模块(PA-LNA-SWITCH)介绍
  10. 算法面试之Roberta、Albert