【本文正在参与炫“库”行动-人大金仓有奖征文】

活动链接:  https://marketing.csdn.net/p/98bd30353e7cb998b6070a89e8b91edb

1、KFS简介

金仓异构数据同步软件Kingbase FlySync(简称KFS)是一种能够在异构数据平台间实现实时、增量数据同步的产品。

它主要面向异地容灾、数据集中共享与分发、数据分析平台建设、云迁移等业务场景。帮助用户实现数据在不同数据平台间可任意流转,并保证数据不丢失,状态可监控,流转数据量可统计、同步结果可校验。

2、数据比对

据比对功能是KFS系统的核心功能之一,它可以在不同数据平台(同构/异构)之间,比对数据是否存在差异,它能够准确提供实时同步过程中的比对结果。

数据比对任务主要分为精简比对和详细比对,差异如下:

精简比对:关注两端记录数目统计

详细比对:关注两端记录的数据明细差异

2.1、新建比对任务(详细比对)

A、登录KFS的web控制台(端口默认:8089)

B、依次点击:“数据比对”-‘任务管理’-“新建”,新建比对任务

C、设置比对任务连接信息

网络地址转换设置:如果存在网络地址转换,则需要配置映射后的IP地址及端口号

高级参数:(校验类型选择“精简模式”时,无此配置项)

是否显示一致数据:如果勾选,则比对结果显示所有相同和不同的数据记录;当表条目数较大时,建议不勾选。

单表最大比对条数:设置单表的最大比对数目。当表的数据小于此阈值时,等于进行全表比对,否则,只比对表中指定的条目数。

D、配置要比对的模式/表

通过“选择”按钮设置需要比对的模式/表,KFS支持指定多个模式,不同模式下面又支持指定全部/部分表

​​​​​​​2.2、 新建调度任务

A、依次点击“数据比对”-“调度管理”-“新建”

B、新建调度任务

执行任务:此处可以选择已经新建的比对任务

调度策略:立即比对、定时一次性比对、按设置周期比对

C、调度任务生成后,可以按照设置的调度策略自动执行,也可以在“调度管理”下,点击指定任务对应的“立即执行”按钮,手动执行任务

精简比对结果:

详细比对结果:

3、数据修复

在数据同步过程中,由于某些原因(比如数据平台初始数据不一致、或网络原因导致数据包丢失),可能会造成数据平台之间数据不一致, 此时就可以通过数据修复功能完成差异数据自动同步。

​​​​​​​3.1、手动同步

数据比对(详细比对)完成后,如果数据存在差异,则比对结果中有手动同步按钮,可以完成数据同步

​​​​​​​3.2、自动同步

在执行详细比对任务后,如果数据平台之间存在不一致数据,且满足一定条件,则会执行自动同步任务,自动完成差异数据的同步。

A、依次点击“数据修复”-“任务管理”-“新建”

B、新建修复信息

匹配比对任务:选择已有的详细比对任务

修复等待时间:比对完成后,开始修复的等待时间

修复启动阈值:比对结果中,不一致数据条数达到阈值,才自动同步数据

C、选择需要修复的表

此时可以选择需要自动同步的表,也可以对表设置不同的阈值。

D、自动同步结果如下

4、结语

不同数据平台数据同步时,数据一致性是核心且基础的要求,如果出现数据不一致问题,将可能严重影响上层业务的正常运行。KFS通过数据比对功能,有效且快速的筛选出差异数据;通过数据修复功能能自动完成差异数据同步,为数据的一致提供了强有力的保障。

炫“库”行动-人大金仓有奖征文-KFS数据比对和数据修复相关推荐

  1. 炫“库”行动-人大金仓有奖征文-KFS目标端支持Kafka配置详解

    [本文正在参与炫"库"行动-人大金仓有奖征文] 活动链接:  https://marketing.csdn.net/p/98bd30353e7cb998b6070a89e8b91e ...

  2. 炫“库”行动-人大金仓有奖征文-KingbaseES V8R6 手工创建主备流复制集群案例

    [本文正在参与炫"库"行动-人大金仓有奖征文] CSDNhttps://marketing.csdn.net/p/98bd30353e7cb998b6070a89e8b91edb ...

  3. 炫‘库’行动-人大金仓有奖征文-挑战国产数据库金仓上k8s(二)

    本文正在参与炫"库"行动-人大金仓有奖征文: 快来点击活动链接参与投稿吧 https://marketing.csdn.net/p/98bd30353e7cb998b6070a89 ...

  4. 炫“库”行动-人大金仓有奖征文—金仓数据库入门体验

    目录 前言 正文 一.人大金仓数据库介绍 二.安装金仓数据库 1. 下载安装包 2. 解压安装包 3. 安装数据库系统 4. 数据库设置 三.安装过程中的常见问题 结尾 文本正在参与[炫"库 ...

  5. 炫“库”行动-人大金仓有奖征文-数据库的备份及恢复

    计算机系统在运行过程中可能会发生内部故障.系统故障.硬件故障等问题.这些问题可能会造成系统崩溃,数据库运行事务非正常中断,部分数据丢失等一系列严重后果.因此,对生产数据库.容灾数据库.测试数据库等重要 ...

  6. 炫“库“行动—人大金仓有奖征文——金仓数据库安装教程

    1.概述 1.1简介 金仓数据库管理系统 简称[kingbaseES]是北京金仓信息技术股份有限公司[简称人大金仓]经过多年努力自主研发的.具有自主知识产权的商用关系型数据库管理系统(DBMS).该产 ...

  7. 炫“库”行动-人大金仓有奖征文—谈谈oracle建表规范

    [本文正在参与炫"库"行动-人大金仓有奖征文] 活动链接https://bss.csdn.net/m/topic/kingbase 前言: 今天突然想把工作几年在oracle建表相 ...

  8. 炫“酷”行动-人大金仓有奖征文--金仓分析型数据库迁移IBM Netezza一体机技术可行性

    https://bss.csdn.net/m/topic/kingbase 本文正在参与"炫库"行动--人大金仓有奖征文 一. 数据类型兼容性 通常异构数据库移植的工作量繁重.这些 ...

  9. 炫“库”行动-人大金仓征文大赛—数据领域“新·独角兽”

    前言: 最近公司正在着手于数据这方面的项目,淘宝了好多天,发现[人大金仓],进入主页[https://www.kingbase.com.cn/]查了一下,其在 电子政务.党务.国防军工.金融.智慧城市 ...

最新文章

  1. 服务器运行码用户名a多少呢,如何以非根用户身份运行gunicorn/a python应用服务器?...
  2. python使用教程pandas-「Python」pandas入门教程
  3. c++ 类 A类调用B类
  4. node.js 函数外定义的变量 函数内赋值后为什么不能带出_(44)python少儿编程之函数(五)--- 作用域...
  5. 入门话题1. 在Web中控制图的显示外观?把一张500*800 的图, 显示成180*110 的小图....
  6. 开博第一篇,聊聊 最基本的 “==” 与 “===”区别
  7. springboot 之Spring Web Mvc Framework
  8. java开发工具eli_Java 学习线路图是怎样的?
  9. php mysql完全学习手册 下载_PHP+MySQL完全学习手册
  10. linux上实现getch()函数
  11. Windows11 安装 WSA 简单上手一试
  12. 简化“复杂”的层级管理,实现团队作战式的目标协同
  13. 图片,表格末尾紧贴上方图片或表格添加脚注/备注
  14. Web应用网站CDN加速访问技术原理
  15. 国外11个高质量免费的3D素材网站-建筑设计/室内设计/效果图渲染
  16. win10远程桌面连接服务器接示内部错误
  17. SQL Server 2008 简体中文正式版下载地址(附序列号)
  18. 你是否还记得?那些年我们一起追过的(FIDL:Flutter界的AIDL)
  19. 100行python代码爬取5万条网易新闻评论
  20. Understanding Weak References

热门文章

  1. linux搭建erp教程,在Debian 10(Buster)上安装ERPNext ERP系统的步骤
  2. mysql general error_SQLSTATE[HY000]: General error:
  3. 苹果邮箱imap服务器,IOS系统IMAP邮箱设置
  4. 谷歌Dialer和来电铃声不同步问题修改
  5. 对zebra的一点思考Think_Of_ZEBRA
  6. ppt扇形图怎么显示数据_PPT中如何用半圆型饼图体现数据百分比
  7. springBoot Aop打印日志
  8. 数据分享|全球河湖矢量数据集(2010)
  9. (四十五)、HTML and Servlet
  10. 国信办发布"新规":规范互联网账号名称和头像乱象问题