bifrostv配置文件_数据同步配置 - 全量任务配置 - 《Bifrost v1.1.0 中文文档》

全量任务配置

全量任务同步是建立在表配置同步到目标库之上

假如没有配置表同步到目标库则不能配置全量同步

配置过程

1. 点击刷全量数据按钮

2. 配置查询全量数据的条件

字段解析

Where : 支持写 where 条件 ,比如 update_time >= ‘2019-11-23 00:00:00’ AND user_id = 100

ThreadNum : 开启多少个连接同步进行 SELECT 语句查询

ThreadCountPer : 每次 SELECT 查询多少条数据

ToServer : 选择此次刷全量数据,需要刷到哪些目标库里去

3. 点击保存

假如写的 where 条件有问题,则会提示错误 ,保存不了

4. 保存成功之后提示成功,并点击确认跳转到全量任务列表

5. 点击 start 按钮

6. 全量任务列表查询

DbName : 数据源名称

SchemaName : 数据库名

TableName : 表名

Property : 连接配置同步

1). ThreadNum : 几个连接

2). ThreadCountPer : 每个连接每次最多查询几条数据

3). Where : where 条件

NowStartI : 下一次查询从第几条数据开始

ThreadPool : 连接池的查询情况

1). Num : 第几个连接

2). NowStartI : 当前连接是从第几条数据开始查询 ,LIMIT N,100 中的 N

3). Error : 查询过程中遇到的错误信息

ToServerIDList : 同步到哪些目标库

StartTime : 开始时间

OverTime : 结束时间,整个全量查询所用的时间,这个时间并不代表是整个表的数据已经同步到了目标库,只是从表中查询出来,放已提交给了同步的队列中去

Status : 全量任务的状态

1). close : 关闭

2). running : 正在查询

3). halfway : 查询过程中,有连接中途出错了

4). over : 查询结束

5). killed : 查询的过程中被stop掉了

bifrostv配置文件_数据同步配置 - 全量任务配置 - 《Bifrost v1.1.0 中文文档》 - 书栈网 · BookStack...相关推荐

python3内存分析_调试和分析 - tracemalloc —- 跟踪内存分配 - 《Python 3.7 标准库》 - 书栈网 · BookStack...
tracemalloc -- 跟踪内存分配 3.4 新版功能. The tracemalloc module is a debug tool to trace memory blocks alloca ...
数据同步之全量同步与增量同步
一.什么是数据同步业务数据是数据仓库的重要数据来源,我们需要每日定时从业务数据库中抽取数据,传输到数据仓库中,之后再对数据进行分析统计. 为保证统计结果的正确性,需要保证数据仓库中的数据与业务数据库 ...
mysql集群跨地域同步部署_跨地域冗余 - 跨数据中心部署方案 - 《TiDB v2.1 用户文档》 - 书栈网 · BookStack...
跨数据中心部署方案作为 NewSQL 数据库,TiDB 兼顾了传统关系型数据库的优秀特性以及 NoSQL 数据库可扩展性,以及跨数据中心(下文简称"中心")场景下的高可用.本文档 ...
emqtt数据存储mysql,数据存储 - MongoDB 消息存储 - 《EMQ X Enterprise v3.0 中文文档》 - 书栈网 · BookStack...
MongoDB 消息存储配置 MongoDB 消息存储配置文件: emqx_backend_mongo.conf 配置 MongoDB 服务器支持配置多台 MongoDB 服务器连接池:## M ...
华润大学ldap账号是什么_认证配置 - 接入 LDAP / AD 域账号（Beta） - 《KubeSphere v2.1 使用手册》 - 书栈网 · BookStack...
接入 LDAP / AD 域账号(Beta) 如果您的企业使用 LDAP 作为用户认证系统,您可以在 KubeSphere 中通过脚本配置内置的 OpenLDAP 接入您的 LDAP 用户系统,从而允 ...
Hadoop-2.2.0中文文档——MapReduce 下一代 -——集群配置
目的这份文档描写叙述了怎样安装.配置和管理从几个节点到有数千个节点的Hadoop集群. 玩的话,你可能想先在单机上安装.(看单节点配置). 准备从Apache镜像上下载一个Hadoop的稳定版本号 ...
mysql t 保存_检查 (调试) - 离线消息保存到 MySQL - 《EMQ X Enterprise v4.1 中文文档》 - 书栈网 · BookStack...
离线消息保存到 MySQL 搭建 MySQL 数据库,并设置用户名密码为 root/public,以 MacOS X 为例: $ brew install mysql $ brew services ...
linux mint 硬件配置,安装 - 硬件设置 - 《Linux Mint 学习笔记》 - 书栈网 · BookStack...
硬件配置 tags: 驱动安装完成之后,需要做必要的硬件配置. 功能设置触摸板 "开始菜单" -> "系统设置" -> "鼠标和触摸板 ...
emq数据储存到mysql,规则引擎示例 - 保存数据到 MySQL - 《EMQ X Enterprise v4.0 中文文档》 - 书栈网 · BookStack...
保存数据到 MySQL 搭建 MySQL 数据库,并设置用户名密码为 root/public,以 MacOS X 为例:$ brew install mysql $ brew services sta ...
wps在线预览接口_金山文档在线编辑 - 快速接入 - 《WPS开放平台技术文档》 - 书栈网 · BookStack...
快速接入一.申请和上线流程如下: 1.申请Appid和SecretKey 需要前往https://open.wps.cn 注册服务商,并且申请开通金山文档在线编辑服务. 2.实现回调接口根据本文档 ...

bifrostv配置文件_数据同步配置 - 全量任务配置 - 《Bifrost v1.1.0 中文文档》 - 书栈网 · BookStack...

bifrostv配置文件_数据同步配置 - 全量任务配置 - 《Bifrost v1.1.0 中文文档》 - 书栈网 · BookStack...相关推荐

最新文章

热门文章