DataWorks百问百答01:数据同步该用什么资源组
引子
很多用户在使用数据集成建立同步任务时,往往都会困惑一个设置,即“资源组设置”。
大家常有的疑问是“资源组是用来做什么的?跟网络之间什么关系?我该选择那种资源组?”
下面本文给您一个简要的介绍。
什么是资源组
资源组是数据集成用来运行数据同步任务的计算资源,可以通俗的理解为“带有CPU、内存和网络的计算机或计算机集群”。同步任务就是运行在上面的“程序”。所以如果机器性能低或者运行的程序过多,都会导致任务执行效率,而有如果机器的网络不通,那么也会出现连接不到数据源的问题。
对比和推荐
数据集成有三种资源组:公共资源组(又称默认资源组)、独享资源组、自定义资源组。它们适用的场景不同,您在做数据同步时可以根据自己实际的需求来选择。具体请参考下表
公共资源组 | 独享资源组 | 自定义资源组* | |
---|---|---|---|
机器资源归属 |
DataWorks维护 所有租户竞争使用的共享资源 |
DataWorks维护 自己租户独享使用的计算资源 |
客户自己的IDC机器,客户自己维护 |
DataWorks版本要求 | 所有版本均支持 | 所有版本均支持 | 只有专业版及以上才支持 |
网络 |
支持经典网络 支持公网 支持阿里云内产品 |
支持VPC 支持公网 支持阿里云内产品 |
支持VPC 支持公网 支持阿里云内产品 |
收费方式 | 按任务实例量阶梯计费 | 按机器规格包年包月计费 | DataWorks版本按月使用费 |
支持数据源 | 部分数据源 | 全部数据源 | 全部数据源 |
安全性 | 高 | 高 | 视客户自身机器环境而定 |
任务执行效率* | 低 | 高 | 视客户自身机器环境而定 |
可靠性* | 低 | 高 | 视客户自身机器环境而定 |
适合场景 | 适用于做一些非重要、非紧急的少量、零散任务,或者测试性任务。 | 适合于大量、重要的生产级别任务。 | 自身已有资源利旧,或者同步的数据源全部都在IDC内 |
推荐指数 | ★★ | ★★★★★ | ★ |
任务执行效率:是指任务是否能分到足够的计算资源,能否以最高性能运行。
可靠性:是指任务是否能按时启动,执行时网络资源是否被其他租户所占据,而导致任务不能按时产出结果。
自定义资源组:此处仅指“用于数据集成的自定义资源组”,并不是“用于调度的自定义资源组”。
结论
所以综合来看对于大多数正常需求的用户来说“独享资源组”是最佳选择。
DataWorks百问百答历史记录请点击查看
更多DataWorks技术和产品信息,欢迎加入【DataWorks钉钉交流群】
原文链接
本文为云栖社区原创内容,未经允许不得转载。
DataWorks百问百答01:数据同步该用什么资源组相关推荐
- 移动营销的魔力:让你的客户无处可逃(附赠2012移动营销百问百答手册)
<移动营销的魔力:让你的客户无处可逃>(附赠2012移动营销百问百答手册) 基本信息 作者: (美)克鲁姆(Krum, C.) [作译者介绍] 译者: 唐兴通 出版社:电子工业出版社 IS ...
- 永磁同步电机矢量控制中的双闭环是什么意思_【百问百答】ST 电机控制实战问答合辑 | 连载之二...
点击下方链接可以直接观看电机直播及直播答疑 https://wx18257eb0e8c82435.h5.xiaoe-tech.com/content_page/eyJ0eXBlIjoiMiIsInJl ...
- 智能锁百问百答视频锁篇第4期:特斯拉线圈能破解视频锁吗?平台能看到视频锁用户存储的录像吗?化妆、戴眼镜能打开人脸视频锁吗
21.特斯拉线圈能破解视频锁吗? 2018年,智能锁行业高速发展,市场上出现了一种可以暴力破解智能锁的装置,也就是特斯拉线圈,俗称"小黑盒",它用极高的电压形成强磁场,产生强电子脉 ...
- Python新手入门百问百答
Python新手入门百问百答 Q1:Python如何查看已经安装的库或模块.安装包? iPython清屏命令,如何清空命令窗? Python字符串前加r和不加r的区别? 如何让Python画图的时候不 ...
- 网络安全基础知识学习之Web安全百问百答
网络安全基础知识学习之Web安全百问百答 1.什么叫Web应用系统? 答:Web应用系统就是利用各种动态Web技术开发的,基于B/S(浏览器/服务器)模式的事务处理系统.用户直接面对的是客户端浏览器, ...
- 超全大厂算法岗百问百答(推荐系统/机器学习/深度学习/C++/Spark/python)
之前在准备秋招的时候,每次看到牛客网上那些大神手握七八个大厂的offer,就羡慕到不行,那会儿自己的机器学习算法水平还没法搬上台面,顶多也就是看了几个课程.做了两个比赛的水平,然后比赛还没得到任何的名 ...
- 【方案分享】抖音平台新媒体百问百答:平台规则、爆款涨粉、运营技巧、内容变现.pdf(附下载链接)...
省时查报告-专业.及时.全面的行研报告库 省时查方案-专业.及时.全面的营销策划方案库 [免费下载]2022年3月份热门报告合集[干货]2021社群运营策划方案.pptx 大萧条来临前的几大征兆 大家 ...
- 数据百问系列:“未知”数据该如何处理?
数据百问系列:"未知"数据该如何处理? 0x00 前言 本次讨论的主题是:数据维度分类中,习惯将无法归类或者数据模糊的归为"未知",那么对于这些未知数据, 我们 ...
- 前端面试百问百答(上)
大家好,我是漫步,分享一篇总结面试题的文章.喜欢记得关注我,回复 加群 自助进群. 最近在整理 JavaScript 的时候发现遇到了很多面试中常见的面试题,本部分主要是作者在 Github 等各大论 ...
最新文章
- 云原生系列「0」容器概述
- Maven最全教程,还有哪里对maven不解的地方看过来!
- 值得关注的HTML基础
- 2012网页设计趋势(下)
- 大数据薪资一再飙升 学习大数据需要哪些基础?
- 你应该知道的 HBase 基础,都在这儿了
- getresourceasstream方法_【设计模式】第三篇:一篇搞定工厂模式【简单工厂、工厂方法模式、抽象工厂模式】...
- Flink 最佳学习实践 | 从 0 到 1 学会 Apache Flink
- (68)FPGA模块调用(Verilog调用VHDL)
- 从 Google 的一道面试题说起·
- 空间三维直线拟合matlab代码
- 印象笔记中可以使用html语言吗,你知道吗,在印象笔记里也能用 Markdown 写作
- 各大主流编程语言简介
- c语言case语句比较大小,[求助]用switch语句编写比较数值大小程序
- Angular 依赖注入框架里 useExisting 和 useClass 的使用场景
- Spread 16.0 for WinForms Crack
- java代码实现kafka消费端consumer的from-beginning功能
- Python|阶梯电价问题
- (三)Window自带计算器实现换算、运算:快速科学计算、单位换算、二进制十六进制转换与运算、货币换算、长度换算等等
- 潘多拉开发板——emwin5.44裸机移植记录(ST7789驱动)
热门文章
- java excel 创建按钮_通过单击Excel按钮在Catia中设计零件
- 偷用计算机作文,偷玩电脑作文5篇
- 【LeetCode笔记】143. 重排链表(Java、链表、栈、快慢指针)
- php ajax download,通过Ajax和PHP强制下载
- spring aop设计模式_Spring框架中设计模式的运用
- 零基础自学java_零基础学Java——小白的Java之路(4)
- python 获取文件列表_Python3 - 获取文件夹中的文件列表
- 云科技网络验证源码_面向虚拟化架构和容器云的开源安全工具
- 为什么java中floatda正确_为什么cast to float在java中产生正确的结果?
- ffmpeg命令_使用ffmpeg命令为多个短视频修改视频备注说明