执行计划是一组作业的集合,他们通过调度上的配置,可以被一次性或者周期性的执行。他可以在一个现有的 E-MapReduce 集群上运行,也可以动态的按需创建出一个临时集群来运行作业。它最大的优势就是跑多少就用多少资源,最大化的节省资源的浪费。

创建执行计划的步骤如下:

1.登录阿里云 E-MapReduce 控制台执行计划页面。

2.选择地域(Region)。

3.单击右上角的创建执行计划,进入创建执行计划页面。

4.在选择集群方式页面上,有两个选项,分别是“按需创建”和“已有集群”。

按需创建:创建一个全新的集群,用来运行作业。

一次性调度的执行计划,会在开始执行的时候创建对应配置的集群,并在运行完成以后释放该集群。具体创建参数说明参考创建集群。

周期调度的执行计划,会在每一个调度周期开始时,按照用户的设置创建出一个新的集群运行作业,并在运行结束后,释放集群。

已有集群:使用一个已有的集群,并且该集群要符合以下要求。如果选择“已有集群”,则进入选择集群页面。用户可选择要将该执行计划关联到的集群。

目前只有“运行中”和“空闲”这 2 个状态的集群可以被提交执行计划。
5.单击下一步,进入配置作业页面。左边表中会列出用户所有的作业,可以单击选中需要执行的作业,然后单击中央的右向按钮将作业加入已选作业队列。已选作业队列中的作业会被按排列顺序提交到集群中执行。同一个作业可以被添加多次,就会多次执行。如果您还没有创建任何作业,请您先参见创建作业的操作说明创建作业。

6.单击下一步,进入配置调度方式页面。配置项说明如下:

执行计划名称:长度限制为 1-64 个字符,只允许包含中文、字母、数字、’-‘、’_’。

调度策略

手动执行:创建完执行计划以后,并不会自动执行。需要用户手动执行。一旦已经在运行中了,不可以被再次执行。

周期调度:创建完执行计划以后,周期调度功能会立刻启动。并在用户设置的调度时间点上开始执行。可以在列表页面关闭周期调度。当调度执行开始的时候,上一周期的执行还未结束,本次调度就会被忽略。

调度周期设置:可以有天或小时两种调度的周期。天默认是一天,且无法更改。若选择小时,则可设置具体间隔时间,范围从 1-23。

首次执行时间:调度有效的开始时间。从这个时间开始,按照调度周期进行周期调度。第一次调度按照实际的时间满足要求的最近一个时间点开始调度。

单击确认提交,完成执行计划的创建。

其他

周期调度示例

这个设置表示,从 2015 年 10 月 31 日 10 点 0 分开始第一次调度,以后每隔一天调度一次。第二次调度是 2015 年 11 月 1 日 10 点 0 分。

作业的执行顺序

执行计划中的作业,按照用户选择的作业在作业列表中的顺序,从第一个开始一直执行到最后一个。

多个执行计划的执行顺序

每一个执行计划都可以看做是一个整体。当多个执行计划被提交到同一个集群上后,每一个执行计划都会按照自身内部的作业顺序提交作业,和单个执行计划的顺序是一致。而多个执行计划之间的作业是并行的。

实践示例 —— 前期作业调试

在作业的调试阶段,如果经常用按需自动创建集群的方式会比较慢,每次都需要启动集群会花费不少的时间。推荐的方式是:先手动创建一个集群,然后在执行计划中,选择关联该集群来运行作业,并设置调度方式为立即执行。调试的时候,每次都通过单击执行计划列表页上的“立即运行”来多次运行,查看结果。一旦作业调试完成,修改执行计划。将关联现有集群的方式,修改为按需创建新集群。并将调度方式修改为周期调度(视实际情况而定)。后续就可以按需自动跑任务了。

阿里云E-MapReduce 创建执行计划相关推荐

  1. 阿里云服务器如何创建快照?

    阿里云服务器如何创建快照? 首先我们来说一下什么是快照? 快照相当于是数据备份,可以为所有类型的ECS云盘创建快照,用于备份或者恢复云盘的数据,是一种高效的数据容灾手段. 我们可以为服务器的云盘创建快 ...

  2. 阿里云物联网平台创建设备

    阿里云物联网平台创建设备 阿里云物联网平台创建设备 创建产品 创建设备 在线调试 阿里云物联网平台创建设备 本文演示使用阿里云物联网平台进行产品.设备的创建和使用,模拟调试,观察日志. 创建产品 1. ...

  3. 信用等于更强大的安全防御能力 阿里云发起安全信誉联盟计划

    本文讲的是 信用等于更强大的安全防御能力 阿里云发起安全信誉联盟计划,信用到底有何用?芝麻信用认为信用等于财富,阿里云安全品牌云盾认为,信用等于更强大的安全防御能力. 2016年初,阿里云率先在业界发 ...

  4. 阿里云注册域名创建信息模板流程及审核时间说明

    阿里云域名注册域名持有者个人或企业都需要有已经通过实名认证的信息模板,如果没有可用的信息模板,需要先创建信息模版,等待信息模板实名通过后才可以注册域名,阿里云百科来详细说下阿里云注册域名创建信息模板实 ...

  5. 阿里云注册及创建工作空间

    阿里云注册及创建工作空间 步骤: 1.打开阿里云官网 阿里云 2.点击右上角注册按钮 3.进入注册界面,可以使用淘宝账号登录 4.注册完后点击右上角控制台 5.点击左上角功能菜单,点击产品与服务 6. ...

  6. 阿里云服务器如何创建快照备份数据

    文章目录 创建快照 快照收费 你申请了阿里云服务器,其实就是申请了一个云盘,这个云盘安装了操作系统,你可以远程访问这个系统并使用该系统.我们可以给云盘创建快照,从而达到备份服务器数据的目的. 创建快照 ...

  7. kubernetes存储系统介绍(Volume、PV、dynamic provisioning,阿里云服务器nfs创建pv,hostpath创建pv)

    全栈工程师开发手册 (作者:栾鹏) 架构系列文章 K8S存储系统 K8S的存储系统从基础到高级又大致分为三个层次:普通Volume,Persistent Volume 和动态存储供应(dynamic ...

  8. 新购阿里云服务器ECS创建之后无法ssh连接的问题处理

    作者:13 GitHub:https://github.com/ZHENFENG13 版权声明:本文为原创文章,未经允许不得转载. 问题描述 由于原服务器将要到期,因此趁着阿里云搞促销活动重新购买了一 ...

  9. 阿里云IoT启动“IoT合伙人”计划,投5亿赋能100万开发者

    在物联网开发者领域,阿里云再次祭出重磅炸弹.自2018年3月深圳云栖大会上,阿里云IoT宣布投入2.5亿全力支持物联网开发者后,近日再次宣布启动"IoT合伙人"计划,并追加3亿资金 ...

最新文章

  1. 验证(verification)和确认(validation)
  2. 不要过高估计SDN的能力,也善于发现SDN技术的缺陷之美
  3. visual studio 插件开发(5) -- 在任意位置添加自己的菜单
  4. 二十万字C/C++、嵌入式软开面试题全集宝典五
  5. 文件目录遍历的并发算法
  6. VC++取MD5算法记录下以后用得到(转)
  7. (转)elasticsearch6.0版本安装head插件
  8. 产品经理如何激发出新的创意
  9. php获取访问者ip地址汇总,php获取访问者IP地址汇总_PHP
  10. AlphaFold 和 AI 蛋白质折叠革命的下一步是什么
  11. 韩顺平.2011最新版.玩转oracle视频教程笔记,韩顺平.2011最新版.玩转oracle视频教程(笔记)...
  12. Leecode刷题热题HOT100(3)——无重复字符最长子串
  13. Matlab fftshift and ifftshift and some confusions
  14. html简繁替换,Web界面简繁体转换
  15. Javaweb支付宝支付
  16. mysql 学生成绩管理数据库操作案例
  17. laravel 使用workerman加速应用
  18. 【算法】最直接的算法——穷举法详解
  19. ai取代程序员_未来50%的工作都将被人工智能给取代,程序员会被机器人取代吗?...
  20. winform textbox行间距调整

热门文章

  1. 【POJ 2942】Knights of the Round Table(点双连通分量,二分图染色)
  2. centos6/7安装gitlab
  3. LVS+OSPF 架构
  4. Ehcache学习一:JDBC caching
  5. 如何自己动手写一个搜索引擎?我是一份害羞的教程
  6. 华软oracle,ORACLE 表空间的简单理解
  7. 基于Xml 的IOC 容器的初始化
  8. 观察者模式的应用场景
  9. Spring编程模型:Spring实现了哪些编程模型?
  10. Stream流中的常用方法_limit