95-240-054-原理-State-FsStateBackend
1.视界
1.背景
FsStateBackend 需要配置的主要是文件系统,如 URL(类型,地址,路径)。举个例子,比如可以是:
- hdfs://namenode:40010/flink/checkpoints
- s3://flink/checkpoints
当选择使用 FsStateBackend 时,正在进行的数据会被存在 TaskManager 的内存中。在 checkpoint 时,此后端会将状态快照写入配置的文件系统和目录的文件中,同时会在 JobManager 的内存中(在高可用场景下会存在 Zookeeper 中)存储极少的元数据。
默认情况下,FsStateBackend 配置成提供异步快照,以避免在状态 checkpoint 时阻塞数据流的处理。该特性可以实例化 FsStateBackend 时传入 false 的布尔标志来禁用掉,例如:
new FsStateBackend
95-240-054-原理-State-FsStateBackend相关推荐
- JS可以写操作系统?Windows 95被装进Electron App
什么是Windows 95? \\ 这个Windows 95是微软的那个操作系统吗?可以说是,也可以说不是.它实际上是一个Electron app,可以运行在Windows.macOS和Linux上. ...
- 【5. MySQL 的执行原理】
MySQL 的执行原理 单表访问之索引合并(本质是主键索引的合并) 我们前边说过 MySQL 在一般情况下执行一个查询时最多只会用到单个二级 索引,但存在有特殊情况,在这些特殊情况下也可能在一个查 ...
- stm32 ucosii消息队列 串口_正点原子STM32F407探索者开发板资料连载第六十三章 UCOSII 实验...
1)实验平台:alientek 阿波罗 STM32F767 开发板 2)摘自<STM32F7 开发指南(HAL 库版)>关注官方微信号公众号,获取更多资料:正点原子 http://weix ...
- 第三天 LINUX安全
ssh安全与IPTABLES操作 1.修改SSH监听端口 默认情况下,SSH监听连接端口22,***者使用端口扫描软件就可以看到主机是否运行有SSH服务,将SSH端口修改为大于1024的端口是一个明智 ...
- bind9 dlz mysql_利用BIND+DLZ+MYSQL构建企业智能DNS
目录: 一.简介 二.服务规划 三.安装BIND及基本环境 四.配置Bind-View-DLZ-MYSQL 五.添加相关记录并进行测试 六.配置从DNS 七.本文以FreeBSD 10.2 stabl ...
- java 迷你dvd_java基础迷你DVD系统
1 packagecom.jb.minidvd;2 3 importjava.text.ParseException;4 importjava.text.SimpleDateFormat;5 impo ...
- TI杯基于FDC2214的手势识别设计(黑龙江省赛)
省赛题目: 使用指定IC,完成对手势1,2,3,4,5,石头,剪刀,布的识别,详细的文本文件大家可以在网上搜一下. 多说一句,这个题目没什么难度,最锻炼人的就是当时读技术手册 前言及大概完成思路: 电 ...
- socks代理服务器协议的说明
转自:http://gc063tzf.blog.163.com/blog/static/11216292201210246448371/(侵删) socks代理里面,有socks4 socks4a s ...
- Python “今日新闻”一个小程序,拿走就能用!
核心代码 requests.get 下载html网页 bs4.BeautifulSoup 分析html内容 from requests import get from bs4 import Beaut ...
- 实用---生命游戏 Java
本程序由四个类组成: 其中Init_data,用于初始化各个活细胞的状态judge_state,用于判断下一代的细胞状态,并进行更新.set_color,用于给GUI界面中各个细胞涂色set_fram ...
最新文章
- SAP Retail Assortment List - 分类列表
- paddle_ocr2.0入门踩坑
- 构造函数中不应调用虚函数
- 计算机与材料化学应用背景介绍,计算机在材料工程中的应用.ppt
- LeetCode 367. 有效的完全平方数(二分查找)
- 10分钟搭建完成人脸通行系统 百度『乘风』人脸智能化平台了解一下
- 做一个项目,平时都用到哪些工具提高效率(中) 【转】
- 【渝粤教育】国家开放大学2018年春季 8643-22T数据库基础与应用 参考试题
- matlab中求雅克比矩阵的方法及cov函数的用法,协方差矩阵—Hessian矩阵—正定矩阵
- 天线效应产生原因及解决办法
- 皮皮虾技术三面,我的面试经验与总结分享
- 计算机视觉-论文阅读笔记-基于高性能检测器与表观特征的多目标跟踪
- CTF学习经验分享(Web方向)
- wagon-maven-plugin插件实现自动化构建部署到服务器
- 保险公司如何为数字化转型做准备
- 十大经典排序算法的动图
- CSS属性 – cursor
- linux篇-安装cmatrix(黑客帝国矩阵效果)
- WordPress博客里面放谷歌广告代码
- Microsoft Word 教程:如何在 Word 中更改页边距、创建新闻稿栏?