解读:计数器Counter
解读:计数器Counter
http://www.cnblogs.com/codeOfLife/p/5521356.html 这个讲的更详细
17/05/23 17:18:53 INFO mapreduce.Job: Counters: 49 # 6类()49个计数器(亲自数了一遍)。File System CountersFILE: Number of bytes read=12222FILE: Number of bytes written=239539FILE: Number of read operations=0FILE: Number of large read operations=0FILE: Number of write operations=0HDFS: Number of bytes read=11316HDFS: Number of bytes written=1892HDFS: Number of read operations=8HDFS: Number of large read operations=0HDFS: Number of write operations=2Job Counters Launched map tasks=1Launched reduce tasks=1Other local map tasks=1Total time spent by all maps in occupied slots (ms)=21775Total time spent by all reduces in occupied slots (ms)=16960Total time spent by all map tasks (ms)=21775Total time spent by all reduce tasks (ms)=16960Total vcore-milliseconds taken by all map tasks=21775Total vcore-milliseconds taken by all reduce tasks=16960Total megabyte-milliseconds taken by all map tasks=22297600Total megabyte-milliseconds taken by all reduce tasks=17367040Map-Reduce FrameworkMap input records=108Map output records=216Map output bytes=11784Map output materialized bytes=12222Input split bytes=279Combine input records=0Combine output records=0Reduce input groups=36Reduce shuffle bytes=12222Reduce input records=216Reduce output records=36Spilled Records=432Shuffled Maps =1Failed Shuffles=0Merged Map outputs=1GC time elapsed (ms)=232CPU time spent (ms)=2180Physical memory (bytes) snapshot=273268736Virtual memory (bytes) snapshot=4118401024Total committed heap usage (bytes)=137498624Shuffle ErrorsBAD_ID=0CONNECTION=0IO_ERROR=0WRONG_LENGTH=0WRONG_MAP=0WRONG_REDUCE=0File Input Format Counters Bytes Read=0File Output Format Counters Bytes Written=1892
转载于:https://www.cnblogs.com/rocky-AGE-24/p/6895114.html
解读:计数器Counter相关推荐
- Python之计数器 (Counter)
任务描述 本关任务:编写一个对输入字符串的字符进行计数的程序. 计数器(Counter) 计数器是一个无序容器,用于记录各种值出现的次数.它采用键值对的形式存储,要记录的值作为key,这个值出现的次数 ...
- python collections模块(数据结构常用模块)计数器Counter 双向队列deque 默认字典defaultdict 有序字典OrderedDict 可命名元组namedtuple
collections 模块----Python标准库,是数据结构常用模块 常用类型有: 计数器(Counter) 双向队列(deque) 默认字典(defaultdict) 有序字典(Ordered ...
- html5计数器,CSS 计数器(counter)
带计数器的自动编号 CSS计数器就像"变量".变量值可以通过CSS规则递增(它将跟踪它们被使用的次数).要使用CSS计数器,我们将使用以下属性: counter-reset - 创 ...
- 计数器:counter
组成:2属性,1方法 属性1: counter-reset 命名 属性2: counter-increment 启动/自增 方法 : counter()/counters() 调用方法 1.计数器 命 ...
- java计数器map_计数器(Counter)
Hadoop中的计数器有点类似于日志,可以输出Hadoop在运行过程的运运算信息. 在之前运行的WordCount中,控制台输出的信息有以下内容(可以再运行一次WordCount案例进行查看):Cou ...
- Mapreduce和Yarn概念,参数优化,作用,原理,MapReduce计数器 Counter,MapReduce 多job串联之ControlledJob(来自学习资料)
3.3. MapReduce与YARN 3.3.1 YARN概述 Yarn是一个资源调度平台,负责为运算程序提供服务器运算资源,相当于一个分布式的操作系统平台,而mapreduce等运算程序则相当于运 ...
- Mapreduce和Yarn概念,参数优化,作用,原理,MapReduce计数器 Counter,MapReduce 多job串联之ControlledJob(来自学习资料)...
3.3. MapReduce与YARN 3.3.1 YARN概述 Yarn是一个资源调度平台,负责为运算程序提供服务器运算资源,相当于一个分布式的操作系统平台,而mapreduce等运算程序则相当于运 ...
- python计数器_【Python】计数器 Counter
在了解 Counter 之前,请大家思考一个问题,现在有包含多个词汇的列表: list1 = ['red','green','red','blue','green','red'] 该如何去统计列表中各 ...
- python计数器函数_Python计数器Counter
老男孩教育的PYTHON自动化开发课程自2013年第1期到现在已经走到了第12期,2年半的时间里,我们每一期都在对课程细节进行不同程度的优化,课程总时长也从最开始的2个月延长至第12期的五到六月,更新 ...
最新文章
- Linux下使用SSH、Crontab、Rsync三工具实现数据自动备份
- 推荐 | 有三AI生态新的资源干货集中营,好书好工具好内容等你来淘
- 关于AE大数据点文件读取生成SHP文件时使用IFeatureBuffer快速提高读取效率
- 《C++游戏开发》笔记十二 战争迷雾:初步实现
- securecrt修改mysql密码_在CentOS下Mysql5.5的密码修改
- android image 位移动画_Android共享元素转场动画实现
- HDU 2545 树上战争(并查集)
- 9550电机_电机转矩T=9550*P/N推导。
- MAC打开eclipse一直卡在core.ui的解决办法
- linux宝塔如何开启gzip,宝塔面板nginx gzip压缩率设置多少合适
- JAVA对接发送SMS短信服务
- 使用python脚本监控服务器显卡使用情况
- 如何获得凤凰网或腾讯视频链接并下载到本地
- java模拟三人爬山_java笔记——模拟多人徒步爬山例子
- 图论 —— 图的遍历 —— 哈密顿问题
- Python分析股票行情代码
- 安卓开发学习(只有java基础)
- gitbook 插件 主题
- 笔记本二合一计算机,可能是目前最完美的二合一笔记本电脑 Surface Pro 7之我所见...
- 推荐一款好的SMT编程软件
热门文章
- SpringBoot使用@Transactional
- CENTOS7.8忘记ROOT密码,重置密码步骤
- python 字典和列表的遍历
- [菜鸟SpringCloud实战入门]第九章:服务网关Zuul体验
- 【340天】我爱刷题系列099(2018.01.11)
- 完美解决wordpress邮件链接无效的问题
- main,tmain,winmain()等函数——UNICODE - sensensen - 博客园
- 【非常有用=小白也可以简单操作】越狱系统中可以让多个Kindle应用程序同时使用的办法--自己......
- HTML5网站大观:分享8个精美的 HTML5 网站案例
- XMPP的简介和基本概念