解读:计数器Counter

http://www.cnblogs.com/codeOfLife/p/5521356.html 这个讲的更详细

17/05/23 17:18:53 INFO mapreduce.Job: Counters: 49 #  6类()49个计数器(亲自数了一遍)。File System CountersFILE: Number of bytes read=12222FILE: Number of bytes written=239539FILE: Number of read operations=0FILE: Number of large read operations=0FILE: Number of write operations=0HDFS: Number of bytes read=11316HDFS: Number of bytes written=1892HDFS: Number of read operations=8HDFS: Number of large read operations=0HDFS: Number of write operations=2Job Counters Launched map tasks=1Launched reduce tasks=1Other local map tasks=1Total time spent by all maps in occupied slots (ms)=21775Total time spent by all reduces in occupied slots (ms)=16960Total time spent by all map tasks (ms)=21775Total time spent by all reduce tasks (ms)=16960Total vcore-milliseconds taken by all map tasks=21775Total vcore-milliseconds taken by all reduce tasks=16960Total megabyte-milliseconds taken by all map tasks=22297600Total megabyte-milliseconds taken by all reduce tasks=17367040Map-Reduce FrameworkMap input records=108Map output records=216Map output bytes=11784Map output materialized bytes=12222Input split bytes=279Combine input records=0Combine output records=0Reduce input groups=36Reduce shuffle bytes=12222Reduce input records=216Reduce output records=36Spilled Records=432Shuffled Maps =1Failed Shuffles=0Merged Map outputs=1GC time elapsed (ms)=232CPU time spent (ms)=2180Physical memory (bytes) snapshot=273268736Virtual memory (bytes) snapshot=4118401024Total committed heap usage (bytes)=137498624Shuffle ErrorsBAD_ID=0CONNECTION=0IO_ERROR=0WRONG_LENGTH=0WRONG_MAP=0WRONG_REDUCE=0File Input Format Counters Bytes Read=0File Output Format Counters Bytes Written=1892

转载于:https://www.cnblogs.com/rocky-AGE-24/p/6895114.html

解读:计数器Counter相关推荐

  1. Python之计数器 (Counter)

    任务描述 本关任务:编写一个对输入字符串的字符进行计数的程序. 计数器(Counter) 计数器是一个无序容器,用于记录各种值出现的次数.它采用键值对的形式存储,要记录的值作为key,这个值出现的次数 ...

  2. python collections模块(数据结构常用模块)计数器Counter 双向队列deque 默认字典defaultdict 有序字典OrderedDict 可命名元组namedtuple

    collections 模块----Python标准库,是数据结构常用模块 常用类型有: 计数器(Counter) 双向队列(deque) 默认字典(defaultdict) 有序字典(Ordered ...

  3. html5计数器,CSS 计数器(counter)

    带计数器的自动编号 CSS计数器就像"变量".变量值可以通过CSS规则递增(它将跟踪它们被使用的次数).要使用CSS计数器,我们将使用以下属性: counter-reset - 创 ...

  4. 计数器:counter

    组成:2属性,1方法 属性1: counter-reset 命名 属性2: counter-increment 启动/自增 方法 : counter()/counters() 调用方法 1.计数器 命 ...

  5. java计数器map_计数器(Counter)

    Hadoop中的计数器有点类似于日志,可以输出Hadoop在运行过程的运运算信息. 在之前运行的WordCount中,控制台输出的信息有以下内容(可以再运行一次WordCount案例进行查看):Cou ...

  6. Mapreduce和Yarn概念,参数优化,作用,原理,MapReduce计数器 Counter,MapReduce 多job串联之ControlledJob(来自学习资料)

    3.3. MapReduce与YARN 3.3.1 YARN概述 Yarn是一个资源调度平台,负责为运算程序提供服务器运算资源,相当于一个分布式的操作系统平台,而mapreduce等运算程序则相当于运 ...

  7. Mapreduce和Yarn概念,参数优化,作用,原理,MapReduce计数器 Counter,MapReduce 多job串联之ControlledJob(来自学习资料)...

    3.3. MapReduce与YARN 3.3.1 YARN概述 Yarn是一个资源调度平台,负责为运算程序提供服务器运算资源,相当于一个分布式的操作系统平台,而mapreduce等运算程序则相当于运 ...

  8. python计数器_【Python】计数器 Counter

    在了解 Counter 之前,请大家思考一个问题,现在有包含多个词汇的列表: list1 = ['red','green','red','blue','green','red'] 该如何去统计列表中各 ...

  9. python计数器函数_Python计数器Counter

    老男孩教育的PYTHON自动化开发课程自2013年第1期到现在已经走到了第12期,2年半的时间里,我们每一期都在对课程细节进行不同程度的优化,课程总时长也从最开始的2个月延长至第12期的五到六月,更新 ...

最新文章

  1. Linux下使用SSH、Crontab、Rsync三工具实现数据自动备份
  2. 推荐 | 有三AI生态新的资源干货集中营,好书好工具好内容等你来淘
  3. 关于AE大数据点文件读取生成SHP文件时使用IFeatureBuffer快速提高读取效率
  4. 《C++游戏开发》笔记十二 战争迷雾:初步实现
  5. securecrt修改mysql密码_在CentOS下Mysql5.5的密码修改
  6. android image 位移动画_Android共享元素转场动画实现
  7. HDU 2545 树上战争(并查集)
  8. 9550电机_电机转矩T=9550*P/N推导。
  9. MAC打开eclipse一直卡在core.ui的解决办法
  10. linux宝塔如何开启gzip,宝塔面板nginx gzip压缩率设置多少合适
  11. JAVA对接发送SMS短信服务
  12. 使用python脚本监控服务器显卡使用情况
  13. 如何获得凤凰网或腾讯视频链接并下载到本地
  14. java模拟三人爬山_java笔记——模拟多人徒步爬山例子
  15. 图论 —— 图的遍历 —— 哈密顿问题
  16. Python分析股票行情代码
  17. 安卓开发学习(只有java基础)
  18. gitbook 插件 主题
  19. 笔记本二合一计算机,可能是目前最完美的二合一笔记本电脑 Surface Pro 7之我所见...
  20. 推荐一款好的SMT编程软件

热门文章

  1. SpringBoot使用@Transactional
  2. CENTOS7.8忘记ROOT密码,重置密码步骤
  3. python 字典和列表的遍历
  4. [菜鸟SpringCloud实战入门]第九章:服务网关Zuul体验
  5. 【340天】我爱刷题系列099(2018.01.11)
  6. 完美解决wordpress邮件链接无效的问题
  7. main,tmain,winmain()等函数——UNICODE - sensensen - 博客园
  8. 【非常有用=小白也可以简单操作】越狱系统中可以让多个Kindle应用程序同时使用的办法--自己......
  9. HTML5网站大观:分享8个精美的 HTML5 网站案例
  10. XMPP的简介和基本概念