监控指标

  • 延迟(Latency)
  • 丢包率(Packet Loss)
  • 吞吐量(Throughput)
  • 链路使用率(Link Utilization)
  • 可用性(Availability)

测量手段

  • 主动 vs 被动
  • 单点 vs 多点
  • 网络层 vs 应用层
  • 镜像 vs 采样
  • 主机端 vs 交换节点

流量抓取协议

镜像/SPAN

把被监控端口的流量复制一份,发送到特定目的端口。某些硬件交换机支持,OpenvSwitch 支持类似的 Mirror 功能。

分为两类:

  • 本地 SPAN:被监控端口和目的端口在同一交换机。
  • 远端 SPAN:被监控端口和目的端口在不同交换机。

被监控的流量从方向上可以为:

  • 进入流量:支持多个端口或指定 VLAN。
  • 出去流量:一个端口。

流量统计协议

SNMP

Simple Network Management Protocol,IETF 标准,从路由器内存(MIB 库,管理信息数据库)中定期获取简单 IP 层统计信息,同时支持对设备进行管理。对设备有负担。

RMON

Remote Network MONitoring,IETF 标准,查询网络设备的 MIB 库。对设备有负担。

NetStream

基于网络流的信息统计。网络设备自身统计网络流信息并放在本地缓冲区,缓冲区满或超时后输出统计信息。 3Com、HP、华为支持。

sFlow

sampled flow。sFlow 是基于采样(sampling)的流量抓取工具,由 inMon 公司推出,交换机上使用较多。大部分硬件交换机中内置专用芯片支持,OpenvSwitch 支持。

sFlow 支持获取采样数据包的任何数量的字节,由内置 agent 封装为 UDP 包后发给采集器,默认端口为 6343。采集器(或分析器)可以根据这些数据包进行进一步的汇总和统计。sFlow 最大的优点是降低对设备的资源压力,扩展性好。

采样方法包括基于流的和基于时间的。

支持 sFlow 的设备列表可以参考:http://www.sflow.org/products/network.php。

NetFlow

Cisco 推出的基于采样的流统计标准,目的是统计每条流的信息,路由器上使用较多。在 NetFlow 技术的演进过程中,Cisco 一共开发出了 V1、V5、V7、V8 和 V9 等 5 个主要的实用版本。

NetFlow 支持采样或全部流量(CPU 占用高)的统计,本地采集到 cache 中进行统计,当流结束时(或超时,或指定时间间隔)以相应格式封装为 UDP 包上报记录并清除本地 cache,采集器典型端口为 2055。大部分设备支持的最低刷新 cache 超时为 60 秒。

定义一条流经典的考虑如下 7 个域:

  • 源 IP 地址;
  • 目标 IP 地址;
  • 源端口号;
  • 目标端口号;
  • 三层协议类型;
  • 服务类型(TOS)字节;
  • 网络设备输入或输出的逻辑网络端口(iflndex)。

Cisco Flexible NetFlow 协议号称支持用户选择自定义的域来定义流。

对于每条流可以记录其传送方向和目的地等流向特性,统计其起始和结束时间、服务类型、包含的数据包数量和字节数量等流量信息。

典型的一条流记录的格式,例如

源地址 | 目的地址 | 源自治域 | 目的自治域 | 流入接口号 | 流出接口号 | 协议源端口 | 协议目的端口 | 协议类型 | 包数量 | 字节数 | 流数量

例如(经 nfdump 转化):

Date flow start          Duration Proto   Src IP Addr:Port      Dst IP Addr:Port     Packets    Bytes Flows2010-09-01 00:00:00.459     0.000 UDP     127.0.0.1:24920   ->  192.168.0.1:22126        1       46     12010-09-01 00:00:00.363     0.000 UDP     192.168.0.1:22126 ->  127.0.0.1:24920          1       80     1

IPFIX

IP Flow Information Export,IETF 推出的基于采样的流统计标准,源自 Cisco 的 NetFlow v9 标准。

定义一个流也考虑 NetFlow 类似的 7 个域。

每条流记录特征信息,包括:

  • 时间戳
  • 网包数
  • 网包平均大小
  • 总字节数
  • 流开始时间
  • 流结束时间

OpenFlow flow statistics

统计流量信息。

其他协议

类似协议还包括 Juniper 的 J-Flow/cflowd(类似 sFlow)、HP 的 Extended RMON 等、Ericsson 的 Rflow、Citrix 的 AppFlow。

流量采集和分析工具

inMon 自家的侧重 sFlow 的

  • Traffic Sentinel:提供大而全的流量性能分析和管控,包括网络、存储、计算热点等。支持主流的网络监控协议。
  • sFlowTrend:免费的 sFlow 流量采集,提供端口统计功能。
  • sFlowTrend Pro:增加存储功能,可以查看历史数据。
  • sFlow-RT:支持 sflow 和 SDN 控制器功能,实时 sflow 分析,提供负载均衡和 DDoS 检测等。

更多工具可以参考 http://www.sflow.org/products/collectors.php

ntopng

开源产品,原先的版本叫 ntop,定位于流量分析和问题定位。

ntopng 以网页形式显示流量统计信息,支持流量实时汇总和监控。

NetFlow Analyzer

闭源产品。支持 NetFlow, sFlow, JFLow 等格式 flow 的收集器和分析引擎整合。

Solarwinds NetFlow Traffic Analyzer

solarwinds 的产品,基于 Windows .Net+SQL Server,支持 NetFlow, sFlow, JFLow 等格式,图形界面,支持带宽统计、应用类型统计、

flowviewer

对 NetFlow/IPFix 的数据分析工具,提供 Web 界面。http://sourceforge.net/projects/flowviewer

nfdump

支持 NetFlow,提供一系列命令行工具,提供基于地址、端口等的流量信息统计。

开源产品,项目地址为 http://nfdump.sourceforge.net/。

nfsen

为 nfdump 提供的 Web 前端。

开源产品,项目地址为 http://nfsen.sourceforge.net/。

转载请注明:http://blog.csdn.net/yeasy/article/details/43114809

网络流量监测技术概述相关推荐

  1. 网络流量分析 NetFlow是什么 详解 科普 ~互联网业务流量监测技术的应用和设计---perfect

    前言 随着宽带互联网在中国的迅速发展,全国各大电信运营商的网络规模都在不断扩张,网络结构日渐复杂,网络业务日趋丰富,网络流量高速增长.电信运营商需要通过可靠.有效的网络业务流量监测系统对其网络以及网络 ...

  2. 网络流量监测与调度技术研究

    网络流量监测与调度技术研究 网络流量监测与调度技术研究 学习目标:流量监测 学习内容: 流量监测 流量监测的设计框架 框架一 框架二 框架三 申明: 未经许可,禁止以任何形式转载,若要引用,请标注链接 ...

  3. cacti 网络流量监测图形分析工具

    Cacti是一套基于PHP,MySQL,SNMP及RRDTool开发的网络流量监测图形分析工具. 安装方法 一.安装rrdtool CentOS-5: rpm -ivh http://apt.sw. ...

  4. linux网络流量监测工具,linux下网络流量监控工具

    今天QA同学让我协助检测下一台服务器的网络流量.没干过这活,在网上随便找了个命令.后来,发现是不对的,为了以后不出丑,决定收集下网络流量监测相关的工具. 查看某个网卡收发数据的总量 方法一 方法二 2 ...

  5. Hyper-v下安装网络流量监测图形分析工具 Cacti

    网络流量监测图形分析工具Cacti,在虚拟机上安装,易于使用,便于移植,在Vmware上安装的已有介绍,这里略过,这里主要介绍在微软虚拟机Hyper-v上的安装过程. 安装前准备: 1.安装虚拟机Hy ...

  6. #96 百度大规模网络流量接入技术 BFE 开源

    #96 百度大规模网络流量接入技术 & BFE 开源 https://talkgo.org/t/topic/554 BFE 是使用 golang 语言编写的. 在爆发式增长的情况下,网络接入必 ...

  7. 网络流量分析软件 mysql_网络流量监测图形分析工具 Cacti

    Cacti是一套基于PHP,MySQL,SNMP及RRDTool开发的网络流量监测图形分析工具. Cacti 在英文中的意思是仙人掌的意思,Cacti是一套基于PHP,MySQL,SNMP及RRDTo ...

  8. 舆情监测是什么技术,网络舆情监测技术操作规范?

    网络舆情监测是对互联网上公众的言论和观点进行监视和预测的行为,随着互联网的发展,舆情监测已经是企业日常重要工作,对于企业来说是非常重要的,接下来TOOM舆情监测带您了解舆情监测是什么技术,网络舆情监测 ...

  9. 网络流量监控技术与方法

    流量监控的手段有哪些,RMON和SMON的区别是什么? SMON用于交换式网络,而ROMN用于共享式网络. 为什么有RMON技术,SNMP进行流量监控的缺陷是什么? 实时性差,频繁的轮询会产生巨大的网 ...

最新文章

  1. 求二叉树上结点的路径_剑指offer 二叉树
  2. linux date
  3. 如何优化 Java 性能?
  4. 【Python植物大战僵尸军团来袭】“大家快醒一醒、一大波僵尸来了”
  5. 论述一个模式的时候的方法
  6. java多线程中的死锁、活锁、饥饿、无锁都是什么鬼?
  7. 暴力修改SElinux权限
  8. 索要 2.3 亿元赎金!富士康遭遇黑客攻击
  9. SQL注入-联合注入
  10. 转岗测试工作三年经验总结(前端开发转测试)
  11. kafka----kafka connect的使用(一)
  12. 第四课 SCCM2012功能SCUP为操作系统分发更新补丁
  13. Phyton Socket发送接收Modbus数组
  14. JavaScript网页特效范例宝典pdf
  15. 股权-公司治理的至高点,如何合理运用股权(融人、融资、融市场) 张明若
  16. 深入了解ElasticSearch的Nested数据类型
  17. Python正则表达式和re模块,完美匹配中文与中文标点符号
  18. 中国古代数学家张丘建在他的《算经》中提出了著名的“百钱买百鸡问题”:鸡翁一,值钱五,鸡母一,值钱三,鸡雏三,值钱一,百钱买百鸡,问翁、母、雏各几何?
  19. iOS杂谈15—APP被苹果APPStore拒绝的各种原因
  20. Ural_1671. Anansi's Cobweb(并查集)

热门文章

  1. llvm libLLVMCore源码分析 05 - Instruction Class
  2. 聚合支付系统开发究竟难不难?
  3. 360RePlugin 常见问题
  4. layui导出Excel表格自定义文件名称
  5. MS2109/HDMI转USB2.0高清视频采集
  6. 2009年三季度上市公司报表1
  7. 云效一站式DevOps平台
  8. DingTalk「开发者说」如何开发钉钉高价值应用三部曲
  9. 【教你赚钱】5分钟成为副业致富的独立开发者
  10. 日志特征选择汇总(基于天池比赛)