消息中间件之二：kafka详解

一、概述

Kafka是是由Apache软件基金会开发的一个开源流处理平台，由Scala和Java编写，它是一种分布式的，高吞吐量（支持每秒数百万），基于发布/订阅的轻量级消息系统，它支持分区（partition）、多副本（replica），可基于zookeeper完成分布式的协调一致管理，可实时处理海量消费者在网站中的所有动作流数据。kafka用于构建实时数据管道和流应用程序，具有横向扩展，容错，wicked fast（变态快）等优点；Kafka的目的是通过Hadoop的并行加载机制来统一线上和离线的消息处理，也是为了通过集群来提供实时的消息。多用于处理海量数据，对实时性要求高的场景，例如：基于hadoop的批处理系统、低延迟的实时系统、storm/Spark流式处理引擎，web/nginx日志、访问日志，消息服务等等。

Kafka官方地址： http://kafka.apache.org/

场景案例：

1>日志收集：一个公司可以用Kafka可以收集各种服务的log，通过kafka以统一接口服务的方式开放给各种consumer，例如hadoop、Hbase、Solr等。
2>

消息中间件之二：kafka详解相关推荐

kafka详解及集群环境搭建
一.kafka详解安装包下载地址:https://download.csdn.net/download/weixin_45894220/87020758 1.1Kafka是什么? 1.Kafka是一 ...
[深入浅出Cocoa]之消息（二）-详解动态方法决议(Dynamic Method Resolution)
[深入浅出Cocoa]之消息(二)-详解动态方法决议(Dynamic Method Resolution) 罗朝辉 (http://www.cnblogs.com/kesalin/) 本文遵循&quo ...
ViewPager 详解（二）---详解四大函数
前言:上篇中我们讲解了如何快速实现了一个滑动页面,但问题在于,PageAdapter必须要重写的四个函数,它们都各有什么意义,在上节的函数内部为什么要这么实现,下面我们就结合Android的API说明 ...
RxJS 系列之二 - Observable 详解
查看新版教程,请访问前端修仙之路 RxJS 系列目录 RxJS 系列之一 - Functional Programming 简介 RxJS 系列之二 - Observable 详解 (本文) RxJS ...
CORS跨域资源共享(二)：详解Spring MVC对CORS支持的相关类和API【享学Spring MVC】
每篇一句重构一时爽,一直重构一直爽.但出了问题火葬场前言上篇文章通过我模拟的跨域请求实例和结果分析,相信小伙伴们都已经80%的掌握了CORS到底是怎么一回事以及如何使用它.由于Java语言中的w ...
十二、详解计算网络中的流量控制和差错控制、HDLC
十二.详解计算网络中的流量控制和差错控制提示:这里可以添加系列文章的所有文章的目录,目录需要自己手动添加例如:第一章 Python 机器学习入门之pandas的使用提示:写完文章后,目录可以自动 ...
DFT - 对芯片测试的理解（二）详解
DFT - 对芯片测试的理解(二) 详解参考: https://www.docin.com/p-2014360649.html The basic view of DFT scan chain 这图 ...
32.深度解密三十二：详解影响QQ群整体排名的那些秘密
网络营销推广技术.技巧深度解密(三十二)指南: 1.本文档适合零基础以及互联网营销推广人员,主要讲解营销QQ群排名的一些问题. 2.原创版权文档,任何抄袭或者全部.部分模仿都是侵权行为. 3.敬畏法律 ...
Vuex入门(二)—— mutations详解
目录知识不足的地方赶快点击学习呦~~~ Vuex入门(一)-- state,mapState,-mapState对象展开符详解 Vuex入门(二)-- mutations详解 Vuex入门(三)-- ...
消息中间件Kafka详解
1.Kafka讲解 3.1 什么是Kafka kafka官网:http://kafka.apache.org/ 中文文档:https://www.orchome.com/511 Kafka 是一个 ...

消息中间件之二：kafka详解

一、概述

消息中间件之二：kafka详解相关推荐

最新文章

热门文章