Kafka宕机引发的高可用问题

问题要从一次Kafka的宕机开始说起。

笔者所在的是一家金融科技公司，但公司内部并没有采用在金融支付领域更为流行的RabbitMQ，而是采用了设计之初就为日志处理而生的Kafka，所以我一直很好奇Kafka的高可用实现和保障。从Kafka部署后，系统内部使用的Kafka一直运行稳定，没有出现不可用的情况。

但最近系统测试人员常反馈偶有Kafka消费者收不到消息的情况，登陆管理界面发现三个节点中有一个节点宕机挂掉了。但是按照高可用的理念，三个节点还有两个节点可用怎么就引起了整个集群的消费者都接收不到消息呢？

要解决这个问题，就要从Kafka的高可用实现开始讲起。

面试准备

不论是校招还是社招都避免不了各种面试、笔试，如何去准备这些东西就显得格外重要。运筹帷幄之后，决胜千里之外！不打毫无准备的仗，我觉得大家可以先从下面几个方面来准备面试：

1. 自我介绍。（介绍自己的项目经历以及一些特长而不是简单自我介绍喜好等）

2. 自己面试中可能涉及哪些知识点、那些知识点是重点。

3. 面试中哪些问题会被经常问到、面试中自己该如何回答。

4. 自己的简历该如何写。

“80%的oﬀer掌握在20%的人手中” 这句话也不是不无道理的。决定你面试能否成功的因素中实力固然占有很大一部分比例，但是如果你的心态或者说运气不好的话，依然无法拿到满意的 oﬀer。运气暂且不谈，就拿心态来说，千万不要因为面试失败而气馁或者说怀疑自己的能力，面试失败之后多总结一下失败的原因，后面你就会发现自己会越来越强大。

另外，大家要明确的很重要的几点是：

1. 写在简历上的东西一定要慎重，这可能是面试官大量提问的地方；

2. 将自己的项目经历完美的展示出来非常重要。

常见面试问题及范围如下

Java基础

重载和重写的区别
String 和 StringBuffer、StringBuilder 的区别是什么？String 为什么是不可变的？
自动装箱与拆箱
== 与 equals
final 关键字
Object类的常见方法
Java 中的异常处理
获取用键盘输入常用的的两种方法
接口和抽象类的区别是什么

集合框架

Arraylist 与 LinkedList 异同
ArrayList 与 Vector 区别
HashMap的底层实现
HashMap 和 Hashtable 的区别
HashMap 的长度为什么是2的幂次方
HashMap 多线程操作导致死循环问题
HashSet 和 HashMap 区别
ConcurrentHashMap 和 Hashtable 的区别
ConcurrentHashMap线程安全的具体实现方式/底层具体实现

多线程与并发

AQS 原理
AQS 对资源的共享方式
AQS底层使用了模板方法模式
说一说自己对于 synchronized 关键字的了解
说说自己是怎么使用 synchronized 关键字，在项目中用到了吗
讲一下 synchronized 关键字的底层原理
说说 JDK1.6 之后的synchronized 关键字底层做了哪些优化，可以详细介绍一下这些优化吗
谈谈 synchronized和ReenTrantLock 的区别
说说 synchronized 关键字和 volatile 关键字的区别
为什么要用线程池？
实现Runnable接口和Callable接口的区别
执行execute()方法和submit()方法的区别是什么呢？
如何创建线程池
介绍一下Atomic 原子类
JUC 包中的原子类是哪4类?
讲讲 AtomicInteger 的使用
能不能给我简单介绍一下 AtomicInteger 类的原理

JVM

Java 中会存在内存泄漏吗，简述一下？
描述一下 JVM 加载 Class 文件的原理机制?
什么是tomcat类加载机制？
类加载器双亲委派模型机制？
垃圾回收常见问题
什么是GC? 为什么要有 GC？
简述一下Java 垃圾回收机制？
如何判断一个对象是否存活？
垃圾回收的优点和原理，并考虑 2 种回收机制？
Java 中垃圾收集的方法有哪些？
讲讲你理解的性能评价及测试指标？
常用的性能优化方式有哪些？

网络编程与操作系统

TCP、UDP 协议的区别
在浏览器中输入url地址 ->> 显示主页的过程
各种协议与HTTP协议之间的关系
HTTP长连接、短连接
TCP 三次握手和四次挥手(面试常客)
简单介绍一下 Linux 文件系统？
一些常见的 Linux 命令了解吗？

MySQL

说说自己对于 MySQL 常见的两种存储引擎：MyISAM与InnoDB的理解？
数据库索引了解吗？
为什么索引能提高查询速度?
Mysql如何为表字段添加索引？
对于大表的常见优化手段说一下？

Spring

Spring Bean 的作用域
Spring 事务中的隔离级别
Spring 事务中的事务传播行为
AOP是什么？
IOC是什么？

分布式

为什么要用 redis缓存？
为什么要用 redis 而不用 map/guava 做缓存?
redis 和 memcached 的区别？
redis 常见数据结构以及使用场景分析？（String，Hash，List，Set，Sorted Set）
redis 设置过期时间
redis 内存淘汰机制（MySQL里有2000w数据，Redis中只存20w的数据，如何保证Redis中的数据都是热点数据？）
redis 持久化机制（怎么保证 redis 挂掉之后再重启数据可以进行恢复）？
redis 事务
缓存雪崩和缓存穿透问题解决方案
如何解决 Redis 的并发竞争 Key 问题
如何保证缓存与数据库双写时的数据一致性？
什么是消息队列？为什么要用消息队列？
通过异步处理提高系统性能（削峰、减少响应所需时间）
降低系统耦合性
使用消息队列带来的一些问题
JMS两种消息模型
JMS 五种不同的消息正文格式
常见的消息队列对比
什么是 Dubbo?为什么要用 Dubbo?
什么是 RPC?RPC原理是什么?
Dubbo 工作原理？
解释一下什么是负载均衡？
看看 Dubbo 提供的负载均衡策略？
zookeeper宕机与dubbo直连的情况？

总结

总体来说，如果你想转行从事程序员的工作，Java开发一定可以作为你的第一选择。但是不管你选择什么编程语言，提升自己的硬件实力才是拿高薪的唯一手段。

如果你以这份学习路线来学习，你会有一个比较系统化的知识网络，也不至于把知识学习得很零散。我个人是完全不建议刚开始就看《Java编程思想》、《Java核心技术》这些书籍，看完你肯定会放弃学习。建议可以看一些视频来学习，当自己能上手再买这些书看又是非常有收获的事了。

这些视频如果需要的话，可以无偿分享给大家，点击这里即可免费领取

件实力才是拿高薪的唯一手段。