知乎在线部分的技术架构

作者：姚钢强
链接：https://www.zhihu.com/question/314356555/answer/625772570
来源：知乎
著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。

知乎截至 2019 年 1 月的数据：

用户数：2.2 亿
话题数： 27 万
问题数： 3000 万
回答数： 1.3 亿

以下内容全部基于 2019.1 之前情况

简述下知乎在线部分的技术架构，先看下整体的架构图，整体比较清晰不再赘述。

知乎在线架构

微服务架构，知乎从 11 年就开始了微服务的探索，尝试过 protocol buffers、Avro、Thrift，最终在 16 年确认使用 Thrift，同时使用 Consul 和 HAProxy 作为注册中心和负载均衡。是在 14 年确认的这套微服务架构，并且稳定使用到了现在。所以大家不要问为什么不使用 gRPC 了。
云平台，知乎有自己的内部研发的 ZAE ，绝大部分的在线业务容器在 15 年就已经全部跑在了 Docker 里，现在我们 HBase 和 Kafka 也是跑在容器里的。我们最开始使用的是Mesos 做的资源调度，现在已经切换到了 Kubernetes 。
部署平台，知乎的部署平台是与 ZAE 在一起的，基于 Jenkins 搭建的自动集成，在 MR（Gitlab）阶段自动使用 SonarQube 进行静态代码检查。部署分为测试环境，办公室环境，金丝雀1（灰度单个容器），金丝雀2（灰度 20% 流量），生产环境（100% 流量上线）。如果金丝雀阶段出现错误，会自动进行回滚操作。
监控，我们主要基于 Grafana、OpenTracing、Graphite 等搭建了监控系统。同时自研了 Halo 可以方便的是业务方观测到服务之间的依赖关系、响应时间（P95, P99, P999）、错误数。同时也进行了新技术的尝试，目前在业务容器监控使用了Prometheus 。
存储，主要是 MySQL、Redis、HBase；正在调研 TiDB，目前有一套生产集群上线准备给「已读」服务使用。
消息队列，早期使用自研的 Sink，目前使用 Kafka，同时提供在 Kafka 的基础上包装了Beanstalkd 作为任务队列方便业务进行使用。
编程语言，Python、Golang、Java、Rust。目前 Golang 使用比较广泛，Python 使用场景逐渐变少。Java 在一些算法项目和商业系统中有使用。搜索系统使用的 Rust 重写 Lucene，现并在此基础上重写了类 ES 的集群化搜索引擎。架构师
@孙晓光

会去 https://rustcon.asia/ 做分享。
目前已经搭建好完备的测试环境，会在 Q2 投入使用。
现在已经搭建了多机房，目前重要的业务都是异地多活。

总结：

勇于探索新的技术，例如早期的微服务（11 年）和容器化（15年）。
在开源技术可以满足的前提下，尽量不自造轮子，从而使项目可以持续维护。
知乎技术上一直崇尚工具化、自动化，例如我们的部署平台，监控，报警系统等，不管是平台还是业务方，都没有专职的运维人员。
整体来说知乎的平台化（我不是做平台的）一直做得很统一，比较少出现业务方自造一套轮子的情况，但是也不排斥业务方的尝试。

感谢知乎优秀的技术平台工程师，给我们业务方带来这么好的基础设施。:-D

==================== End

转载于:https://www.cnblogs.com/lsgxeva/p/10578281.html

知乎在线部分的技术架构相关推荐

「优知学院」淘宝技术架构的前世今生（上）
" 淘宝技术架构经历从最初的LAMP架构,到IOE架构,再到分布式架构,再到去IOE,最后到现在的云计算平台架构这一变化过程在不断解决上面的技术问题,可以说淘宝技术架构的演变就是活生生的一本 ...
Worktile 技术架构概要
其实早就该写这篇博客了,一直说忙于工作没有时间,其实时间挤挤总会有的,可能就是因为懒吧!从2013年11月一直拖到现在,今天就简单谈谈 Worktile 的技术架构吧 . Worktile 自上线到现 ...
阿里巴巴闲鱼架构负责人王树彬：万亿交易规模技术架构实践
中生代技术链接技术大咖,分享技术干货全文:5000字预见未来的最好方式就是创造未来,用「云原生Talk」记录云原生时代下每个造梦者的故事. 造梦者 | 王树彬,阿里巴巴闲鱼架构负责人 2014年 ...
趋势发布SecureCloud云安全技术架构
本文讲的是趋势发布SecureCloud云安全技术架构,[IT168 专稿]7月22日,趋势科技在主题为"Web安全云时代"的发布会上,展示了公司基于云安全技术架构(Cloud-C ...
初识阿里云（云计算）--发展历程和技术架构、地域和可用区
文章目录一.初识阿里云 1.概述 2.阿里云log 3.品牌口号 4.云计算价值二.阿里云整体架构 1.阿里云发展历程 2.阿里云技术架构 3.地域和可用区三.云端实践 1.杭州城市大脑 2.1 ...
支持百亿数据场景，海量高性能列式数据库HiStore技术架构解析
支持百亿数据场景,海量高性能列式数据库HiStore技术架构解析 HiStore介绍 HiStore是阿里中间件团队研发的数据库产品,是一款基于独特的知识网格技术的列式数据库,定位于海量数据高压缩比列 ...
海量高性能列式数据库HiStore技术架构解析
HiStore 介绍 HiStore是阿里中间件团队研发的数据库产品,是一款基于独特的知识网格技术的列式数据库,定位于海量数据高压缩比列式存储,是低存储成本,低维护成本,海量数据OLAP存储引擎;有 ...
分布式计算，大型网站技术架构：核心原理与案例分析
这个回答,非常详细. 但是,大部分内容,都来自"大型网站技术架构:核心原理与案例分析". 最近,初步看了这本书,觉得写得太好了,比较系统和全面. 不过,我还是不喜欢吹B" ...
第三章区块链技术架构与发展趋势
第三章区块链技术架构与发展趋势整个区块链与密码学大体内容介绍安排如下: https://blog.csdn.net/qq_43479839/article/details/114630163 参考 ...
ChatGPT发展历程、原理、技术架构详解和产业未来
点击上方"芋道源码",选择"设为星标" 管她前浪,还是后浪? 能浪的浪,才是好浪! 每天 10:33 更新文章,每天掉亿点点头发... 源码精品专栏原创 | ...

知乎在线部分的技术架构

知乎在线部分的技术架构

知乎在线部分的技术架构相关推荐

最新文章

热门文章