【分布式】分布式系统概述
关键词：分布式系统、TCP/IP、NIO模型
一、基本概念
分布式系统：多个节点（一般来说一个节点即一台计算机），且节点间互相连通（网络&消息传递） -> 在这些连通的节点上部署了组件并且组件之间的操作互相连通，，，这样的一个系统可以认为是一个分布式系统
冯诺依曼模型：输入设备、存储器（内存&外存）、控制器、运算器、输出设备
分布式系统~~超级计算机，也同样符合冯诺依曼模型
多线程交互模式：
- 互不通信的多线程模式：不处理共享数据，也不进行动作协调情况
- 基于共享容器协同的多线程模式 - 并发访问：多个线程对共享的数据（存储数据的容器或数据对象，如java中的容器类）队列进行处理，注意线程不安全问题
- 基于事件协同的多线程模式-线程间协调：如B线程需要等到某个状态或事件发生后才能继续执行，而这个状态改变或事件产生食欲A线程相关的，注意死锁问题（一般地，能够原子性地获取需要的多个锁或者注意调整对多个锁的获取顺序，就会比较好地避免死锁）
阿姆达尔定律（Amdahl's law）： 
（=> 当{\displaystyle p\to \infty }
的占比，因此可并行部分程序占比越大上限值越大）
多进程模式：进程间的内存是独立的，因此多进程之间的数据共享、通信与多线程是不一样的（线程是属于进程的，多线程间是共享内存的）
=>单线程和单进程多线程（机器故障、OS问题、进程问题会导致整个功能不可用）
=>多进程系统（机器故障、OS问题会导致整个功能不可用，单个进程问题则可能系统部分功能仍然是正常）
=>多机分布式系统（某些机器故障、OS问题或某些机器的进程问题，仍然可以保证整体功能大体可用）
二、网络通信协议
OSI七层网络模型：物理层、数据链路层、网络层、传输层、会话层、表示层、应用层
TCP/IP模型：网络接口层、网络互联层、传输层、应用层
以太网：一种计算机局域网技术，包括物理层的连线、电子信号和介质访问层协议的内容
=>实践中主要是以太网及TCP/IP协议栈，使用Socket套接字进行网络通信开发，共有三种方式：BIO、NIO和AIO
BIO方式：Blocking IO，采用阻塞方式实现，也即一个Socket套接字对应一个线程处理（发生建立连接、读数据、写数据操作时都可能会阻塞，优点是简单，缺点是一个线程只能处理一个socket导致在支持并发连接时需要很多的线程）
NIO方式：Nonblocking IO，非阻塞方式，基于事件驱动思想采用Reactor模式（优势是可以在一个线程中处理多个socket套接字），即统一通过Reactor对所有客户端的Socket套接字的事件（hander）做处理并派发到不同的线程中
AIO方式：AsynchronousIO，异步IO，采用Proactor模式（NIO在有通知时可以进行相关的操作，而AIO在有通知时则表示相关操作已经完成）
三、分布式系统 - 超级计算机
输入设备：互相连接的多个节点（通信时互为输入）+传统人机交互的输入设备
存储器：代理方式的多机Key-Value服务、名称服务的多机Key-Value服务、规则服务的多机Key-Value服务、Master控制的多机Key-Value服务
控制器：协调或控制节点之间的动作和行为，如透明代理（硬件负载均衡设备、软件负责均衡系统，不足是网络开销（流量和延迟）和单点故障）、名称服务的直连方式（与请求处理的机器是交互的，不足是升级较复杂）、规则服务器控制路由的请求直连方式（与请求处理的机器是不交互的，不足是升级较复杂）、Master+Worker方式（任务的分配和管理）
运算器：DNS服务器进行调度和控制、负责均衡、规则服务器、Master+Worker
输出设备：互相连接的多个节点（通信时互为输出）+传统人机交互的输出设备
四、分布式系统的难点
缺乏全局时钟、如何应对和解决故障独立性、单点故障问题SPoF（Single Point of Failure）、分布式事务问题
【读书系列】
《大型网站系统与Java中间件实践》，曾宪杰，电子工业出版社
【持续更新，请移步至https://zorkelvll.cn/blogs/zorkelvll/articles/2018/11/18/1542544441910】
【分布式】分布式系统概述相关推荐
- spring整合atomikos实现分布式事务的方法示例_分布式-分布式事务处理
在之前的文章"如何合理的使用动态数据源"中,其实也提到了分布式事务相关的场景如:利用多数据源实现读写分离,但直接使用动态数据源频繁其实是很消耗资源的,而且就是当业务service一 ...
- 分布式-分布式常见问题和解决方案
分布式锁 首先我们先来看一个小例子: 假设某商城有一个商品库存剩10个,用户A想要买6个,用户B想要买5个,在理想状态下,用户A先买走了6了,库存减少6个还剩4个,此时用户B应该无法购买5个,给出数量 ...
- 分布式分布式框架相关解析
从0开始介绍与学习分布式与分布式框架 一.背景: 由于项目的功能越来越多,项目体积越来越大,传统的单体服务已经无法满足大型项目的开发,所以分布式开发变得越来越重要.而微服务又是分布式最好的一种实现方式 ...
- 分布式-分布式缓存笔记
分布式系统缓存 缓存分类 前端缓存 前端缓存包括页面和浏览器缓存,如果是 App,那么在 App 端也会有缓存.当你打开商品详情页,除了首次打开以外,后面重复刷新时,页面上加载的信息来自多种缓存. 页 ...
- 分布式 - 分布式事务面试题
1 分布式事务面试题 现在Java面试,分布式系统.分布式事务几乎是标配.而分布式系统.分布式事务本身比较复杂,大家学起来也非常头疼. 最为常见的面试题: 问:分布式事务了解吗?你们是如何解决分布式事 ...
- 分布式 - 分布式体系架构：集群和分布式
文章目录 01. 什么是集群? 02. 集群为什么可以提高系统的可靠性? 03. 集群为什么可以提高系统的性能? 04. 什么是分布式计算? 05. 如何进行分布式计算? 06. 集群如何提高计算效率 ...
- 分布式 - 分布式锁
Synchronized.ReentrantLock,在单进程情况下,多个线程访问同一资源,可以用它们来保证线程的安全性. 本地锁 分布式锁 一.Redis 实现 为实现分布式锁,在 Redis 中存 ...
- 分布式数据流计算系统的数据缓存技术综述
点击上方蓝字关注我们 分布式数据流计算系统的数据缓存技术综述 袁旭初, 付国, 毕继泽, 张岩峰, 聂铁铮, 谷峪, 鲍玉斌, 于戈 东北大学计算机科学与工程学院,辽宁 沈阳 110169 论文引用格 ...
- 史上最全分布式数据库概述
墨墨导读:在集中式数据库系统不能完全符合实际需要的形势下,集中式DB的"集中计算"概念向"分布计算"概念发展.分布计算主要体现在客户机/服务器模式的分布式数据库 ...
- 配置分布式集群方案要考虑哪些关键点？
用户可以体验分布式NAS集群EonStor CS出色而稳定的性能,以及所具备的配置灵活性.本文针对一些客户的需求信息,提出设计解决方案所考虑的几个要点,以便满足客户的需求. 容量 在选择数据保护级别时 ...
最新文章
- Functional Language
- Qt Creator优化移动设备的应用程序
- int string java 呼转
- ubuntu中解决无法调节屏幕亮度的问题
- 钉钉产品介绍_钉钉正式推出智能OA：免费开放、一站解决“人财物事”管理难题...
- codeforces 733D
- 【网络流+线段树】[CQBZOJ3065]生死游戏((A+B)^2 Problem)
- 顺序右移数组元素（内测第0届第5题）
- matlab 自动交易系统设计2
- 信号与系统实验四 LTI系统的时域分析
- 实战1--航空公司客户价值分析（画图篇）
- delphi调用dll
- 2018/5/3单纯和纯洁
- SitePoint播客＃26：力量在于您
- 宇视科技POE摄像机供电方式
- INSERT 语句与 FOREIGN KEY 约束冲突
- 淘宝天猫、1688、京东、拼多多原数据api接口
- 约瑟夫环代码展示，以及理解约瑟夫环
- rapidSVN : Error while performing action: ra_serf: The server sent a truncated HTTP response body.
- 本地管理多个git账号