文章目录

  • MySQL中间件Atlas
    • 一 atlas简介
    • 二 主要功能
    • 三 使用场景
    • 四 企业读写分离及分库分表其他方案了解
    • 五 安装Atlas
    • 六 配置
    • 七 启动服务
      • 1) mysql库创建账号
    • 八 Atlas使用
    • 九 管理功能简介
      • 1、 连接管理服务,使用配置文件中管理接口账户
      • 2、 持久化配置文件
      • 3、 节点管理
        • 1)查看所有节点
        • 2) 节点的上线和下线
        • 3) 添加删除节点
      • 4、 用户管理
        • 1)在主库增加数据库用户
        • 2)查看当前用
        • 3) 增加Atlas用户

MySQL中间件Atlas

一 atlas简介

Mysql 的 proxy 中间件有比较多的工具,例如,mysql-proxy(官方提供), atlas , cobar, mycat, tddl, tinnydbrouter等等

而Atlas是由 Qihoo 360公司Web平台部基础架构团队开发维护的一个基于MySQL协议的数据中间层项目。它在MySQL官方推出的MySQL-Proxy 0.8.2版本的基础上,修改了大量bug,添加了很多功能特性。目前该项目在360公司内部得到了广泛应用,很多MySQL业务已经接入了Atlas平台,每天承载的读写请求数达几十亿条。

同时,有超过50家公司在生产环境中部署了Atlas,超过800人已加入了我们的开发者交流群,并且这些数字还在不断增加。而且安装方便。配置的注释写的蛮详细的,都是中文。

Atlas官方链接:
Atlas下载链接:

二 主要功能

Atlas主要功能(代理)1.读写分离2.从库负载均衡3.IP过滤4.自动分表5.DBA可平滑上下线DB(不影响用户的体验,把你的数据库下线)6.自动摘除宕机的DBAtlas相对于官方MySQL-Proxy的优势1.将主流程中所有Lua代码用C重写,Lua仅用于管理接口2.重写网络模型、线程模型3.实现了真正意义上的连接池4.优化了锁机制,性能提高数十倍

三 使用场景

Atlas是一个位于前端应用与后端MySQL数据库之间的中间件,在后端DB看来,Atlas相当于连接它的客户端,在前端应用看来,Atlas相当于一个DB。Atlas作为服务端与应用程序通讯,它实现了MySQL的客户端和服务端协议,同时作为客户端与MySQL通讯。它对应用程序屏蔽了DB的细节,同时为了降低MySQL负担,它还维护了连接池。

Atlas使得应用程序员无需再关心读写分离、分表等与MySQL相关的细节,可以专注于编写业务逻辑,同时使得DBA的运维工作对前端应用透明,上下线DB前端应用无感知。

四 企业读写分离及分库分表其他方案了解

Mysql-proxy(oracle)Mysql-router(oracle)Atlas (Qihoo 360)Atlas-sharding (Qihoo 360)Cobar(是阿里巴巴(B2B)部门开发)Mycat(基于阿里开源的Cobar产品而研发)TDDL Smart Client的方式(淘宝)Oceanus(58同城数据库中间件)OneProxy(原支付宝首席架构师楼方鑫开发 )vitess(谷歌开发的数据库中间件)Heisenberg(百度)TSharding(蘑菇街白辉)Xx-dbproxy(金山的Kingshard、当当网的sharding-jdbc )amoeba

五 安装Atlas


# 虽然包时el6的,但是centos7也能用
wget https://github.com/Qihoo360/Atlas/releases/download/2.2.1/Atlas-2.2.1.el6.x86_64.rpmrpm -ivh Atlas-2.2.1.el6.x86_64.rpm

六 配置

[root@manager ~]# cd /usr/local/mysql-proxy/conf
[root@manager mysql-proxy]# vim test.cnf
[mysql-proxy]
# 用来登录atlas管理接口的账号和密码,部署登录msyql数据
admin-username = bigegon
admin-password = 666
proxy-backend-addresses = 192.168.15.100:3306 # 写节点(主库)
proxy-read-only-backend-addresses = 192.168.15.101:3306,192.168.15.102:3306 # 只读节点(从库)# 用来登录msyql的账号和加密密码,都是存在与mysql库的账号免密,我们需要指定我们自己的,可以指定多个
# 注意一定要是加密密码,需要执行
# /usr/local/mysql-proxy/bin/encrypt 123,得到123的加密密码
pwds = root:3yb5jEku5h4=, egon:3yb5jEku5h4=
daemon = true       # 后台运行
keepalive = true    # 监测节点心跳
event-threads = 4   # 并发数量,设置cpu核数一半
log-level = message   # 日志级别
log-path = /usr/local/mysql-proxy/log  # 日志目录
sql-log = On   # sql记录(可做审计)
proxy-address = 0.0.0.0:3306    # 业务连接端口
admin-address = 0.0.0.0:2345    # 管理连接端口
charset=utf8   # 字符集

七 启动服务

#1、启动,配置文件名为test.conf对应此处的test
/usr/local/mysql-proxy/bin/mysql-proxyd test start#2、验证启动(没起来他也显示OK)
ps -ef|grep [m]ysql-proxy
netstat -lntup|grep [m]ysql-proxy#3、查看日志定位问题
tail -f /usr/local/mysql-proxy/log/test.log

1) mysql库创建账号

grant all on *.* to 'root'@'%' identified by '123';
grant all on *.* to 'egon'@'%' identified by '123';

八 Atlas使用

进入管理接口

# 进入管理接口,使用配置文件中指定的管理账号与密码
mysql -ubigegon -p666 -h127.0.0.1 -P2345#查看帮助,依据帮助查找可执行的管理操作
mysql> SELECT * FROM help;#查看后端的数据库
SELECT * FROM backends;

在任意一台机器上,登录atlas主机

#1、为了很好地观察读写分离的效果,可以先把从库的sql延迟设置大
stop slave;
CHANGE MASTER TO MASTER_DELAY = 60;
start slave;#2、登录atlas来进行测试
# -u、-p为atlas配置文件中pwds指定的账号和密码
# -h后的地址为atlas主机的地址
# -P自定atlas监听的ip
mysql -uroot -p123 -h 192.168.15.200 -P 3306mysql> create database db1;
此时去主库查看,发现有db1库,但是去所有从库查看发现都没有
过了一分钟后从库上都有db1了,然后我们通过atlas也可以查看到了
mysql> show databases;

九 管理功能简介

1、 连接管理服务,使用配置文件中管理接口账户

mysql -ubigegon -p666 -h192.168.15.200 -P2345

2、 持久化配置文件

mysql> save config;
Empty set (0.00 sec)

3、 节点管理

1)查看所有节点

mysql> SELECT * FROM backends;
+-------------+---------------------+-------+------+
| backend_ndx | address             | state | type |
+-------------+---------------------+-------+------+
|           1 | 192.168.15.100:3306 | up    | rw   |
|           2 | 192.168.15.101:3306 | up    | ro   |
|           3 | 192.168.15.102:3306 | up    | ro   |
+-------------+---------------------+-------+------+
3 rows in set (0.00 sec)

2) 节点的上线和下线

下线:

mysql> set offline 1;
+-------------+---------------------+---------+------+
| backend_ndx | address             | state   | type |
+-------------+---------------------+---------+------+
|           1 | 192.168.15.100:3306 | offline | rw   |
+-------------+---------------------+---------+------+
1 row in set (0.00 sec)mysql> SELECT * FROM backends;
+-------------+---------------------+---------+------+
| backend_ndx | address             | state   | type |
+-------------+---------------------+---------+------+
|           1 | 192.168.15.100:3306 | offline | rw   |
|           2 | 192.168.15.101:3306 | up      | ro   |
|           3 | 192.168.15.102:3306 | up      | ro   |
+-------------+---------------------+---------+------+
3 rows in set (0.00 sec)

上线:

mysql> set online 1;
+-------------+---------------------+---------+------+
| backend_ndx | address             | state   | type |
+-------------+---------------------+---------+------+
|           1 | 192.168.15.100:3306 | unknown | rw   |
+-------------+---------------------+---------+------+
1 row in set (0.00 sec)

3) 添加删除节点

删除:

mysql> remove backend 3;
mysql> SELECT * FROM backends;

添加:

mysql> add slave 192.168.15.102:3306;
mysql> SELECT * FROM backends;

4、 用户管理

1)在主库增加数据库用户

mysql> grant all on *.* to user1@'192.168.10.%' identified by '123';
Query OK, 0 rows affected, 1 warning (0.00 sec)

2)查看当前用

mysql> select * from pwds;
+----------+--------------+
| username | password     |
+----------+--------------+
| test     | 3yb5jEku5h4= |
| repl     | 3yb5jEku5h4= |
+----------+--------------+
2 rows in set (0.00 sec)

3) 增加Atlas用户

mysql> add pwd user1:123;
Empty set (0.00 sec)mysql> select * from pwds;
+----------+--------------+
| username | password     |
+----------+--------------+
| root     | 3yb5jEku5h4= |
| egon     | 3yb5jEku5h4= |
| user1    | 3yb5jEku5h4= |
+----------+--------------+
3 rows in set (0.00 sec)

@mysql读写分离分库分表相关推荐

  1. MySql高可用搭建 + 读写分离 + 分库分表

    Mysql读写分离与分库分表 一.Mysql读写分离解决的问题 二.mysql处理请求运行流程 三.读写分离结构 四.读写分离产生场景 五.读写分离工具 5.1 MyCat 5.2 HAProxy 5 ...

  2. 视频教程-ShardingSphere:SpringBoot2+MybatisPlus+读写分离+分库分表-Java

    ShardingSphere:SpringBoot2+MybatisPlus+读写分离+分库分表 10多年互联网一线实战经验,现就职于大型知名互联网企业,架构师, 有丰富实战经验和企业面试经验:曾就职 ...

  3. MySQL搭建主从复制 读写分离 分库分表 MyCat高可用

    主从演示 读写演示 分表演示 主从复制 环境的介绍 系统环境:centos7.0 客户端连接工具:xshell 远程文件传输工具:xftp 服务器: 192.168.126.138(主) 192.16 ...

  4. Sharding-Jdbc 实现读写分离 + 分库分表,写得太好了!

    欢迎关注方志朋的博客,回复"666"获面试宝典 来自:CSDN,作者:邋遢的流浪剑客 链接:https://blog.csdn.net/qq_40378034/article/de ...

  5. SpringCloud微服务实战——搭建企业级开发框架(二十七):集成多数据源+Seata分布式事务+读写分离+分库分表

      读写分离:为了确保数据库产品的稳定性,很多数据库拥有双机热备功能.也就是,第一台数据库服务器,是对外提供增删改业务的生产服务器:第二台数据库服务器,主要进行读的操作.   目前有多种方式实现读写分 ...

  6. Mycat 读写分离+分库分表

    上次进过GTID复制的学习记录,已经搭建好了主从复制的服务器,现在利用现有的主从复制环境,加上正在研究的Mycat,实现了主流分布式数据库的测试 Mycat就不用多介绍了,可以实现很多分布式数据库的功 ...

  7. MyCAT读写分离分库分表

    MyCAT读写分离及分库分表 第1章 MyCAT分布式系统解决方案 1.1 分布式系统介绍: 分布式系统特性: 1. 透明性: a) 分布式系统对用户来说是透明的,一个分布式系统在用户面前的表现就像一 ...

  8. 数据库主从复制,读写分离,分库分表理解 (数据库架构演变)

    主从复制 主从复制, 主要是针对MySQL数据库的高可用性, 容灾性上面.      是叫做高可用性? 高可用性可以简单的理解为容灾性, 稳定性, 针对故障,风险情况下的处理, 备案, 策略.  指系 ...

  9. 商城订单模块实战 - 数据库设计、ABA问题处理、读写分离分库分表

    引言 订单系统可以说是整个电商系统中最重要的一个子系统,因此订单数据可以算作电商企业最重要的数据资产.这篇文章我们来看看在我们的商城系统中订单服务是如何实现的,特别是在设计和实现一个订单系统的过程中有 ...

最新文章

  1. js创建对象的几种方法
  2. Oracle TNS协议中数据包的内部结构
  3. java selenium常用API(WebElement、iFrame、select、alert、浏览器窗口、事件、js) 一
  4. 导入不了css,CSS不导入。
  5. 【ubuntu-version】 几种常见工具查看版本的命令
  6. Macbook全系列详细分析及购机指南
  7. Centos7安装apt-get 在centos下用yum install xxx        不是使用apt-get
  8. php必须汉字,php怎么只保留汉字
  9. 后盾网php多少钱_商标转让做公证花多少钱-购店网
  10. Hooks中的useState
  11. c语言谢延红主编答案,C语言程序设计课程改革与实践.doc
  12. NodeJS Stream 三:readable
  13. 使用 Suspense 改善 Vue 3 中的用户体验
  14. SSL生成证书的几种方式
  15. IDEA的配置文件乱码
  16. 在Unity中实现简单的动画转场
  17. python量化金融下单接口特点
  18. 如Java8的LocalDate与Date相互转换、ZonedDateTime等常用操作包含多个使用示例、Java8时区ZoneId的使用方法、Java8时间字符串解析成类
  19. $.ajax异步请求总结
  20. 计算机网络三级考试题型,计算机三级网络技术考试题型分析

热门文章

  1. 数据结构实验入门:学生成绩统计排序系统
  2. python canvas画弧度_首发:Python-tkinter制作动态雷达示意图及探讨
  3. IT工程师怎样预防、治好颈椎腰椎伤肾等职业病
  4. python十年高考录取率表_全国各地历年高考人数及录取率盘点,家长:考生近千万,录取太难...
  5. android sdk插件开发教程,Android Studio Plugin 插件开发教程(二) —— 插件SDK中的常用对象介绍...
  6. [金三银四面试季]Java面向对象高频面试题
  7. docker启动mysql容器后自动Exited
  8. Thinkphp模板中截取字元串函数
  9. linux安装DM7数据库和初始化实例--无图形界面
  10. 培养孩子形成六大好习惯