linux --redis的部署 即主从
老男孩Python全栈6期——redis
--------------------------
Linux 操作系统 默认的内存管理机制
RSS:
page cache:
anno page:
Linux操作系统以page进行分配内存,page大小默认4K
slab allocator 内存页的划分
buddy system :LRU 最近最少使用原则
-----------------------------
redis
在单用户多并发读写,性能高
在多用户少读写时,memcache更优
redis是一个单核的管理机制,生产中一般是,单机多实例的架构。
----------------------------
redis配置文件:
vim /etc/redis.conf
是否后台运行:
daemonize no/yes
默认端口:
port 6379
AOF日志开关是否打开:
appendonly no/yes
日志文件位置
logfile /var/log/redis.log
RDB持久化数据文件:
dbfilename dump.rdb
daemonize yes
port 6379
dbfilename dump.rdb
dir "/application/data/6379"
logfile /var/log/redis.log
cd /root
vim .bash_profile
PATH 行添加
:/application/redis-3.2.6/src
配置生效
source .bash_profile
配置完成之后,可以直接在命令行调用redis命令
例如:
redis-cli
shutdown
redis-server /etc/redis.conf
---------------------------
安全控制
vim /etc/redis.conf
bind 10.0.0.200
requirepass root
关闭redis
redis-cli
shutdown
启动redis
redis-server /etc/redis.conf
连接redis:
设置完成之后需要换种打开方式:
redis-cli -h 10.0.0.200 -a root
-h <hostname>
-p <port>
-a <password>
redis-cli 默认情况是以下的方式连接
redis-cli -h 127.0.0.1 -p 6379
所以需要加上-h -a 选项
--------------------------
在线变更配置:
获取当前配置
CONFIG GET *
变更运行配置
CONFIG SET loglevel "notice"
例子:修改密码
CONFIG SET requirepass "123"
CONFIG GET requirepass
在线修改的配置,下次登录生效,但是重启之后配置会丢失。
---------------------
import redis
r = redis.StrictRedis(host='10.0.0.200', port=6379, db=0)
-----------------------------
redis持久化功能
RDB:快照,只记录一个时刻内存数据状态
配置:
dbfilename dump.rdb
dir "/application/data/6379"
save 900 1
save 300 10
save 60 10000
配置分别表示:
• 900秒(15分钟)内有1个更改
• 300秒(5分钟)内有10个更改
• 60秒内有10000个更改
扩展选项:
stop-writes-on-bgsave-error yes
rdbcompression yes
rdbchecksum yes
AOF:只追加日志文件,记录了redis中所有的修改命令
配置:
appendonly yes
appendfsync everysec
---------------------------------------
数据类型
5中
发布订阅
SUBSCRIBE weibo 订阅一个频道
PSUBSCRIBE * 订阅多个频道
PSUBSCRIBE beijing.* 订阅所有和北京相关的频道
PUBLISH weibo hello
ZADD salary 2000 user1
ZADD salary 3000 user2
ZRANGE salary 0 -1 WITHSCORES
MULTI
ZINCRBY salary 1000 user1
ZINCRBY salary -1000 user2
EXEC
Info
Clinet list
Client kill ip:port
config get *
CONFIG RESETSTAT 重置统计
CONFIG GET/SET 动态修改
Dbsize
FLUSHALL 清空所有数据
select 1
FLUSHDB 清空当前库
MONITOR 监控实时指令
SHUTDOWN 关闭服务器
save将当前数据保存
SLAVEOF host port 主从配置
SLAVEOF NO ONE
SYNC 主从同步
ROLE返回主从角色
CONFIG SET slowlog-log-slower-than 100
CONFIG SET slowlog-max-len 1000
CONFIG GET slow*
SLOWLOG GET
SLOWLOG RESET
------------------------------
主从复制
1、故障转移 failover
2、分担负载 blance
搭建主从
准备2个以上的redis实例
1、多配置文件(端口、数据路径、日志路径、pid)
端口:
6380(主)
6381(从)
数据路径(持久化文件存放位置):
/application/data/6380
/application/data/6381
日志路径:
/var/log/redis6380.log
/var/log/redis6381.log
pid文件
/application/data/6380/redis.pid
/application/data/6381/redis.pid
---------------------------
配置过程
1、创建目录:
mkdir -p /application/data/6380
mkdir -p /application/data/6381
2、配置文件准备
vim /application/data/6380/redis.conf
port 6380
daemonize yes
pidfile /application/data/6380/redis.pid
logfile "/var/log/redis6380.log"
dbfilename dump.rdb
dir /application/data/6380
vim /application/data/6381/redis.conf
port 6381
daemonize yes
pidfile /application/data/6381/redis.pid
logfile "/var/log/redis6381.log"
dbfilename dump.rdb
dir /application/data/6381
3、启动两个实例
redis-server /application/data/6380/redis.conf
redis-server /application/data/6381/redis.conf
4、构建主从
redis-cli -p 6381
slaveof 127.0.0.1 6380
5、验证主从
登录主库:
redis-cli -p 6380
set foo bar
登录主库:
redis-cli -p 6381
get
6、主从复制状态查看。
role
info replication
7、主从复制,手工切换
slaveof no one
----------------------
传统主从的缺陷
1、没有自动监控机制
2、没有自动切换的功能
3、对于应用不透明
sentinel 功能
1、自动监控redis所有节点状态
2、发现主库故障,自动选主切换
3、自动通知应用端
准备,1主2从结构比较合适。
添加6382节点:
mkdir -p /application/data/6382
vim /application/data/6382/redis.conf
port 6382
daemonize yes
pidfile /application/data/6382/redis.pid
logfile "/var/log/redis6382.log"
dbfilename dump.rdb
dir /application/data/6382
redis-server /application/data/6382/redis.conf
redis-cli -p 6382
slaveof 127.0.0.1 6380
sentinel配置
mkdir -p /application/data/26380
vim /application/data/26380/sentinel.conf
port 26380
dir "/application/data/26380"
sentinel monitor mymaster 127.0.0.1 6380 1
sentinel down-after-milliseconds mymaster 60000
sentinel config-epoch mymaster 0
启动
redis-sentinel /application/data/26380/sentinel.conf
+++++++++++++++++Python sentinel+++++++++++++++++
>>> from redis.sentinel import Sentinel
>>> sentinel = Sentinel([('127.0.0.1', 26380)], socket_timeout=0.1)
>>> sentinel.discover_master('mymaster')
('127.0.0.1', 6379)
>>> sentinel.discover_slaves('mymaster')
[('127.0.0.1', 6380)]
>>> master = sentinel.master_for('mymaster', socket_timeout=0.1)
>>> slave = sentinel.slave_for('mymaster', socket_timeout=0.1)
>>> master.set('foo', 'bar')
>>> slave.get('foo')
'bar'
++++++++++++++++++++++++++++++++++
redis 分片cluser 部署
1、集群组件安装
EPEL源安装ruby支持
yum install ruby rubygems -y
使用国内源
gem sources --add https://gems.ruby-china.org/ --remove https://rubygems.org/
如果无法使用,可以使用aliyun
gem sources -a http://mirrors.aliyun.com/rubygems/
gem sources --remove http://rubygems.org/
gem sources -l
gem install redis -v 3.3.3
2、集群节点准备
规划:
端口:7000-7005
路径:
/application/data/7000
/application/data/7001
/application/data/7002
/application/data/7003
/application/data/7004
/application/data/7005
日志路径:
/var/log/redis7000.log
/var/log/redis7001.log
/var/log/redis7002.log
/var/log/redis7003.log
/var/log/redis7004.log
/var/log/redis7005.log
pid文件
/application/data/7000/redis.pid
/application/data/7001/redis.pid
/application/data/7002/redis.pid
/application/data/7003/redis.pid
/application/data/7004/redis.pid
/application/data/7005/redis.pid
创建节点目录:
mkdir -p /application/data/7000
mkdir -p /application/data/7001
mkdir -p /application/data/7002
mkdir -p /application/data/7003
mkdir -p /application/data/7004
mkdir -p /application/data/7005
配置文件添加:
-------------------------
vim /application/data/7000/redis.conf
port 7000
daemonize yes
pidfile /application/data/7000/redis.pid
logfile "/var/log/redis7000.log"
dbfilename dump.rdb
dir /application/data/7000
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
appendonly yes
vim /application/data/7001/redis.conf
port 7001
daemonize yes
pidfile /application/data/7001/redis.pid
logfile "/var/log/redis7001.log"
dbfilename dump.rdb
dir /application/data/7001
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
appendonly yes
vim /application/data/7002/redis.conf
port 7002
daemonize yes
pidfile /application/data/7002/redis.pid
logfile "/var/log/redis7002.log"
dbfilename dump.rdb
dir /application/data/7002
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
appendonly yes
vim /application/data/7003/redis.conf
port 7003
daemonize yes
pidfile /application/data/7003/redis.pid
logfile "/var/log/redis7003.log"
dbfilename dump.rdb
dir /application/data/7003
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
appendonly yes
vim /application/data/7004/redis.conf
port 7004
daemonize yes
pidfile /application/data/7004/redis.pid
logfile "/var/log/redis7004.log"
dbfilename dump.rdb
dir /application/data/7004
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
appendonly yes
vim /application/data/7005/redis.conf
port 7005
daemonize yes
pidfile /application/data/7005/redis.pid
logfile "/var/log/redis7005.log"
dbfilename dump.rdb
dir /application/data/7005
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
appendonly yes
启动所有节点
redis-server /application/data/7000/redis.conf
redis-server /application/data/7001/redis.conf
redis-server /application/data/7002/redis.conf
redis-server /application/data/7003/redis.conf
redis-server /application/data/7004/redis.conf
redis-server /application/data/7005/redis.conf
ps -ef |grep 700
-------------------------
3、集群创建
redis-trib.rb create --replicas 1 127.0.0.1:7000 127.0.0.1:7001 \
127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005
---------------------
4、集群状态查看
redis-cli -p 7000 cluster nodes | grep master
+++++++++++++++Python 连接 redis cluster+++++++++++++++++
(1) redis-py并没有提供redis-cluster的支持,去github找了一下,有个叫redis-py-cluster的源码,
但是和redis-py不是一个作者,地址为:https://github.com/Grokzen/redis-py-cluster
watch,star,fork还算可以。
(2) 安装
Latest stable release from pypi
$ pip install redis-py-cluster
or from source
$ python setup.py install
(3) 使用
>>> from rediscluster import StrictRedisCluster
>>> startup_nodes = [{"host": "127.0.0.1", "port": "7000"}]
>>> # Note: decode_responses must be set to True when used with python3
>>> rc = StrictRedisCluster(startup_nodes=startup_nodes, decode_responses=True)
>>> rc.set("foo", "bar")
True
>>> print(rc.get("foo"))
'bar'
++++++++++++++++++++++++++++++++
转载于:https://www.cnblogs.com/52forjie/p/8583337.html
linux --redis的部署 即主从相关推荐
- linux redis 安装部署,Linux Redis安装部署
安装 Redis: ln -s redis-2.6.14 redis #建立一个链接 make PREFIX=/usr/local/redis install #安装到指定目录中 注意上面的最后一行, ...
- ansible角色部署mysql主从
linux ansible角色部署mysql主从 ansible主机创建角色 重新定义主机清单 [root@ansible ~]# cd /etc/ansible/ [root@ansible ans ...
- mysql主从同步linux,linux中部署mysql主从同步示例详解(绝对经典,看了必会)
准备两台服务器并安装MySQL5.7 master服务器 192.168.254.132 slave服务器 192.168.254.136 确保两台服务器安装的mysql版本一致,本测试使用的是mys ...
- linux redis-4.0,Linux Redis 4.0.2 安装部署
Linux Redis 4.0.2 安装部署 01 安装GCC yum -y install gcc gcc-c++ libstdc++-devel tcl -y 02 下载安装包 cd /expor ...
- Linux环境下部署redis教程详解
部署redis 一. 服务器资源 服务名称:Linux服务器 IP:[请查看资源分配文档] 操作系统:CentOS 6.9 x64 二.下载redis 压缩包 下载地址:redis.io 这里下载的r ...
- 关于Linux下MySql集群同步(主从、一主多从、主从从)部署及同步策略的一些笔记
写在前面 和小伙们分享一些Mysql集群主从同步相关的笔记 博文内容涉及: 为什么需要mysql集群主从同步 主从同步原理 部署不同主从结构的Mysql集群 同步使用的复制模式介绍配置 理解不足小伙伴 ...
- redis集群(主从配置)
摘要: redis集群(主从配置) 市面上太多kv的缓存,最常用的就属memcache了,但是memcache存在单点问题,不过小日本有复制版本,但是使用的人比较少,redis的出现让kv内存存储的想 ...
- Redis 单机模式,主从模式,哨兵模式(sentinel),集群模式(cluster),第三方模式优缺点分析
Redis 的几种常见使用方式包括: 单机模式 主从模式 哨兵模式(sentinel) 集群模式(cluster) 第三方模式 单机模式 Redis 单副本,采用单个 Redis 节点部署架构,没有备 ...
- linux redis客户端_10个 Linux 顶级开源缓存工具
可靠的分布式计算系统和应用程序已成为杰出业务的基石,尤其是在自动化和管理关键任务业务流程以及向客户提供服务方面.作为这些系统和应用程序的开发人员和系统管理员,您应该提供各种信息技术(IT)解决方案,以 ...
最新文章
- POJ-3067 Japan(树状数组、线段树)
- 光纤收发器的选购原则介绍
- .NET Compact Framework.代码展开ComboBox下拉选项
- oracle 存储过程导出sql语句 导出为文件
- nodejs 密码加盐
- 三校生高考计算机专业试题,三校生高考计算机试卷1
- 关于vc6++编译DDK驱动出现的问题fatal error C1083: Cannot open include file: 'specstrings.h': No such file or dir
- linux centos用户修改密码,centos怎么修改用户密码
- [Telink][TLSR8251] [泰凌微][SDK3.4] 上手第二步 框架介绍
- Pytorch 实现手写数字识别
- 7723java世界Ol,《世界OL》装备镶嵌
- hdu5820 Lights
- SpringCloud-网关统一配置跨域
- SAP ABAP 取物料号的采购订单文本内容
- 前端速成:双月Java之旅(week5)_day1
- 小红书SEO之关键词排名优化详解【从入门到精通】
- 如何做好硕士论文的排版
- MySQL需要掌握到什么程度,才有机会进入大厂?来看清华资深架构师推荐文档
- < 开源项目框架:推荐几个开箱即用的开源管理系统 - 让开发不再复杂 >
- 如何组建LoRaWAN无线网络以传输温度数据
热门文章
- ubuntu安装curl报错或get update失败
- DVSDK/EZSDK软件框架简介
- 80x86描述符总结及解析描述符的小程序
- 二叉查找树的C语言实现(一)
- 手写简版spring --6--应用上下文(BeanPostProcessor 和 BeanFactoryPostProcessor)
- postman导入swagger文档,并设置cookies进行测试
- S5PV210开发 -- I2C 你知道多少?(三)
- 【译】Writing a Simple Linux Kernel Module
- 【译】Using Machine Learning to Understand the Ethereum Blockchain
- Scalability Tradeoffs: Why “The Ethereum