memcache、Redis与MongoDB的学习-1
除此接触这三个词的概念,对今天看的资料最了一些整理。
之前经常有看到memcache、Redis与MongoDB相关的数据库,最开始意味这些都只是用来做数据库优化的缓存工具,后来具体看了一些资料之后才发现,这些都是Nosql,下面是网站查找的资料整理出来的知识,比较粗糙,希望在之后的学习中能够不断地完善,获得更深层次的理解。
memcache、Redis与MongoDB是最常用的Nosql数据库,用于解决大规模数据集合多重数据种类带来的挑战,尤其是大数据应用难题。对于超大规模,超大流量以及高并发应用情景具有极大的优势。下面是三种数据库的相关特点与比较。
Memcache
优点
- Memcached可以利用多核优势,单实例吞吐量极高,可以达到几十万QPS(取决于key、value的字节大小以及服务器硬件性能,日常环境中QPS高峰大约在4-6w左右)。适用于最大程度扛量。
- 支持直接配置为session handle。
缺点
- 只支持简单的key/value数据结构,不像Redis可以支持丰富的数据类型。
- 无法进行持久化,数据不能备份,只能用于缓存使用,且重启后数据全部丢失。
- 无法进行数据同步,不能将MC中的数据迁移到其他MC实例中。
- Memcached内存分配采用Slab Allocation机制管理内存,value大小分布差异较大时会造成内存利用率降低,并引发低利用率时依然出现踢出等问题。需要用户注重value设计。
Redis
优点
- 支持多种数据结构,如 string(字符串)、 list(双向链表)、dict(hash表)、set(集合)、zset(排序set)、hyperloglog(基数估算)
- 支持持久化操作,可以进行aof及rdb数据持久化到磁盘,从而进行数据备份或数据恢复等操作,较好的防止数据丢失 的手段。
- 支持通过Replication进行数据复制,通过master-slave机制,可以实时进行数据的同步复制,支持多级复制和增量复制,master-slave机制是Redis进行HA的重要手段。
- 单线程请求,所有命令串行执行,并发情况下不需要考虑数据一致性问题。
- 支持pub/sub消息订阅机制,可以用来进行消息订阅与通知。
- 支持简单的事务需求,但业界使用场景很少,并不成熟。
缺点
- Redis只能使用单线程,性能受限于CPU性能,故单实例CPU最高才可能达到5-6wQPS每秒(取决于数据结构,数据大小以及服务器硬件性能,日常环境中QPS高峰大约在1-2w左右)。
- 支持简单的事务需求,但业界使用场景很少,并不成熟,既是优点也是缺点。
- Redis在string类型上会消耗较多内存,可以使用dict(hash表)压缩存储以降低内存耗用。
MongoDB
优点
- 更高的写负载,MongoDB拥有更高的插入速度。
- 处理很大的规模的单表,当数据表太大的时候可以很容易的分割表。
- 高可用性,设置M-S不仅方便而且很快,MongoDB还可以快速、安全及自动化的实现节点(数据中心)故障转移。
- 快速的查询,MongoDB支持二维空间索引,比如管道,因此可以快速及精确的从指定位置获取数据。MongoDB在启动后会将数据库中的数据以文件映射的方式加载到内存中。如果内存资源相当丰富的话,这将极大地提高数据库的查询速度。
- 非结构化数据的爆发增长,增加列在有些情况下可能锁定整个数据库,或者增加负载从而导致性能下降,由于MongoDB的弱数据结构模式,添加1个新字段不会对旧表格有任何影响,整个过程会非常快速。
更类似Mysql,支持字段索引、游标操作,其优势在于查询功能比较强大,擅长查询JSON数据,能存储海量数据。Mysql在大数据量时效率显著下降,MongoDB更多时候作为关系数据库的一种替代。
缺点
- 不支持事务。
- MongoDB占用空间过大 。
- MongoDB没有成熟的维护工具。
对比
memcache、Redis与MongoDB等常用nosql解决方案。
三者的对比特性对比如下表:
特性 | memcache | Redis | MongoDB |
---|---|---|---|
性能(TPS) | 较高 | 较高 | 高 |
便利性 | 数据结构单一 | 数据结构较丰富,较少IO | 数据结构比较单一,但是支持丰富的数据表达,索引,最类似关系型数据库,支持的查询语言非常丰富。 |
存储空间 | 基于LRU算法可改最大可用内存 | redis2.0后增加VM特性,突破物理内存的限制;可设置过期时间(类似memcache) | 适合大数据量存储,依赖OS的VM做内存管理,内存消耗较大,服务应独立 |
可用性(单点问题) | 本身无数据冗余机制;依赖成熟的hash或者环状算法预防故障,解决单点故障引起的抖动问题 | 单点问题比较复杂;不支持自动sharding,需要依赖程序设定一致hash 机制。依赖客户端来实现分布式读写;主从复制时,无增量复制,存在性能和效率问题 | 支持master-slave,replicaset(内部采用paxos选举算法,自动故障恢复),auto sharding机制,对客户端屏蔽了故障转移和切分机制 |
可靠性(持久化) | 不支持,通常用在做缓存,提升性能 | 依赖快照进行持久化,aof增强了可靠性的同时,对性能有所影响 | 从1.8版本开始采用binlog方式支持持久化的可靠性 |
事务支持 | 在并发场景下,用cas保证一致性 | 事务支持比较弱,只能保证事务中的每个操作连续执行 | 不支持事务 |
数据分析 | 不支持 | 不支持 | 内置了数据分析的功能(mapreduce) |
应用场景 | 动态系统中减少数据库负载,提升性能;做缓存,提高性能(适合读多写少,对于数据量比较大,可以采用sharding) | 数据量较小的性能操作和运算 | 主要解决海量数据的访问效率问题 |
参考:
- Nosql简介 Redis,Memchche,MongoDb的区别
- MongoDB与Redis的比较
- MongoDB和Redis区别
memcache、Redis与MongoDB的学习-1相关推荐
- Java学习——springboot整合mysql、redis、mongodb
Java学习--springboot整合mysql.redis.mongodb 1. 环境搭建 2. 搭建目录结构 3. 各层内容 4. 测试 1. 环境搭建 创建SpringBoot工程时勾选如下技 ...
- HBase、Redis、MongoDB、Couchbase、LevelDB 五款主流NoSQL数据库大比拼
在 HBase.Redis.MongoDB.Couchbase.LevelDB 五款较主流的数据库产品中,本文将主要对它们进行分析对比. 鉴于缺乏项目中的实战经验沉淀,本文内容和观点主要还是从各平台资 ...
- HBase、Redis、MongoDB、Couchbase、LevelDB主流 NoSQL 数据库的对比
最近小组准备启动一个 node 开源项目,从前端亲和力.大数据下的IO性能.可扩展性几点入手挑选了 NoSql 数据库,但具体使用哪一款产品还需要做一次选型. 我们最终把选项范围缩窄在 HBase.R ...
- Redis和MongoDB的区别
Redis和MongoDB的区别(面试受用) 项目中用的是MongoDB,但是为什么用其实当时选型的时候也没有太多考虑,只是认为数据量比较大,所以采用MongoDB. 最近又想起为什么用MongoDB ...
- 尚硅谷+黑马程序员MongoDB视频学习笔记(一)
本学习笔记是来源于学习B站上的尚硅谷和黑马的MongoDB教学视频而做的知识总结. 一.数据库(Database) 数据库是按照数据结构来组织.存在和管理数据的仓库.说白了,数据库就是存在数据的仓库. ...
- 双刃剑MongoDB的学习和避坑
双刃剑MongoDB的学习和避坑 MongoDB 是一把双刃剑,它对数据结构的要求并不高.数据通过key-value的形式存储,而value的值可以是字符串,也可以是文档.所以我们在使用的过程中非常方 ...
- 工具|MySQL、Redis、MongoDB网络抓包工具
点击关注公众号,利用碎片时间学习 简介 go-sniffer 可以抓包截取项目(MySQL.Redis.MongoDB)中的请求并解析成相应的语句,并格式化输出.类似于在之前的文章 MySQL抓包工具 ...
- python3数据存储—四个数据库(sqlite,mysql,redis,mongodb)
文章目录 前言 一.python3 操作sqlite,mysql,redis,mongodb 二.python 标准库 sqlite3模块 1.引入库 2.代码示例 三.python 三方库 pymy ...
- MongoDB开发学习开天辟地,经典入门
如果你从来没有接触MongoDB或对MongoDB有一点了解,如果你是C#开发人员,那么你不妨花几分钟看看本文.本文将一步一步带您轻松入门. 阅读目录 一:简介 二:特点 三:下载安装和开启服务器 四 ...
最新文章
- c# typeof() 和 GetType()的区别
- clickhouse官方文档_clickhouse分析:chproxy使用
- Keepalived 主备配置
- search Paths $(SRCROOT)和$(PROJECT_DIR)区别
- C++ 值传递、指针传递、引用传递
- [转]常用数字处理算法的Verilog实现
- dev GridControl双击行事件
- Java线程的优先级
- 计算机图案填充的两种方法,计算机图形学课件 第9讲 区域填充和字符处理.ppt...
- javascrip之prototype
- Visual Studio:注释/取消注释快捷键
- 扇贝有道180909每日一句
- 【网安入门】学习笔记(一)
- 黑鲨3能升级鸿蒙5g吗,配上高通骁龙865 5G芯片的黑鲨游戏手机3,到底有多懂手游玩家!...
- Cisco设备telnet登录设置
- 中国集成电路产业人才白皮书北京发布--李武宜
- Edwards推出市场上抽吸速度最高的新款紧凑型干式真空泵
- STM32CubeMX(09)MG90S舵机驱动实验
- 明朝时期中外的火器对比
- 基于Node.js自我展示博客网站-计算机毕设 附源码231547
热门文章
- eclipse导出Maven依赖的Jar
- ios 横向滚轮效果_ios横向菜单+页面滑动
- c 子类对象 访问父类对象受保护成员_C++日志(三十四)子类同名成员与作用域分辨符...
- php 代码符号,网站开发编程中的特殊符号处理_php
- php流程控制语句,php学习之道:php 流程控制语句
- java 数据对象_java的几种对象(PO,VO,DAO,BO,POJO)
- php限制下载文件格式,php下载文件 强制任意文件格式下载
- 集训队脱单大法:这是一道只能由学姐我自己出数据的水题(牛客竞赛)
- java 拖动图片放大_Android 图片拖拽、放大缩小的自定义控件
- PAT_B_1058_Java(20分)