主题信息（必填）
主题描述（最多限制在50个字符）
申请人信息（必填）
申请信息已提交审核，请注意查收邮件，我们会尽快给您反馈。
如有疑问，请联系
傻丫头和高科技产物小心翼翼的初恋
如今的编程是一场程序员和上帝的竞赛，程序员要开发出更大更好、傻瓜都会用到软件。而上帝在努力创造出更大更傻的傻瓜。目前为止，上帝是赢的。个人网站：。个人QQ群：、
个人大数据技术博客：
CSDN &《程序员》编辑/记者，投稿&纠错等事宜请致邮君，已阅读到文档的结尾了呢~~
Memcachedvs.Redis不同key大小性能测试报告_v1.0__廖诚
扫扫二维码，随身浏览文档
手机或平板扫扫即可继续访问
Memcachedvs.Redis不同key大小性能测试报告_v1.0__廖诚
举报该文档为侵权文档。
举报该文档含有违规或不良信息。
反馈该文档无法正常浏览。
举报该文档为重复文档。
推荐理由：
将文档分享至：
分享完整地址
文档地址：
粘贴到BBS或博客
flash地址：
支持嵌入FLASH地址的网站使用
html代码：
&embed src='/DocinViewer--144.swf' width='100%' height='600' type=application/x-shockwave-flash ALLOWFULLSCREEN='true' ALLOWSCRIPTACCESS='always'&&/embed&
450px*300px480px*400px650px*490px
支持嵌入HTML代码的网站使用
您的内容已经提交成功
您所提交的内容需要审核后才能发布，请您等待！
3秒自动关闭窗口68810人阅读
00.Cloud（45）
作者：刘旭晖 Raymond 转载请注明出处
Memcached和Redis作为两种Inmemory的key-value数据库，在设计和思想方面有着很多共通的地方，功能和应用方面在很多场合下(作为分布式缓存服务器使用等)
也很相似，在这里把两者放在一起做一下对比的介绍
基本架构和思想
首先简单介绍一下两者的架构和设计思路
Memcached采用客户端-服务器的架构，客户端和服务器端的通讯使用自定义的协议标准，只要满足协议格式要求，客户端Library可以用任何语言实现。
从用户的角度来说，服务器维护了一个键-值关系的数据表，服务器之间相互独立，互相之间不共享数据也不做任何通讯操作。客户端需要知道所有的服务器，并自行负责管理数据在各个服务器间的分配。
在服务器端，内部的数据存储，使用基于Slab的内存管理方式，有利于减少内存碎片和频繁分配销毁内存所带来的开销。各个Slab按需动态分配一个page的内存（和4Kpage的概念不同，这里默认page为1M），page内部按照不同slab
class的尺寸再划分为内存chunk供服务器存储KV键值对使用
Memcached的基本应用模型如下图所示
Redis的基本应用模式和上图memcached的基本相似，不难发现网上到处都是关于redis是否可以完全替代memcached使用的问题
Redis内部的数据结构最终也会落实到key-Value对应的形式，不过从暴露给用户的数据结构来看，要比memcached丰富，除了标准的通常意义的键值对，Redis还支持List，Set，
Hashes，Sorted Set等数据结构
Memcached的命令或者说通讯协议非常简单，Server所支持的命令基本就是对特定key的添加，删除，替换，原子更新，读取等，具体包括&Set,
Get, Add, Replace, Append, Inc/Dec 等等
Memcached的通讯协议包括文本格式和二进制格式，用于满足简单网络客户端工具（如telnet）和对性能要求更高的客户端的不同需求
Redis的命令在KV（String类型）上提供与Memcached类似的基本操作，在其它数据结构上也支持基本类似的操作（当然还有这些数据结构所特有的操作，如Set的union，List的pop等）而支持更多的数据结构，在一定程度上也就意味着更加广泛的应用场合
除了多种数据结构的支持，Redis相比Memcached还提供了许多额外的特性，比如Subscribe/publish命令，以支持发布/订阅模式这样的通知机制等等，这些额外的特性同样有助于拓展它的应用场景
Redis的客户端-服务器通讯协议完全采用文本格式（在将来可能的服务器间通讯会采用二进制格式）
redis通过Multi / Watch /Exec等命令可以支持事务的概念，原子性的执行一批命令。在2.6以后的版本中由于添加了对Script脚本的支持，而脚本固有的是以transaction事务的方式执行的，并且更加易于使用，所以不排除将来取消Multi等命令接口的可能性
Memcached的应用模式中，除了increment/decrement这样的原子操作命令，不存在对事务的支持
数据备份，有效性，持久化等
memcached不保证存储的数据的有效性，Slab内部基于LRU也会自动淘汰旧数据，客户端不能假设数据在服务器端的当前状态，这应该说是Memcached的Feature设定，用户不必太多关心或者自己管理数据的淘汰更新工作，当然是否适合你的应用，取决于具体的需求，它也可能成为你需要精确自行控制Cache生命周期的一个障碍
Memcached也不做数据的持久化工作，但是有许多基于memcached协议的项目实现了数据的持久化，例如memcacheDB使用BerkeleyDB进行数据存储，但本质上它已经不是一个Cache
Server，而只是一个兼容Memcached的协议key-valueData Store了
Redis可以以master-slave的方式配置服务器，Slave节点对数据进行replica备份，Slave节点也可以充当Read
only的节点分担数据读取的工作
Redis内建支持两种持久化方案，snapshot快照和AOF
增量Log方式。快照顾名思义就是隔一段时间将完整的数据Dump下来存储在文件中。AOF增量Log则是记录对数据的修改操作（实际上记录的就是每个对数据产生修改的命令本身），两种方案可以并存，也各有优缺点，具体参见
以上Redis的数据备份持久化方案等，如果不需要，为了提高性能，也完全可以Disable
性能方面，两者都有一些自己考虑和实现
memcached自身并不主动定期检查和标记哪些数据需要被淘汰，只有当再次读取相关数据时才检查时间戳，或者当内存不够使用需要主动淘汰数据时进一步检查LRU数据
Redis为了减少大量小数据CMD操作的网络通讯时间开销
RTT (Round Trip Time)，支持pipeline和script技术
所谓的pipeline就是支持在一次通讯中，发送多个命令给服务器批量执行，带来的代价是服务器端需要更多的内存来缓存查询结果。
Redis内嵌了LUA解析器，可以执行lua
脚本，脚本可以通过eval等命令直接执行，也可以使用script
load等方式上传到服务器端的script cache中重复使用
这两种方式都可以有效地减少网络通讯开销，增加数据吞吐率
对于KV的操作，Memcached和Redis都支持Multiple的Get和Set命令（Memcached的Multiple
Set命令貌似只在二进制的协议中支持），这同样有利于性能的提升
实际性能方面，网上有很多测试比较，给出的结果各不相同，这无疑和各种测试的测试用例，测试环境，和测试时具体使用的客户端Library实现有关。但是总体看下来，比较靠谱的结论是在kv类操作上，两者的性能接近，Memcached的结构更加简单，理论上应该会略微快一些。
memcached的服务器端互相完全独立，客户端通常通过对键值应用Hash算法决定数据的分区，为了减少服务器的增减对Hash结果的影响，导致大面积的缓存失效，多数客户端实现了一致性hash算法
Redis计划在服务器端内建对集群的支持，但是目前代码还处于alpha阶段（貌似已经Design了两三年了？）在此之前，同样可以认为每个Redis服务器实例相互之间是完全独立的，需要依靠客户端处理分区算法和可用服务器列表管理的工作。
Redis官方推荐的用于Sharding的客户端程序库是Twitter的开源项目
Twemproxy， Twemproxy同时支持Memcached和Redis的文本通讯协议。
需要注意的是，Redis的许多命令在集群环境下是不能正确运行的，例如set的交集，以及跨节点的事务操作等等，因为目前的Redis集群设计，根本目标也就是服务器之间互相汇报一下存活状态，以及对数据做荣誉备份平衡负载等而已，本质上对数据的跨节点操作并不提供任何额外支持，所以在数据服务的层面上来说，各个服务器依旧是完全独立的。
这些操作如果一定要实现，当然可以通过客户端代码来实现（效率有多高且不说），类似的问题memcached集群当然也会遇上，但是原本memcached就不支持复杂的操作和数据类型，许多运算逻辑原本就是由客户端代码或应用程序自己处理的。
MR类批处理应用
提供指定范围的遍历操作，是支持类似MapReduce这样的批处理应用逻辑的关键之一，但是要在基于hash方式存储的数据结构的基础上提供这样的支持并不容易（或者说要实现高效的范围或遍历操作并不容易）
Redis支持Scan操作用于遍历数据集，这一操作基于其内部数据结构及实现的限制，可以保证在Scan开始时的所有数据都能被获取到，但是不能保证不返回重复的数据，这需要由客户端来检查，或者客户端对此无所谓。Scan操作还支持Match条件用来过滤键值，虽然存在一定的局限性，例如match条件的比较是在获取数据之后再执行的，效率是一个问题，更明显的问题是不能保证每次scan的iterate过程都能返回同样数量的有效数据。
对于范围操作，Redis的Ordered
Set支持在插入时指定数据的分数（Score）用于排序，而后支持在指定Score范围内的各种操作，虽然由于不支持基于字符串的或自定义的基准的Range操作，这样的范围操作应用起来有很大的局限性（或者说需要满足特定的应用模式），但是还是比没有好了
Memcached核心协议本身不支持任何范围类的操作，也没有对遍历操作的支持，甚至不存在官方合法的列举所有Key的操作，这当然很大程度上源于其设计思想和精简的架构
不过还是有一些兼容memcached协议的服务器实现了范围类操作，具体格式可以参考
所建议的标准
此外Redis的Hashes数据结构，在一定程度上可以满足获取特定子集数据的应用逻辑需求。
综上来说，如果要实现类似HBase支持的scan操作，不论是Redis还是memcached都无法做到，但是对于Redis来说，能否用于批处理类应用，不能一概而论，取决于具体的数据的格式逻辑和使用方式。通过适当的调整应用程序使用数据的方式，还是有可能在一定程度上实现对MR类批处理，或范围查询类应用逻辑的支持的。而对于键值分布在一个较大的连续空间，数量不确定，同时又无法很好的映射为数值进而使用ordered
set来处理的这样一些数据结构，应该还是很难高效的分区遍历的
参考知识库
* 以上用户言论只代表其个人观点，不代表CSDN网站的观点或立场
访问：998624次
积分：7999
积分：7999
排名：第1985名
原创：96篇
评论：157条
文章：19篇
阅读：66214
(1)(2)(1)(2)(2)(4)(1)(1)(3)(2)(1)(2)(2)(4)(1)(5)(12)(1)(1)(2)(1)(8)(1)(1)(2)(1)(1)(2)(8)(6)(2)(1)(1)(8)(7)后使用快捷导航没有帐号？
查看: 1956|回复: 32
memcached和redis有啥区别呢？
金牌会员, 积分 2574, 距离下一级还需 426 积分
论坛徽章:6
memcached和都是key-value型no解决方案，我知道redis可以支持持久化，mc不能，除了这个特性之外，他们有什么区别呢，在技术选型的时候，可以互换吗？
论坛徽章:468
本帖最后由 tigerfish 于
11:49 编辑
前者是纯内存的，后者可以内存+持久存储，在功能上redis要强很多，比如可以支持线性数组，链表等等复杂的数据结构类型
金牌会员, 积分 2574, 距离下一级还需 426 积分
论坛徽章:6
tigerfish 发表于
前者是纯内存的，后者可以内存+持久存储，在功能上redis要强很多，比如可以支持线性数组，链表等等复杂的数 ...
mc与redis可以互换吗？
我们在项目中有用到过mc，但是他存在一个单点问题，目前我们采用的是双写来保证HA，当一台挂 了程序自动切换到备份mc上，但是这样感觉效率不是很高。对于这种case有其他的替代方案吗？
论坛徽章:468
eonezhang 发表于
mc与redis可以互换吗？
我们在项目中有用到过mc，但是他存在一个单点问题，目前我们采用的是双写来保证H ...
印象中mc大部分使用在缓存的场景，特别是作为应用和后台数据库之间的缓存，redis可以用于更加广泛的场景
论坛徽章:468
我们在项目中有用到过mc，但是他存在一个单点问题，目前我们采用的是双写来保证HA，当一台挂 了程序自动切换到备份mc上，但是这样感觉效率不是很高
这个问题不妨单独起一个帖子，把详细的场景分享一下进行深入讨论
金牌会员, 积分 2308, 距离下一级还需 692 积分
论坛徽章:14
eonezhang的问题很有实践意义，查看了资料MC应用很广，多数还是看重内存数据库的快速响应，一般还是传统关系数据库为业务处理核心，其他例如持久化需求也就不强烈了。对于公司来说选型可能还要考虑系统复杂度与可维护性。有时候可能不必要的东西就不引入了。
金牌会员, 积分 1090, 距离下一级还需 1910 积分
论坛徽章:12
都属于键值型数据库，redis的功能比memcached要高级，效率要高
论坛徽章:6
jeffreynet 发表于
eonezhang的问题很有实践意义，查看了资料MC应用很广，多数还是看重内存数据库的快速响应，一般还是传统关系 ...
现在的潮流是轻量化，用东西选择“恰好”的就行，多余的功能往往也可能意味着多余的负担和潜在的故障点
高级会员, 积分 840, 距离下一级还需 160 积分
论坛徽章:15
学习学习，刚接触NoSQL,了解不多
金牌会员, 积分 1321, 距离下一级还需 1679 积分
论坛徽章:15
学习学习，广谱了解。