浅谈redis采用不同内存分配器tcmalloc和jemalloc
发布时间 - 2026-01-10 21:57:18 点击率:次我们知道Redis并没有自己实现内存池,没有在标准的系统内存分配器上再加上自己的东西。所以系统内存分配器的性能及碎片率会对Redis造成一些性能上的影响。

在Redis的 zmalloc.c 源码中,我们可以看到如下代码:
/* Double expansion needed for stringification of macro values. */
#define __xstr(s) __str(s)
#define __str(s) #s
#if defined(USE_TCMALLOC)
#define ZMALLOC_LIB ("tcmalloc-" __xstr(TC_VERSION_MAJOR) "." __xstr(TC_VERSION_MINOR))
#include <google/tcmalloc.h>
#if (TC_VERSION_MAJOR == 1 && TC_VERSION_MINOR >= 6) || (TC_VERSION_MAJOR > 1)
#define HAVE_MALLOC_SIZE 1
#define zmalloc_size(p) tc_malloc_size(p)
#else
#error "Newer version of tcmalloc required"
#endif
#elif defined(USE_JEMALLOC)
#define ZMALLOC_LIB ("jemalloc-" __xstr(JEMALLOC_VERSION_MAJOR) "." __xstr(JEMALLOC_VERSION_MINOR) "." __xstr(JEMALLOC_VERSION_BUGFIX))
#include <jemalloc/jemalloc.h>
#if (JEMALLOC_VERSION_MAJOR == 2 && JEMALLOC_VERSION_MINOR >= 1) || (JEMALLOC_VERSION_MAJOR > 2)
#define HAVE_MALLOC_SIZE 1
#define zmalloc_size(p) je_malloc_usable_size(p)
#else
#error "Newer version of jemalloc required"
#endif
#elif defined(__APPLE__)
#include <malloc/malloc.h>
#define HAVE_MALLOC_SIZE 1
#define zmalloc_size(p) malloc_size(p)
#endif
#ifndef ZMALLOC_LIB
#define ZMALLOC_LIB "libc"
#endif
从上面的代码中我们可以看到,Redis在编译时,会先判断是否使用tcmalloc,如果是,会用tcmalloc对应的函数替换掉标准的libc中的函数实现。其次会判断jemalloc是否使得,最后如果都没有使用才会用标准的libc中的内存管理函数。
而在最新的2.4.4版本中,jemalloc已经作为源码包的一部分包含在源码包中,所以可以直接被使用。而如果你要使用tcmalloc的话,是需要自己安装的。
下面简单说一下如何安装tcmalloc包,tcmalloc是google-proftools中的一部分,所以我们实际上需要安装google-proftools。如果你是在64位机器上进行安装,需要先安装其依赖的libunwind库。
wget http://download.savannah.gnu.org/releases/libunwind/libunwind-0.99-alpha.tar.gz tar zxvf libunwind-0.99-alpha.tar.gz cd libunwind-0.99-alpha/ CFLAGS=-fPIC ./configure make CFLAGS=-fPIC make CFLAGS=-fPIC install
然后再进行google-preftools的安装:
wget http://google-perftools.googlecode.com/files/google-perftools-1.8.1.tar.gz tar zxvf google-perftools-1.8.1.tar.gz cd google-perftools-1.8.1/ ./configure --disable-cpu-profiler --disable-heap-profiler --disable-heap-checker --disable-debugalloc --enable-minimal make && make install sudo echo "/usr/local/lib" > /etc/ld.so.conf.d/usr_local_lib.conf #如果没有这个文件,自己建一个 sudo /sbin/ldconfig
然后再进行Redis的安装,在make时指定相应的参数以启用tcmalloc
$ curl -O http://redis.googlecode.com/files/redis-2.4.4.tar.gz $ tar xzvf redis-2.4.4.tar.gz $ cd redis-2.4.4 $ make USE_TCMALLOC=yes FORCE_LIBC_MALLOC=yes $ sudo make install
再启动Redis后通过info命令就能看到使用的内存分配器了。
下面回到本文的主题,对于tcmalloc,jemalloc和libc对应的三个内存分配器。其性能和碎片率如何呢?
下面是一个简单测试结果,使用Redis自带的redis-benchmark写入等量数据进行测试,数据摘自采用不同分配器时Redis info信息。
我们可以看到,采用tcmalloc时碎片率是最低的,为1.01,jemalloc为1.02,而libc的分配器碎片率为1.31,如下所未:
used_memory:708391440 used_menory_human:675.57M used_memory_rss:715169792 used_memory_peak:708814040 used_memory_peak_human:675.98M mem_fragmentation_ratio:1.01mem_allocator:tcmalloc-1.7
used_memory:708381168 used_menory_human:675.56M used_memory_rss:723587072 used_memory_peak:708803768 used_memory_peak_human:675.97M mem_fragmentation_ratio:1.02mem_allocator:jemalloc-2.2.1
used_memory:869000400 used_menory_human:828.74M used_memory_rss:1136689152 used_memory_peak:868992208 used_memory_peak_human:828.74M mem_fragmentation_ratio:1.31mem_allocator:libc
上面的测试数据都是小数据,也就是说单条数据并不大,下面我们尝试设置benchmark的-d参数,将value值调整为1k大小,测试结果发生了一些变化:
used_memory:830573680 used_memory_human:792.10M used_memory_rss:849068032 used_memory_peak:831436048 used_memory_peak_human:792.92M mem_fragmentation_ratio:1.02mem_allocator:tcmalloc-1.7
used_memory:915911024 used_memory_human:873.48M used_memory_rss:927047680 used_memory_peak:916773392 used_memory_peak_human:874.30M mem_fragmentation_ratio:1.01mem_allocator:jemalloc-2.2.1
used_memory:771963304 used_memory_human:736.20M used_memory_rss:800583680 used_memory_peak:772784056 used_memory_peak_human:736.98M mem_fragmentation_ratio:1.04mem_allocator:libc
可以看出,在分配大块内存和小块内存上,几种分配器的碎片率差距还是比较大的,大家在使用Redis的时候,还是尽量用自己真实的数据去做测试,以选择最适合自己数据的分配器。
以上就是小编为大家带来的浅谈redis采用不同内存分配器tcmalloc和jemalloc全部内容了,希望大家多多支持~
# redis
# jemalloc和tcmalloc
# 查看Redis内存信息的命令
# 一次关于Redis内存诡异增长的排查过程实战记录
# 浅谈redis内存数据的持久化方式
# 降低PHP Redis内存占用
# 将MongoDB作为Redis式的内存数据库的使用方法
# Redis教程(十四):内存优化介绍
# Redis教程(十一):虚拟内存介绍
# redis数据库查找key在内存中的位置的方法
# Redis fork进程分配不到内存解决方案
# 可以看到
# 然后再
# 会用
# 自己的
# 都是
# 是一个
# 如果你
# 是在
# 就能
# 你要
# 而在
# 再加上
# 去做
# 如果没有
# 会对
# 可以直接
# 几种
# 可以看出
# 自带
# 比较大
相关栏目:
【
网站优化151355 】
【
网络推广146373 】
【
网络技术251813 】
【
AI营销90571 】
相关推荐:
百度浏览器ai对话怎么关 百度浏览器ai聊天窗口隐藏
如何在万网主机上快速搭建网站?
深圳网站制作设计招聘,关于服装设计的流行趋势,哪里的资料比较全面?
详解阿里云nginx服务器多站点的配置
微信小程序 五星评分(包括半颗星评分)实例代码
如何在阿里云完成域名注册与建站?
Laravel如何设置定时任务(Cron Job)_Laravel调度器与任务计划配置
制作ppt免费网站有哪些,有哪些比较好的ppt模板下载网站?
青岛网站建设如何选择本地服务器?
浅谈javascript alert和confirm的美化
东莞市网站制作公司有哪些,东莞找工作用什么网站好?
如何用虚拟主机快速搭建网站?详细步骤解析
LinuxShell函数封装方法_脚本复用设计思路【教程】
Android滚轮选择时间控件使用详解
如何用AI帮你把自己的生活经历写成一个有趣的故事?
如何在HTML表单中获取用户输入并结合JavaScript动态控制复利计算循环
Laravel的Blade指令怎么自定义_创建你自己的Laravel Blade Directives
HTML5空格和margin有啥区别_空格与外边距的使用场景【说明】
详解ASP.NET 生成二维码实例(采用ThoughtWorks.QRCode和QrCode.Net两种方式)
百度浏览器网页无法复制文字怎么办 百度浏览器复制修复
Python自动化办公教程_ExcelWordPDF批量处理案例
Laravel如何配置任务调度?(Cron Job示例)
Laravel怎么防止CSRF攻击_Laravel CSRF保护中间件原理与实践
标准网站视频模板制作软件,现在有哪个网站的视频编辑素材最齐全的,背景音乐、音效等?
Laravel如何升级到最新版本?(升级指南和步骤)
制作网站软件推荐手机版,如何制作属于自己的手机网站app应用?
如何用IIS7快速搭建并优化网站站点?
Laravel怎么多语言本地化设置_Laravel语言包翻译与Locale动态切换【手册】
如何在阿里云ECS服务器部署织梦CMS网站?
手机怎么制作网站教程步骤,手机怎么做自己的网页链接?
电视网站制作tvbox接口,云海电视怎样自定义添加电视源?
Laravel怎么创建控制器Controller_Laravel路由绑定与控制器逻辑编写【指南】
Laravel如何操作JSON类型的数据库字段?(Eloquent示例)
PythonWeb开发入门教程_Flask快速构建Web应用
laravel怎么通过契约(Contracts)编程_laravel契约(Contracts)编程方法
Laravel怎么实现验证码(Captcha)功能
如何用景安虚拟主机手机版绑定域名建站?
logo在线制作免费网站在线制作好吗,DW网页制作时,如何在网页标题前加上logo?
JavaScript如何操作视频_媒体API怎么控制播放
VIVO手机上del键无效OnKeyListener不响应的原因及解决方法
大连 网站制作,大连天途有线官网?
免费视频制作网站,更新又快又好的免费电影网站?
jquery插件bootstrapValidator表单验证详解
品牌网站制作公司有哪些,买正品品牌一般去哪个网站买?
微信小程序 wx.uploadFile无法上传解决办法
php增删改查怎么学_零基础入门php数据库操作必知基础【教程】
矢量图网站制作软件,用千图网的一张矢量图做公司app首页,该网站并未说明版权等问题,这样做算不算侵权?应该如何解决?
香港服务器建站指南:外贸独立站搭建与跨境电商配置流程
Java Adapter 适配器模式(类适配器,对象适配器)优缺点对比
java中使用zxing批量生成二维码立牌

