Redis如何采用不同内存分配器碎片率对比

网友投稿 268 2023-11-29

Redis如何采用不同内存分配器碎片率对比

今天小编给大家分享一下Redis如何采用不同内存分配器碎片率对比的相关知识点,内容详细,逻辑清晰,相信大部分人都还太了解这方面的知识,所以分享这篇文章给大家参考一下,希望大家阅读完这篇文章后有所收获,下面我们一起来了解一下吧。

Redis如何采用不同内存分配器碎片率对比

  在Redis的 zmalloc.c 源码中,我们可以看到如下代码

/* Explicitly override malloc/free etc when using tcmalloc. */

  #if defined(USE_TCMALLOC)

  #define malloc(size) tc_malloc(size)

#define calloc(count,size) tc_calloc(count,size)

  #define realloc(ptr,size) tc_realloc(ptr,size)

#define free(ptr) tc_free(ptr)

  #elif defined(USE_JEMALLOC)

  #define malloc(size) je_malloc(size)

#define calloc(count,size) je_calloc(count,size)

  #define realloc(ptr,size) je_realloc(ptr,size)

#define free(ptr) je_free(ptr)

  #endif

从上面的代码中我们可以看到,Redis在编译时,会先判断是否使用tcmalloc,如果是,会用tcmalloc对应的函数替换掉标准的libc中的函数实现。其次会判断jemalloc是否使得,最后如果都没有使用才会用标准的libc中的内存管理函数。

而在最新的2.4.4版本中,jemalloc已经作为源码包的一部分包含在源码包中,所以可以直接被使用。而如果你要使用tcmalloc的话,是需要自己安装的。

下面简单说一下如何安装tcmalloc包,tcmalloc是google-proftools中的一部分,所以我们实际上需要安装google-proftools。如果你是在64位机器上进行安装,需要先安装其依赖的libunwind库。

wget http://download.savannah.gnu.org/releases/libunwind/libunwind-0.99-alpha.tar.gz

  tar zxvf libunwind-0.99-alpha.tar.gz

  cd libunwind-0.99-alpha/

  CFLAGS=-fPIC ./configure

make CFLAGS=-fPIC

  make CFLAGS=-fPIC install

  Redis怎样采用不同内存分配器碎片率对比

  然后再进行google-preftools的安装:

wget http://google-perftools.googlecode.com/files/google-perftools-1.8.1.tar.gz

  tar zxvf google-perftools-1.8.1.tar.gz

cd google-perftools-1.8.1/

./configure --disable-cpu-profiler --disable-heap-profiler --disable-heap-checker --disable-debugalloc --enable-minimal

  make && make install

sudo echo "/usr/local/lib" > /etc/ld.so.conf.d/usr_local_lib.conf #如果没有这个文件,自己建一个

  sudo /sbin/ldconfig

然后再进行Redis的安装,在make时指定相应的参数以启用tcmalloc

  $ curl -O http://redis.googlecode.com/files/redis-2.4.4.tar.gz

  $ tar xzvf redis-2.4.4.tar.gz

$ cd redis-2.4.4

  $ make USE_TCMALLOC=yes FORCE_LIBC_MALLOC=yes

  $ sudo make install

再启动Redis后通过info命令就能看到使用的内存分配器了。

下面回到本文的主题,对于tcmalloc,jemalloc和libc对应的三个内存分配器。其性能和碎片率如何呢?下面是一个简单测试结果,数据摘自采用不同分配器时Redis info信息。我们可以看到,采用tcmalloc时碎片率是最低的,为1.01,jemalloc为1.02,而libc的分配器碎片率为1.31,如下所未:

  used_memory:708391440

used_menory_human:675.57M

  used_memory_rss:715169792

  used_memory_peak:708814040

  used_memory_peak_human:675.98M

mem_fragmentation_ratio:1.01

  mem_allocator:tcmalloc-1.7

  used_memory:708381168

  used_menory_human:675.56M

used_memory_rss:723587072

  used_memory_peak:708803768

  used_memory_peak_human:675.97M

mem_fragmentation_ratio:1.02

  mem_allocator:jemalloc-2.2.1

  used_memory:869000400

  used_menory_human:828.74M

used_memory_rss:1136689152

  used_memory_peak:868992208

  used_memory_peak_human:828.74M

  mem_fragmentation_ratio:1.31

mem_allocator:libc

以上就是“Redis如何采用不同内存分配器碎片率对比”这篇文章的所有内容,感谢各位的阅读!相信大家阅读完这篇文章都有很大的收获,小编每天都会为大家更新不同的知识,如果还想学习更多的知识,请关注亿速云行业资讯频道。

版权声明:本文内容由网络用户投稿,版权归原作者所有,本站不拥有其著作权,亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容,请联系我们jiasou666@gmail.com 处理,核实后本网站将在24小时内删除侵权内容。

上一篇:怎么实现redis缓存
下一篇:Redis在内存分配和使用统计的技巧有哪些
相关文章

 发表评论

暂时没有评论,来抢沙发吧~