jemalloc在linux上从安装到使用

redis有用到jemalloc。

首先,jemalloc是干什么的? 
我们看看作者自己的介绍:

jemalloc is a general purpose malloc(3) implementation that emphasizes fragmentation avoidance and scalable concurrency support

意思是说jemalloc干了malloc干的活,而且干得好一些,主要体现在避免内存碎片与并发扩展上。

首先,什么是内存碎片?

 malloc/free或new/delete大量使用后回造成内存碎片,那么这种碎片形成的机理是什么?  
    如果机理是申请的内存空间大小(太小)所形成的,那么,申请多大的区域能够最大限度的避免内存碎片呢?(这里的避免不是绝对的避免,只是一种概率)
    内存碎片一般是由于空闲的连续空间比要申请的空间小,导致这些小内存块不能被利用。产生内存碎片的方法很简单,举个例:  
    假设有一块一共有100个单位的连续空闲内存空间,范围是0~99。如果你从中申请一块内存,如10个单位,那么申请出来的内存块就为0~9区间。这时候你继续申请一块内存,比如说5个单位大,第二块得到的内存块就应该为10~14区间。  
    如果你把第一块内存块释放,然后再申请一块大于10个单位的内存块,比如说20个单位。因为刚被释放的内存块不能满足新的请求,所以只能从15开始分配出20个单位的内存块。  
    现在整个内存空间的状态是0~9空闲,10~14被占用,15~24被占用,25~99空闲。其中0~9就是一个内存碎片了。如果10~14一直被占用,而以后申请的空间都大于10个单位,那么0~9就永远用不上了,造成内存浪费。  
    如果你每次申请内存的大小,都比前一次释放的内村大小要小,那么就申请就总能成功。 

内存碎片很可怕吗? 
短时间内不明显,对于线上的服务器比如nginx,运行时间可能经年,每天几亿的请求量,如果每天产生100片 ,一年下来也是3万多片 ,相当恐怖!

 

jemalloc可以有效的解决这个问题! 

jemalloc的性能图(上篇已经展示过): 

jemalloc和pcmalloc哪个性能好_内存碎片

既然jemalloc这么牛逼,我们就来安装吧!

下载到linux目录下解压:

tar -xjvf jemalloc-4.2.1.tar.bz2 
生成的文件列表如下: 

jemalloc和pcmalloc哪个性能好_内存空间_02

在此目录下预编译

./configure –prefix=/usr/local/jemalloc

完成后再编译:

make -j8 && make install

我们到生成目录去看看:


生成的头文件在include里,库在lib里。

至此,安装算是完成了。

下面看看如何使用: 
在编译链接时直接指向jemalloc即可:

gcc -g -c -o 1.o 1.c 
gcc -g -o 1.out 1.o -L/usr/local/jemalloc/lib -ljemalloc

运行程序时可能会报找不到库: 

jemalloc和pcmalloc哪个性能好_github_03

只要将jemalloc的库被系统找到即可:

echo /usr/local/jemalloc/lib >> /etc/ld.so.conf 
ldconfig

再次运行即可