简单易懂:Linux下TCMalloc的安装与配置指南 (linux tcmalloc 安装)

TCMalloc是Google公司开发的一种高效的内存分配器,它在处理大量数据时表现出了极高的性能优势,特别是在多线程和多核系统中。本文将介绍在Linux系统中安装和配置TCMalloc分配器的详细步骤。

一、下载TCMalloc源代码

首先需要从Google代码库中下载TCMalloc的源代码。打开终端并输入以下命令:

“`sh

$ svn checkout http://google-perftools.googlecode.com/svn/trunk/ google-perftools-read-only

“`

这个命令会将源代码下载到当前目录下的google-perftools-read-only目录中。

二、编译和安装TCMalloc

进入google-perftools-read-only目录,打开终端并输入以下命令:

“`sh

$ ./configure

$ make

$ sudo make install

“`

上述命令中,configure选项用来自动测试程序能否在当前系统上编译和运行成功,make命令用于编译源代码,sudo make install命令则将TCMalloc安装在系统当中,需使用管理员权限。

三、配置环境变量和共享库

安装完TCMalloc后需要配置一些环境变量和共享库,以便程序能够正确地使用TCMalloc内存分配器。

首先要将/lib和/usr/lib目录中的共享库链接到/etc/ld.so.conf文件中。打开终端并输入以下命令:

“`sh

$ sudo echo “/usr/local/lib” >> /etc/ld.so.conf

$ sudo echo “/usr/local/lib64” >> /etc/ld.so.conf

“`

需要为配置环境变量。打开终端并输入以下命令:

“`sh

$ export LD_LIBRARY_PATH=/usr/local/lib:/usr/local/lib64:$LD_LIBRARY_PATH

$ export LD_PRELOAD=libtcmalloc.so

“`

这两个命令分别将LD_LIBRARY_PATH变量设置为包括/usr/local/lib和/usr/local/lib64目录,同时将LD_PRELOAD变量设置为/libtcmalloc.so共享库。在程序运行时,这些变量能够告诉程序使用TCMalloc分配内存。

四、测试TCMalloc性能

为了测试TCMalloc分配器的性能,可以使用一些测试工具,例如Apache基准测试工具(ab)和Valgrind。下面以ab测试工具为例,演示如何测试TCMalloc性能。

首先需要安装ab测试工具,打开终端并输入以下命令:

“`sh

$ sudo apt-get install apache2-utils

“`

安装完毕后,可以执行以下命令来测试TCMalloc的性能:

“`sh

$ ab -n 1000 -c 10 -k -H “Accept-Encoding: gzip, deflate” http://www.example.com/

“`

-n选项指定了执行1000个请求数,-c选项指定了10个并发连接数,-k选项代表HTTP Keep-Alive模式,-H选项指定了HTTP请求头部。这个命令会在终端中输出测试结果,包括吞吐率和延迟等信息。

五、

本文介绍了Linux环境下安装和配置TCMalloc内存分配器的详细步骤,并演示了使用ab测试工具测试TCMalloc性能的方法。对于需要处理大量数据和多线程程序的开发者,TCMalloc能够提供显著的性能提升和内存管理优化。

相关问题拓展阅读:

Linux 里面怎么让系统分配更多的内存给mysql用

修改mysql配置文件,优化缓存大小和连接数连接方式,优化sql语句 ,记得mysql好像是有工具可以查看最占用资源的sql语句,找到他,优化他。安装好mysql后,配制文件应该在/usr/local/mysql/share/mysql目录中,配制文件有几个,有my-huge.cnf my-medium.cnf my-large.cnf my-all.cnf,不同的流量的网站和不同配制的服务器环境,当然需要有不同的配制文件了。

一般的情况下,my-medium.cnf这个配制文件就能满足我们的大多需要;一般我们会把配置文件拷贝到/etc/my.cnf 只需要修改这个配置文件就可以了,使用mysqladmin variables extended-status –u root –p 可以看到目前的参数,有3个配置参数是最重要的,即key_buffer_size,query_cache_size,table_cache。

key_buffer_size只对MyISAM表起作用,

key_buffer_size指定索引缓冲区的大小,它决定索引处理的速度,尤其是索引读的速度。一般我们设为16M,实神巧际上稍微大一点的站点 这个数字是远远不够的,通过检查状态值Key_read_requests和Key_reads,可以知道key_buffer_size设置是否简消合理拦瞎知。比例 key_reads / key_read_requests应该尽可能的低,至少是1:100,1:1000更好(上述状态值可以使用SHOW STATUS LIKE ‘key_read%’获得)。 或者如果你装了phpmyadmin 可以通过服务器运行状态看到,笔者推荐用phpmyadmin管理mysql,以下的状态值都是本人通过phpmyadmin获得的实例分析:

这个服务器已经运行了20天

key_buffer_size – 128M

key_read_requests –

key_reads

比例接近1:8000 健康状况非常好

Linux 进程通过 C 标准库中圆缓的内存分配函数 malloc 向系统申请内存,但是到真正与内核交互之间,其实还隔了一层,即内存分配管理器(memory allocator)。常见的内存分配器包括:ptmalloc(Glibc)、tcmalloc(Google)、jemalloc(FreeBSD)。MySQL 默认使用的是 glibc 的 ptmalloc 作为内存分配器。

内存分配器采用的是内存池的管理方式,处在用户程序层和内核层之间,它响应用户的分配请求,向操作系统申请内存,然后将其返回给用户程序。

为了保持高效的分配,分配器通常会预先向操作系统申请一块内存,当用户程序申请和释放内存的时候,分配器会将这散拿些内存管理起来,并通过一些算法策略来判断是否将其返回给操作系统。这样做的更大好处就是可以避免用户程序频繁的调用系统来进行内存分配,使用户橘掘模程序在内存使用上更加高效快捷。

关于 ptmalloc 的内存分配原理,个人也不是非常了解,这里就不班门弄斧了,有兴趣的同学可以去看下华庭的《glibc 内存管理 ptmalloc 源代码分析》【文末链接】。

关于如何选择这三种内存分配器,网上资料大多都是推荐摒弃 glibc 原生的 ptmalloc,而改用 jemalloc 或者 tcmalloc 作为默认分配器。因为 ptmalloc 的主要问题其实是内存浪费、内存碎片、以及加锁导致的性能问题,而 jemalloc 与 tcmalloc 对于内存碎片、多线程处理优化的更好。

目前 jemalloc 应用于 Firefox、FaceBook 等,并且是 MariaDB、Redis、Tengine 默认推荐的内存分配器,而 tcmalloc 则应用于 WebKit、Chrome 等。

关于linux tcmalloc 安装的介绍到此就结束了,不知道你从中找到你需要的信息了吗 ?如果你还想了解更多这方面的信息,记得收藏关注本站。


数据运维技术 » 简单易懂:Linux下TCMalloc的安装与配置指南 (linux tcmalloc 安装)