你真的懂 Linux 的 "free" 命令吗?——站在程序的角度看内存映射
2017-08-25 10:29
225 查看
Linux上的free命令以及站在程序的角度看内存映射
解释一下Linux上free命令的输出。下面是free的运行结果,一共有4行。为了方便说明,我加上了列号。这样可以把free的输出看成一个二维数组FO(Free Output)。例如:
FO[2][1] = 24677460
FO[3][2] = 10321516
1 2 3 4 5 6
1 total used free shared buffers cached
2 Mem: 24677460 23276064 1401396 0 870540 12084008
3 -/+ buffers/cache: 10321516 14355944
4 Swap: 25151484 224188 24927296
free的输出一共有四行,第四行为交换区的信息,分别是交换的总量(total),使用量(used)和有多少空闲的交换区(free),这个比较清楚,不说太多。
free输出地第二行和第三行是比较让人迷惑的。这两行都是说明内存使用情况的。第一列是总量(total),第二列是使用量(used),第三列是可用量(free)。
第一行的输出时从操作系统(OS)来看的。也就是说,从OS的角度来看,计算机上一共有:
24677460KB(缺省时free的单位为KB)物理内存,即FO[2][1];
在这些物理内存中有23276064KB(即FO[2][2])被使用了;
还用1401396KB(即FO[2][3])是可用的;
这里得到第一个等式:
FO[2][1] = FO[2][2] + FO[2][3]
FO[2][4]表示被几个进程共享的内存的,现在已经deprecated,其值总是0(当然在一些系统上也可能不是0,主要取决于free命令是怎么实现的)。
FO[2][5]表示被OS buffer住的内存。FO[2][6]表示被OS cache的内存。在有些时候buffer和cache这两个词经常混用。不过在一些比较低层的软件里是要区分这两个词的,看老外的洋文:
A buffer is something that has yet to be "written" to disk.
A cache is something that has been "read" from the disk and stored for later use.
也就是说buffer是用于存放要输出到disk(块设备)的数据的,而cache是存放从disk上读出的数据。这二者是为了提高IO性能的,并由OS管理。
Linux和其他成熟的操作系统(例如windows),为了提高IO read的性能,总是要多cache一些数据,这也就是为什么FO[2][6](cached memory)比较大,而FO[2][3]比较小的原因。我们可以做一个简单的测试:
释放掉被系统cache占用的数据;
echo 3>/proc/sys/vm/drop_caches
读一个大文件,并记录时间;
关闭该文件;
重读这个大文件,并记录时间;
第二次读应该比第一次快很多。原来我做过一个BerkeleyDB的读操作,大概要读5G的文件,几千万条记录。在我的环境上,第二次读比第一次大概可以快9倍左右。
free输出的第二行是从一个应用程序的角度看系统内存的使用情况。
对于FO[3][2],即-buffers/cache,表示一个应用程序认为系统被用掉多少内存;
对于FO[3][3],即+buffers/cache,表示一个应用程序认为系统还有多少内存;
因为被系统cache和buffer占用的内存可以被快速回收,所以通常FO[3][3]比FO[2][3]会大很多。
这里还用两个等式:
FO[3][2] = FO[2][2] - FO[2][5] - FO[2][6]
FO[3][3] = FO[2][3] + FO[2][5] + FO[2][6] = FO[2][1] - FO[3][2]
关键点在于:
我们都知道每个程序都认为只有自己一个程序运行在操作系统上,只有自己和操作系统在使用内存,根据内存的虚拟化原理,操作系统使用剩下的内存全是给自己使用的。但是实际情况下操作系统之上肯定是运行不止一个程序的,内存的实际分配是怎样的呢?
假设某服务器上正运行的有操作系统C和A、B两个程序,
内存总量为3G,A,B,C实际分别占恰好1G内存。则,运行中的A程序是如何计算自己可支配的内存呢?A认为只有自己和操作系统C可使用这3G的内存,A认为操作系统占用了2G内存,所以自己可支配的就只有1G内存,B程序也是一样。
因此,虽然每个每个程序认为只有自己和操作系统在使用内存,可是所有运行的程序可使用的内存加起来不会超过物理内存总量。
free命令由procps.*.rpm提供(在Redhat系列的OS上)。free命令的所有输出值都是从/proc/meminfo中读出的。
在系统上可能有meminfo(2)这个函数,它就是为了解析/proc/meminfo的。procps这个包自己实现了meminfo()这个函数。可以下载一个procps的tar包看看具体实现,现在Centos7.3里该包的最新版是3.3.10。
相关文章推荐
- linux下使用free命令查看实际内存占用(可用内存)
- 【转】linux的free命令详解-内存是拿来用的不是拿来看的
- linux下使用free命令查看实际内存占用
- Linux中用free命令查看内存占用情况
- linux内存查看 free 命令
- Linux学习笔记--free命令(查看内存信息的命令)
- 检测 Linux 内存使用情况的 free 命令的10个例子
- Linux使用free命令查看实际内存占用
- [Linux] ls和size命令以及程序内存映像、磁盘映像的理解
- [Linux] ls和size命令以及程序内存映像、磁盘映像的理解
- linux内存/cpu利用率 引出vmstat命令 free命令
- linux下使用free命令查看实际内存占用(可用内存)
- linux内存查看 free 命令
- linux 查看机器内存方法 (free命令)
- linux free命令建检查内存状态
- Linux命令 free 系统内存使用状况
- 我使用过的Linux命令之free - 显示内存的使用情况
- free命令_Linux free 命令用法详解:显示内存的使用情况
- Linux free命令查看内存状态
- Linux命令(1) - 查看内存使用情况: free -hm