手工释放linux内存——/proc/sys/vm/drop_cache_dropvm_skate的博客-程序员宅基地

技术标签: server  cache  linux  磁盘  buffer  LINUX Management  caching  

author:skate

time:2012/02/22

 

 手工释放linux内存——/proc/sys/vm/drop_cache

 

转载一篇文章

 

linux的内存查看:

[[email protected] 0.1.0]# free -m
                   total       used       free     shared    buffers     cached
Mem:          4032        694       3337          0          0         25

 

需要说明的是,mem的used=free+buffers+cached,有些情况是cached占用很多资源,算起来数值就是不对,其实不影响实际使用,下面转载部分有说明如何清除cached的占用(实际上可以不清除,不会影响实际使用)

 

当在Linux下频繁存取文件后,物理内存会很快被用光,当程序结束后,内存不会被正常释放,而是一直作为caching。这个问题,貌似有不少人在问,不过都没有看到有什么很好解决的办法。那么我来谈谈这个问题。

 

一、通常情况


先来说说free命令:
引用[[email protected] ~]# free -m
total used free shared buffers cached
Mem: 249 163 86 0 10 94
-/+ buffers/cache: 58 191
Swap: 511 0 511


其中:
引用total 内存总数
used 已经使用的内存数
free 空闲的内存数
shared 多个进程共享的内存总额
buffers Buffer Cache和cached Page Cache 磁盘缓存的大小
-buffers/cache 的内存数:used - buffers - cached
+buffers/cache 的内存数:free + buffers + cached


可用的memory=free memory+buffers+cached。


有了这个基础后,可以得知,我现在used为163MB,free为86MB,buffer和cached分别为10MB,94MB。


那么我们来看看,如果我执行复制文件,内存会发生什么变化.
引用[[email protected] ~]# cp -r /etc ~/test/
[[email protected] ~]# free -m
total used free shared buffers cached
Mem: 249 244 4 0 8 174
-/+ buffers/cache: 62 187
Swap: 511 0 511


在我命令执行结束后,used为244MB,free为4MB,buffers为8MB,cached为174MB,天呐,都被cached吃掉了。别紧张,这是为了提高文件读取效率的做法。

为了提高磁盘存取效率,Linux做了一些精心的设计,除了对dentry进行缓存(用于VFS,加速文件路径名到inode的转换),还采取了两种主要Cache方式:Buffer Cache和Page Cache。前者针对磁盘块的读写,后者针对文件inode的读写。这些Cache有效缩短了 I/O系统调用(比如read,write,getdents)的时间。
那么有人说过段时间,linux会自动释放掉所用的内存。等待一段时间后,我们使用free再来试试,看看是否有释放?


[[email protected] test]# free -m
total used free shared buffers cached
Mem: 249 244 5 0 8 174
-/+ buffers/cache: 61 188
Swap: 511 0 511


似乎没有任何变化。(实际情况下,内存的管理还与Swap有关)
那么我能否手动释放掉这些内存呢?回答是可以的!

二、手动释放缓存
/proc是一个虚拟文件系统,我们可以通过对它的读写操作做为与kernel实体间进行通信的一种手段。也就是说可以通过修改/proc中的文件,来对当前kernel的行为做出调整。那么我们可以通过调整/proc/sys/vm/drop_caches来释放内存。操作如下:


[[email protected] test]# cat /proc/sys/vm/drop_caches
0
首先,/proc/sys/vm/drop_caches的值,默认为0。


[[email protected] test]# sync


手动执行sync命令(描述:sync 命令运行 sync 子例程。如果必须停止系统,则运行sync 命令以确保文件系统的完整性。sync 命令将所有未写的系统缓冲区写到磁盘中,包含已修改的 i-node、已延迟的块 I/O 和读写映射文件)


[[email protected] test]# echo 3 > /proc/sys/vm/drop_caches
[[email protected] test]# cat /proc/sys/vm/drop_caches
3


将/proc/sys/vm/drop_caches值设为3


[[email protected] test]# free -m
total used free shared buffers cached
Mem: 249 66 182 0 0 11
-/+ buffers/cache: 55 194
Swap: 511 0 511


再来运行free命令,会发现现在的used为66MB,free为182MB,buffers为0MB,cached为11MB。那么有效的释放了buffer和cache。
有关/proc/sys/vm/drop_caches的用法在下面进行了说明


引用/proc/sys/vm/drop_caches (since Linux 2.6.16)
Writing to this file causes the kernel to drop clean caches,dentries and inodes from memory, causing that memory to become free.


To free pagecache, use

 echo 1 > /proc/sys/vm/drop_caches;

 to free dentries and inodes, use

echo 2 > /proc/sys/vm/drop_caches;


to free pagecache, dentries and inodes, use

 echo 3 >/proc/sys/vm/drop_caches.


Because this is a non-destructive operation and dirty objects are not freeable, the user should run sync first.


三、我的意见
上述文章就长期以来很多用户对Linux内存管理方面的疑问,给出了一个比较“直观”的回复,我更觉得有点像是核心开发小组的妥协。
对于是否需要使用这个值,或向用户提及这个值,我是有保留意见的:

1、从man可以看到,这值从2.6.16以后的核心版本才提供,也就是老版的操作系统,如红旗DC 5.0、RHEL 4.x之前的版本都没有;
2、若对于系统内存是否够用的观察,我还是原意去看swap的使用率和si/so两个值的大小;


用户常见的疑问是,为什么free这么小,是否关闭应用后内存没有释放?
但实际上,我们都知道这是因为Linux对内存的管理与Windows不同,free小并不是说内存不够用了,应该看的是free的第二行最后一个值:"-/+ buffers/cache: 58 191" 这才是系统可用的内存大小。


实际项目中告诉我们,如果因为是应用有像内存泄露、溢出的问题,从swap的使用情况是可以比较快速可以判断的,但free上面反而比较难查看。相反,如果在这个时候,我们告诉用户,修改系统的一个值,“可以”释放内存,free就大了。用户会怎么想?不会觉得操作系统“有问题”吗?所以说,我觉得既然核心是可以快速清空buffer或cache,也不难做到(这从上面的操作中可以明显看到),但核心并没有这样做(默认值是0),我们就不应该随便去改变它。一般情况下,应用在系统上稳定运行了,free值也会保持在一个稳定值的,虽然看上去可能比较小。当发生内存不足、应用获取不到可用内存、OOM错误等问题时,还是更应该去分析应用方面的原因,如用户量太大导致内存不足、发生应用内存溢出等情况,否则,清空buffer,强制腾出free的大小,可能只是把问题给暂时屏蔽了。


我觉得,排除内存不足的情况外,除非是在软件开发阶段,需要临时清掉buffer,以判断应用的内存使用情况;或应用已经不再提供支持,即使应用对内存的时候确实有问题,而且无法避免的情况下,才考虑定时清空buffer。(可惜,这样的应用通常都是运行在老的操作系统版本上,上面的操作也解决不了)。

 

测试

[[email protected] ~]# uname -a
Linux testserver 2.6.18-164.el5 #1 SMP Thu Sep 3 03:28:30 EDT 2009 x86_64 x86_64 x86_64 GNU/Linux


[[email protected] ~]# free -m
             total       used       free     shared    buffers     cached
Mem:          2013       1661        352          0        223       1206
-/+ buffers/cache:        231       1782
Swap:         2047          0       2047


[[email protected] ~]# sync
[[email protected] ~]# sync
[[email protected] ~]# cat /proc/sys/vm/drop_caches
0
[[email protected] ~]# echo 3 > /proc/sys/vm/drop_caches
[[email protected] ~]# cat /proc/sys/vm/drop_caches    
3
[[email protected] ~]# free -m
             total       used       free     shared    buffers     cached
Mem:          2013        100       1913          0          0         14
-/+ buffers/cache:         85       1927
Swap:         2047          0       2047
[[email protected] ~]#

 
 
 
------end-----
 
 
 
 
 
 
 
版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/wyzxg/article/details/7279986

智能推荐

2017再见:愿Rancher的答卷,不负你所望_weixin_34273479的博客-程序员宅基地

2019独角兽企业重金招聘Python工程师标准>>> ...

C++判断一个数是否为回文_判断一个数是不是回文数c++语言_黑盒子Key的博客-程序员宅基地

回文:数字左右反转都相等,如101、11、222-11翻转为11- ,不是回文 #include<iostream>using namespace std;//判断n是否为回文数bool symm(unsigned n){ unsigned i = n; unsigned m = 0; while (i > 0) { m ...

GAMES101 作业0_games101作业0答案_口袋乾坤的博客-程序员宅基地

题目给定一个点P=(2,1)P=(2,1)P=(2,1),将该点绕原点先逆时针旋转45∘45^{\circ}45∘,再平移(1,2)(1,2)(1,2),计算出变换后点的坐标(要求用齐次坐标进行计算)。代码​#include <cmath>#include <eigen3/Eigen/Core>#include <eigen3/Eigen/Dense>#include <iostream>int main() { // Transfor

第一次运行maven项目,mvn compile命令报错_FK990120的博客-程序员宅基地

问题详细情况No compiler is provided in this environment. Perhaps you are running on a JRE rather than a JDK? 此环境中未提供编译器。也许您运行的是JRE而不是JDK?问题原因jid环境变量配置有误问题解决步骤更改jdk环境变量配置(去掉\bin)...

NYOJ12 喷水装置(二)【贪心】_长风Qiu的博客-程序员宅基地

喷水装置(二) 时间限制:3000 ms | 内存限制:65535 KB 难度:4 描述 有一块草坪,横向长w,纵向长为h,在它的橫向中心线上不同位置处装有n(n<=10000)个点状的喷水装置,每个喷水装置i喷水的效果是让以它为中心半径为Ri的圆都被润湿。请在给出的喷水装置中选择尽量少的喷水装置,把整个草坪全部润湿。 输入 第一行输入一个正整数N表示共有n次测试数据。 每一组测试

955 不加班的公司名单:955.WLB_GitHubDaily的博客-程序员宅基地

公众号关注“GitHubDaily”设为 “星标”,每天带你逛 GitHub!编辑:Amusi作者:formulahendry(Jun Han)2020 届(2019 年)秋招落下帷幕...

随便推点

Feign调用服务Headers传参问题_"feign支持 入参, @requestheader(\"authorization\") htt_猹里。的博客-程序员宅基地

在使用springcloud中经常会出现个服务调用,一般情况下会在Headers加上token的验证,那么在feign调用时候我们怎么去传这个token过去呢,有人会用@Headers这个注解来实现。但是这样方法太多笨重。我们可以使用RequestInterceptor 来实现。附上代码 import feign.RequestInterceptor; import feign.Request...

【报告分享】2021年中国薪税服务行业研究报告-艾瑞咨询(附下载)_行业报告智库的博客-程序员宅基地

摘要:随着企业业务发展、人员规模扩张和税制改革推进,薪税处理和部门间的协同逐渐变得困难且低效,促使企业寻求更专业化的薪税外包服务,或应用更便捷高效的薪税管理产品。本报告将从标准用工关系和灵活用工关系两个赛道,对企业和劳动者当前存在的薪税处理痛点,以及各市场参与方提供的不同类型产品进行梳理,进行市场规模的推算和未来趋势的展望。来源:艾瑞咨询如需查看完整报告和报告下载或了解更多,公众号:行业报告智库...

吃鸡过后末日题材成新宠?6月末日新游扎堆,绝不只是代号:生机_cdjiehua的博客-程序员宅基地

继吃鸡题材风潮过后,末日题材游戏成为新宠,虽然有明日之后跟黎明生机(代号:Z)这样的国产末日手游在前,但是由于明日之后的肝氪和优化问题、黎明生机的游戏画质和操作问题,并没有带来诸如王者荣耀跟刺激战场一样的现象级火爆。接下来除了看起来似乎离上线遥遥无期的方舟:生存进化手游,其他末日游戏都在6月有了新动态,一起来看看吧:1、《代号:生机》6月10日已开启小规模测试?据...

Python:Turtle图形绘制_斜螺旋线python_荀富贵的博客-程序员宅基地

Python:Turtle图形绘制Turtle库基本绘图命令1.正方形螺旋线的绘制(1)利用 turtle 库绘制一个正方形螺旋线(2)绘制斜螺旋线(3)绘制彩色斜螺旋线2.经典蟒蛇的绘制(1)turtle库绘制蟒蛇(2)绘制彩色蟒蛇3.绘制奥运五环图Turtle库Turtle 库是 Python 语言中一个很流行的绘制图像的函数库,想象一个小乌龟,在一个横轴为 x、纵轴为 y 的坐标系原点,...

学完 C 语言应该后学什么?_学完c语言后再学啥_人邮异步社区的博客-程序员宅基地

如果想了解更多C语言和编程方面的知识,下面提供的资料会对你有所帮助。在线资源C程序员帮助建立了互联网,而互联网可以帮助你学习C。互联网时刻都在发展、变化,这里所列的资源只是在撰写本书时可用的资源。当然,你可以在互联网中找到其他资源。如果有一些与C语言相关的问题或只是想扩展你的知识,可以浏览C FAQ(常见问题解答)的站点:http://c-faq.com但是,这个站点的内容主要涵盖到C89。如果对C库有疑问,可以访问这个站点获得信息:www.acm.uiuc.edu/webmonk

DIV实现简易漂浮层放置分页信息_常乐_smile的博客-程序员宅基地

DIV实现简易漂浮层:固定分页和操作按钮在页面位置 table, th, td { border: 1px solid blue; border-collapse:collapse; } .div2{ position:absolute; left:20px; top:60%; height:50px; width:350px; } .div1{ p

推荐文章

热门文章

相关标签