0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線(xiàn)課程
  • 觀(guān)看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

Linux內(nèi)存機(jī)制:手動(dòng)釋放Swap、Buffer和Cache

如意 ? 來(lái)源:民工哥技術(shù)之路 ? 作者:Darren_Wen ? 2020-08-13 14:59 ? 次閱讀

一、什么是linux的內(nèi)存機(jī)制?

我們知道,直接從物理內(nèi)存讀寫(xiě)數(shù)據(jù)要比從硬盤(pán)讀寫(xiě)數(shù)據(jù)要快的多,因此,我們希望所有數(shù)據(jù)的讀取和寫(xiě)入都在內(nèi)存完成,而內(nèi)存是有限的,這樣就引出了物理內(nèi)存與虛擬內(nèi)存的概念。

物理內(nèi)存就是系統(tǒng)硬件提供的內(nèi)存大小,是真正的內(nèi)存,相對(duì)于物理內(nèi)存,在linux下還有一個(gè)虛擬內(nèi)存的概念,虛擬內(nèi)存就是為了滿(mǎn)足物理內(nèi)存的不足而提出的策略,它是利用磁盤(pán)空間虛擬出的一塊邏輯內(nèi)存,用作虛擬內(nèi)存的磁盤(pán)空間被稱(chēng)為交換空間(Swap Space)。

作為物理內(nèi)存的擴(kuò)展,linux會(huì)在物理內(nèi)存不足時(shí),使用交換分區(qū)的虛擬內(nèi)存,更詳細(xì)的說(shuō),就是內(nèi)核會(huì)將暫時(shí)不用的內(nèi)存塊信息寫(xiě)到交換空間,這樣以來(lái),物理內(nèi)存得到了釋放,這塊內(nèi)存就可以用于其它目的,當(dāng)需要用到原始的內(nèi)容時(shí),這些信息會(huì)被重新從交換空間讀入物理內(nèi)存。

Linux的內(nèi)存管理采取的是分頁(yè)存取機(jī)制,為了保證物理內(nèi)存能得到充分的利用,內(nèi)核會(huì)在適當(dāng)?shù)臅r(shí)候?qū)⑽锢韮?nèi)存中不經(jīng)常使用的數(shù)據(jù)塊自動(dòng)交換到虛擬內(nèi)存中,而將經(jīng)常使用的信息保留到物理內(nèi)存。

要深入了解linux內(nèi)存運(yùn)行機(jī)制,需要知道下面提到的幾個(gè)方面:

Linux系統(tǒng)會(huì)不時(shí)的進(jìn)行頁(yè)面交換操作,以保持盡可能多的空閑物理內(nèi)存,即使并沒(méi)有什么事情需要內(nèi)存,Linux也會(huì)交換出暫時(shí)不用的內(nèi)存頁(yè)面。這可以避免等待交換所需的時(shí)間。

Linux 進(jìn)行頁(yè)面交換是有條件的,不是所有頁(yè)面在不用時(shí)都交換到虛擬內(nèi)存,linux內(nèi)核根據(jù)”最近最經(jīng)常使用“算法,僅僅將一些不經(jīng)常使用的頁(yè)面文件交換到虛擬 內(nèi)存,有時(shí)我們會(huì)看到這么一個(gè)現(xiàn)象:linux物理內(nèi)存還有很多,但是交換空間也使用了很多。其實(shí),這并不奇怪,例如,一個(gè)占用很大內(nèi)存的進(jìn)程運(yùn)行時(shí),需 要耗費(fèi)很多內(nèi)存資源,此時(shí)就會(huì)有一些不常用頁(yè)面文件被交換到虛擬內(nèi)存中,但后來(lái)這個(gè)占用很多內(nèi)存資源的進(jìn)程結(jié)束并釋放了很多內(nèi)存時(shí),剛才被交換出去的頁(yè)面 文件并不會(huì)自動(dòng)的交換進(jìn)物理內(nèi)存,除非有這個(gè)必要,那么此刻系統(tǒng)物理內(nèi)存就會(huì)空閑很多,同時(shí)交換空間也在被使用,就出現(xiàn)了剛才所說(shuō)的現(xiàn)象了。關(guān)于這點(diǎn),不 用擔(dān)心什么,只要知道是怎么一回事就可以了。

交換空間的頁(yè)面在使用時(shí)會(huì)首先被交換到物理內(nèi)存,如果此時(shí)沒(méi)有足夠的物理內(nèi)存來(lái)容納這些頁(yè) 面,它們又會(huì)被馬上交換出去,如此以來(lái),虛擬內(nèi)存中可能沒(méi)有足夠空間來(lái)存儲(chǔ)這些交換頁(yè)面,最終會(huì)導(dǎo)致linux出現(xiàn)假死機(jī)、服務(wù)異常等問(wèn)題,linux雖 然可以在一段時(shí)間內(nèi)自行恢復(fù),但是恢復(fù)后的系統(tǒng)已經(jīng)基本不可用了。

因此,合理規(guī)劃和設(shè)計(jì)Linux內(nèi)存的使用,是非常重要的。

在Linux 操作系統(tǒng)中,當(dāng)應(yīng)用程序需要讀取文件中的數(shù)據(jù)時(shí),操作系統(tǒng)先分配一些內(nèi)存,將數(shù)據(jù)從磁盤(pán)讀入到這些內(nèi)存中,然后再將數(shù)據(jù)分發(fā)給應(yīng)用程序;當(dāng)需要往文件中寫(xiě) 數(shù)據(jù)時(shí),操作系統(tǒng)先分配內(nèi)存接收用戶(hù)數(shù)據(jù),然后再將數(shù)據(jù)從內(nèi)存寫(xiě)到磁盤(pán)上。然而,如果有大量數(shù)據(jù)需要從磁盤(pán)讀取到內(nèi)存或者由內(nèi)存寫(xiě)入磁盤(pán)時(shí),系統(tǒng)的讀寫(xiě)性 能就變得非常低下,因?yàn)闊o(wú)論是從磁盤(pán)讀數(shù)據(jù),還是寫(xiě)數(shù)據(jù)到磁盤(pán),都是一個(gè)很消耗時(shí)間和資源的過(guò)程,在這種情況下,Linux引入了buffers和 cached機(jī)制。

buffers與cached都是內(nèi)存操作,用來(lái)保存系統(tǒng)曾經(jīng)打開(kāi)過(guò)的文件以及文件屬性信息,這樣當(dāng)操作系統(tǒng)需要讀取某些文件時(shí),會(huì)首先在buffers 與cached內(nèi)存區(qū)查找,如果找到,直接讀出傳送給應(yīng)用程序,如果沒(méi)有找到需要數(shù)據(jù),才從磁盤(pán)讀取,這就是操作系統(tǒng)的緩存機(jī)制,通過(guò)緩存,大大提高了操 作系統(tǒng)的性能。但buffers與cached緩沖的內(nèi)容卻是不同的。

buffers是用來(lái)緩沖塊設(shè)備做的,它只記錄文件系統(tǒng)的元數(shù)據(jù)(metadata)以及 tracking in-flight pages,而cached是用來(lái)給文件做緩沖。更通俗一點(diǎn)說(shuō):buffers主要用來(lái)存放目錄里面有什么內(nèi)容,文件的屬性以及權(quán)限等等。而cached直接用來(lái)記憶我們打開(kāi)過(guò)的文件和程序。

為了驗(yàn)證我們的結(jié)論是否正確,可以通過(guò)vi打開(kāi)一個(gè)非常大的文件,看看cached的變化,然后再次vi這個(gè)文件,感覺(jué)一下兩次打開(kāi)的速度有何異同,是不是第二次打開(kāi)的速度明顯快于第一次呢?接著執(zhí)行下面的命令:

find / -name .conf看看buffers的值是否變化,然后重復(fù)執(zhí)行find命令,看看兩次顯示速度有何不同。

二、linux什么時(shí)候開(kāi)始使用虛擬內(nèi)存(swap)?

[root@wenwen ~]# cat /proc/sys/vm/swappiness 60

上面這個(gè)60代表物理內(nèi)存在使用40%的時(shí)候才會(huì)使用swap(參考網(wǎng)絡(luò)資料:當(dāng)剩余物理內(nèi)存低于40%(40=100-60)時(shí),開(kāi)始使用交換空間)swappiness=0的時(shí)候表示最大限度使用物理內(nèi)存,然后才是 swap空間,swappiness=100的時(shí)候表示積極的使用swap分區(qū),并且把內(nèi)存上的數(shù)據(jù)及時(shí)的搬運(yùn)到swap空間里面。

值越大表示越傾向于使用swap??梢栽O(shè)為0,這樣做并不會(huì)禁止對(duì)swap的使用,只是最大限度地降低了使用swap的可能性。

通常情況下:swap分區(qū)設(shè)置建議是內(nèi)存的兩倍 (內(nèi)存小于等于4G時(shí)),如果內(nèi)存大于4G,swap只要比內(nèi)存大就行。另外盡量的將swappiness調(diào)低,這樣系統(tǒng)的性能會(huì)更好。

B.修改swappiness參數(shù)

Linux內(nèi)存機(jī)制:手動(dòng)釋放Swap、Buffer和Cache

立即生效,重啟也可以生效。

三、怎么釋放內(nèi)存?

一般系統(tǒng)是不會(huì)自動(dòng)釋放內(nèi)存的關(guān)鍵的配置文件/proc/sys/vm/drop_caches。這個(gè)文件中記錄了緩存釋放的參數(shù),默認(rèn)值為0,也就是不釋放緩存。他的值可以為0~3之間的任意數(shù)字,代表著不同的含義:

0 – 不釋放

1 – 釋放頁(yè)緩存

2 – 釋放dentries和inodes

3 – 釋放所有緩存

實(shí)操:

很明顯多出來(lái)很多空閑的內(nèi)存了吧

四、怎么釋放swap?

前提:首先要保證內(nèi)存剩余要大于等于swap使用量,否則會(huì)宕機(jī)!根據(jù)內(nèi)存機(jī)制,swap分區(qū)一旦釋放,所有存放在swap分區(qū)的文件都會(huì)轉(zhuǎn)存到物理內(nèi)存上。通常通過(guò)重新掛載swap分區(qū)完成釋放swap。

a.查看當(dāng)前swap分區(qū)掛載在哪?b.關(guān)停這個(gè)分區(qū)c.查看狀態(tài):d.查看swap分區(qū)是否關(guān)停,最下面一行顯示全e.將swap掛載到/dev/sda5上f.查看掛載是否成功

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀(guān)點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • Linux
    +關(guān)注

    關(guān)注

    87

    文章

    11466

    瀏覽量

    212866
  • 內(nèi)存
    +關(guān)注

    關(guān)注

    8

    文章

    3110

    瀏覽量

    75015
  • SWAP
    +關(guān)注

    關(guān)注

    0

    文章

    51

    瀏覽量

    13164
  • 虛擬機(jī)
    +關(guān)注

    關(guān)注

    1

    文章

    963

    瀏覽量

    29095
  • 華秋DFM
    +關(guān)注

    關(guān)注

    20

    文章

    3503

    瀏覽量

    5275
收藏 0人收藏

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    當(dāng) ccg3pa 收到 pr_swap 命令時(shí),它不會(huì)執(zhí)行 eval_pr_swap 函數(shù),為什么?

    角色交換命令。 我在 swap.c-eval_pr_swap 函數(shù)中添加了調(diào)試 uart 消息。 但我發(fā)現(xiàn),當(dāng) ccg3pa 收到 pr_swap 命令時(shí),它不會(huì)執(zhí)行 eval_pr_swap 函數(shù),為什么?
    發(fā)表于 05-26 06:15

    HarmonyOS優(yōu)化應(yīng)用內(nèi)存占用問(wèn)題性能優(yōu)化一

    使用的數(shù)據(jù)替換為新數(shù)據(jù)。 生命周期管理:在生命周期管理中,可以釋放不再使用的系統(tǒng)資源,包括應(yīng)用內(nèi)存、監(jiān)聽(tīng)事件、網(wǎng)絡(luò)句柄等。 Purgeable Memory內(nèi)存管理機(jī)制:在該
    發(fā)表于 05-21 11:27

    SE5 ffmpeg例程內(nèi)存釋放的原因?

    行改造循環(huán)拉流。 問(wèn)題: 測(cè)試發(fā)現(xiàn),在循環(huán)開(kāi)始前先從文件讀取約29M文件后(大于34M后釋放一部分),循環(huán)(拉取一段時(shí)間后,停止,再拉?。├∫曨l流時(shí),會(huì)出現(xiàn)內(nèi)存上升問(wèn)題。 測(cè)試場(chǎng)景:解碼6路
    發(fā)表于 04-22 11:04

    Linux系統(tǒng)中通過(guò)預(yù)留物理內(nèi)存實(shí)現(xiàn)ARM與FPGA高效通信的方法

    管理子系統(tǒng)管理。因此,需要預(yù)留一部分物理內(nèi)存,使其不被內(nèi)核管理。接下來(lái)將為大家詳細(xì)介紹在 Linux 系統(tǒng)中通過(guò)預(yù)留物理內(nèi)存實(shí)現(xiàn) ARM 與 FPGA 高效通信的方法,預(yù)留物理內(nèi)存包括
    的頭像 發(fā)表于 04-16 13:42 ?560次閱讀
    <b class='flag-5'>Linux</b>系統(tǒng)中通過(guò)預(yù)留物理<b class='flag-5'>內(nèi)存</b>實(shí)現(xiàn)ARM與FPGA高效通信的方法

    使用rt_free釋放內(nèi)存時(shí)觸發(fā)了斷言怎么解決?

    代碼從循環(huán)改成回調(diào), 釋放就斷言了 內(nèi)存使用沒(méi)有問(wèn)題, 里面的內(nèi)容都好好的, 只有釋放錯(cuò)誤 這是斷言?xún)?nèi)容, 這是什么意思
    發(fā)表于 03-20 07:21

    Linux服務(wù)器卡頓救星之一招釋放Cache內(nèi)存

    為了加速操作和減少磁盤(pán)I/O,內(nèi)核通常會(huì)盡可能多地緩存內(nèi)存,這部分內(nèi)存就是Cache Memory(緩存內(nèi)存)。根據(jù)設(shè)計(jì),包含緩存數(shù)據(jù)的頁(yè)面可以按需重新用于其他用途(例如,應(yīng)用程序)。
    的頭像 發(fā)表于 01-16 10:04 ?1315次閱讀

    Linux下如何管理虛擬內(nèi)存 使用虛擬內(nèi)存時(shí)的常見(jiàn)問(wèn)題

    Linux系統(tǒng)中,虛擬內(nèi)存管理是操作系統(tǒng)內(nèi)核的一個(gè)重要功能,負(fù)責(zé)管理物理內(nèi)存和磁盤(pán)上的交換空間。以下是對(duì)Linux下如何管理虛擬內(nèi)存以及使
    的頭像 發(fā)表于 12-04 09:19 ?1244次閱讀

    C語(yǔ)言中申請(qǐng)的堆內(nèi)存能不能自動(dòng)釋放

    C語(yǔ)言中申請(qǐng)的堆內(nèi)存能不能自動(dòng)釋放?每次都要手動(dòng) free 太麻煩,也容易忘記。 學(xué)過(guò) C++ 的同學(xué),應(yīng)該首先能想到智能指針。 但是這是C語(yǔ)言,沒(méi)有類(lèi)和對(duì)象、構(gòu)造析構(gòu)這些技術(shù),想要自動(dòng)釋放
    的頭像 發(fā)表于 11-27 09:33 ?467次閱讀

    詳解linux內(nèi)核的uevent機(jī)制

    linux內(nèi)核中,uevent機(jī)制是一種內(nèi)核和用戶(hù)空間通信的機(jī)制,用于通知用戶(hù)空間應(yīng)用程序各種硬件更改或其他事件,比如插入或移除硬件設(shè)備(如USB驅(qū)動(dòng)器或網(wǎng)絡(luò)接口)。uevent表示“用戶(hù)空間
    的頭像 發(fā)表于 09-29 17:01 ?1713次閱讀

    Hot Swap外置軟啟電路設(shè)計(jì)

    電子發(fā)燒友網(wǎng)站提供《Hot Swap外置軟啟電路設(shè)計(jì).pdf》資料免費(fèi)下載
    發(fā)表于 09-27 09:41 ?0次下載
    Hot <b class='flag-5'>Swap</b>外置軟啟電路設(shè)計(jì)

    Cache內(nèi)存有什么區(qū)別

    Cache(高速緩存)和內(nèi)存(Memory,通常指主存儲(chǔ)器或RAM)是計(jì)算機(jī)存儲(chǔ)系統(tǒng)中兩個(gè)重要的組成部分,它們?cè)谟?jì)算機(jī)的性能和數(shù)據(jù)處理中扮演著不同的角色。以下是對(duì)Cache內(nèi)存之間區(qū)
    的頭像 發(fā)表于 09-26 15:28 ?3673次閱讀

    高速緩沖存儲(chǔ)器與內(nèi)存的區(qū)別

    高速緩沖存儲(chǔ)器(Cache)與內(nèi)存(Memory)在計(jì)算機(jī)體系結(jié)構(gòu)中扮演著至關(guān)重要的角色,它們之間存在顯著的區(qū)別。以下將從定義、功能、技術(shù)特點(diǎn)、作用機(jī)制等多個(gè)方面詳細(xì)闡述這兩者的區(qū)別。
    的頭像 發(fā)表于 09-10 14:12 ?3020次閱讀

    Linux內(nèi)核中的頁(yè)面分配機(jī)制

    Linux內(nèi)核中是如何分配出頁(yè)面的,如果我們站在CPU的角度去看這個(gè)問(wèn)題,CPU能分配出來(lái)的頁(yè)面是以物理頁(yè)面為單位的。也就是我們計(jì)算機(jī)中常講的分頁(yè)機(jī)制。本文就看下Linux內(nèi)核是如何管理,釋放
    的頭像 發(fā)表于 08-07 15:51 ?571次閱讀
    <b class='flag-5'>Linux</b>內(nèi)核中的頁(yè)面分配<b class='flag-5'>機(jī)制</b>

    ESP32CE MQTT斷線(xiàn)重連后內(nèi)存釋放怎么解決?

    idf v5.2.1 開(kāi)啟mqtt 連接手機(jī)wifi 然后關(guān)閉數(shù)據(jù)流量和打開(kāi)數(shù)據(jù)流量(模擬網(wǎng)絡(luò)超時(shí))esp_get_free_heap_size 獲取到的內(nèi)存越來(lái)越小 ,只有wifi重連才會(huì)釋放
    發(fā)表于 07-19 07:12

    使用espconn_set_opt設(shè)置了TCP斷開(kāi)連接后立刻釋放內(nèi)存,好像不生效,怎么解決?

    在使用espconn_set_opt設(shè)置了TCP斷開(kāi)連接后立刻釋放內(nèi)存,好像不生效。我用的是以下的設(shè)置方法: err=espconn_set_opt(conn,ESPCONN_REUSEADDR
    發(fā)表于 07-10 07:21

    電子發(fā)燒友

    中國(guó)電子工程師最喜歡的網(wǎng)站

    • 2931785位工程師會(huì)員交流學(xué)習(xí)
    • 獲取您個(gè)性化的科技前沿技術(shù)信息
    • 參加活動(dòng)獲取豐厚的禮品