docker占用磁碟太大 怎麼辦

2021-10-25 19:44:31 字數 2034 閱讀 4524

問題

docker容器日誌導致主機磁碟空間滿了。docker logs -f container_name噼里啪啦一大堆,很占用空間,不用的日誌可以清理掉了。

解決方法

2.1 找出docker容器日誌

在linux上,容器日誌一般存放在/var/lib/docker/containers/container_id/下面,檢視各個日誌檔案大小的指令碼docker_log_size.sh,內容如下:

#!/bin/sh 

echo "*****=== docker containers logs file size *****==="

logs=$(find /var/lib/docker/containers/ -name *-json.log)

for log in $logs

do

ls -lh $log

done

# chmod +x docker_log_size.sh

# ./docker_log_size.sh

2.2 清理docker容器日誌(治標)

如果docker容器正在執行,那麼使用rm -rf方式刪除日誌後,通過df -h會發現磁碟空間並沒有釋放。原因是在linux或者unix系統中,通過rm -rf或者檔案管理器刪除檔案,將會從檔案系統的目錄結構上解除鏈結(unlink)。如果檔案是被開啟的(有乙個程序正在使用),那麼程序將仍然可以讀取該檔案,磁碟空間也一直被占用。正確姿勢是cat /dev/null > *-json.log,當然你也可以通過rm -rf刪除後重啟docker。接下來,提供乙個日誌清理指令碼clean_docker_log.sh,內容如下:

#!/bin/sh 

echo "*****=== start clean docker containers logs *****==="

logs=$(find /var/lib/docker/containers/ -name *-json.log)

for log in $logs

do

echo "clean logs : $log"

cat /dev/null > $log

done

echo "*****=== end clean docker containers logs *****==="

# chmod +x clean_docker_log.sh

# ./clean_docker_log.sh

但是,這樣清理之後,隨著時間的推移,容器日誌會像雜草一樣,捲土重來。

2.3 設定docker容器日誌大小(治本)

設定乙個容器服務的日誌大小上限

上述方法,日誌檔案遲早又會漲回來。要從根本上解決問題,需要限制容器服務的日誌大小上限。這個通過配置容器docker-compose的max-size選項來實現

nginx: 

image: nginx:1.12.1

restart: always

logging:

driver: 「json-file」

options:

max-size: 「5g」

重啟nginx容器之後,其日誌檔案的大小就被限制在5gb,再也不用擔心了。

全域性設定

新建/etc/docker/daemon.json,若有就不用新建了。新增log-dirver和log-opts引數,樣例如下:

# vim /etc/docker/daemon.json

}

max-size=500m,意味著乙個容器日誌大小上限是500m,

max-file=3,意味著乙個容器有三個日誌,分別是id+.json、id+1.json、id+2.json。

// 重啟docker守護程序

# systemctl daemon-reload

# systemctl restart docker

MongoDB日誌太大怎麼辦?

mongodb的日誌增長的很快,var所在的空間馬上就佔滿了,即便換到另乙個磁碟分割槽儲存日誌,日誌還是增長的很快,磁碟眼看要告磬。有乙個好辦法,就是使用旋轉日誌。mongodb的旋轉日誌有點怪,linux下mongd服務接受乙個kill sgiusr1命令後就立刻將當前日誌檔案重新命名為帶日期的檔...

Visio檔案太大了, 怎麼辦

visio檔案隨著不斷的編輯修改會變的越來越臃腫,因為有越來越多的再也不需要在圖中出現的masters,styles,layers,fonts,colors.一般來說,這些元素對檔案尺寸的影響有限,但有時確不是這樣.從visio2007開始,就有了個新feature,叫做 remove hidden...

資料太大爆記憶體怎麼辦?

處理大型 ml 資料檔案的七種思路 1.分配更多記憶體 有的機器學習工具 庫有預設記憶體設定,比如 weka。這便是乙個限制因素。你需要檢查一下 是否能重新設定該工具 庫,分配更多記憶體。對於 weka,你可以在開啟應用時,把記憶體當作乙個引數進行調整。2.用更小的樣本 你真的需要用到全部資料嗎?可...