原文鏈接:https://blog.csdn.net/qq_41958579/article/details/107927140
Docker是一種相對(duì)使用較簡(jiǎn)單的容器,我們可以通過以下幾種方式獲取信息:
1、通過docker run執(zhí)行命令,或許返回信息
2、通過docker logs 去獲取日志,做有針對(duì)性的篩選
3、通過systemctl status docker查看docker服務(wù)狀態(tài)
4、通過journalctl -u docker.service 查看日志
以下是整理的docker容器類問題故障,分為9個(gè)類
一、啟動(dòng)類故障
1、docker: Cannot connect to the Docker daemon at unix:///var/run/docker.sock. Is the docker daemon running
原因:Docker未正常啟動(dòng)
解決方式:
systemctl start docker
2、can’t create unix socket /var/run/docker.sock: is a directory
原因:docker.sock不能創(chuàng)建
解決方式:
rm -rf /var/run/docker.sock
然后重新啟動(dòng)docker
3、Job for docker.service failed. Failed to start Docker Application
原因:Selinux引起
解決方式:
/etc/sysconfig/selinux , 把 selinux 值改為disabled
重啟docker解決
4、docker: Error response from daemon:
/var/lib/docker/overlay/XXXXXXXXXXXXXXXXXXXXXXX: no such file or directory.
原因:docker沒有指定目錄或文件
解決方式:
systemctl stop docker
rm -rf /var/lib/docker/*
systemctl start docker
重啟run鏡像啟動(dòng)容器
5、docker: Error response from daemon: Conflict. The container name “XXX” is already in use by container “XXX”. You have to remove (or rename) that container to be able to reuse that name.
原因:docker name重名
解決方式:
改名容器或者刪除重建容器
6、Error: Connection activation failed: No suitable device found for this connection
原因:網(wǎng)卡配置問題
解決方式:
重啟網(wǎng)卡
7、系統(tǒng)重啟后docker無法啟動(dòng)
報(bào)錯(cuò)為:docker0: iptables: No chain/target/match by that name
原因:docker服務(wù)iptables問題
解決方式:
重啟docker服務(wù)
system restart docker
8、Error starting daemon: error initializing graphdriver: driver not supported
使用overlay2存儲(chǔ)驅(qū)動(dòng)啟動(dòng)docker daemon報(bào)錯(cuò)
原因:daemon缺少配置
解決方式:
添加配置:
/etc/docker/daemon.json
{“storage-driver”: “overlay2”,
“storage-opts”: [“overlay2.override_kernel_check=true”]}
9、Failed to start docker.service: Unit docker.service is masked.
未知原因:docker 被mask
解決方式:
systemctl unmask docker.service
systemctl unmask docker.socket
systemctl start docker.service
10、Failed to start docker.service: Unit is not loaded properly: Invalid argument.
未知原因:docker服務(wù)無法正常load
解決方式:
卸載docker, 刪除docker.service
重新安裝docker
11、docker-compose啟動(dòng)容器時(shí)報(bào)錯(cuò):
/usr/lib/python2.7/site-packages/requests/init.py:80: RequestsDependencyWarning: urllib3 (1.22) or chardet (2.2.1) doesn’t match a supported version! RequestsDependencyWarning)
未知原因:pip相應(yīng)組件版本不支持
解決方式:
pip uninstall urllib3
pip uninstall chardet
pip install requests
12、docker容器重啟故障
強(qiáng)殺docker進(jìn)程后,重啟docker。docker中的容器無法啟動(dòng)并報(bào)錯(cuò)
docker restart XXXXXXX Error response from daemon: Cannot restart container XXXXXXX: container “XXXXXXXXXXXXXXXX”: already exists
原因:舊容器未安全退出
解決方式:
docker-containerd-ctr --address /run/docker/containerd/docker-containerd.sock --namespace c rm <容器hash_id>
docker start 容器
13、docker重啟錯(cuò)誤-重啟命令一直卡住
systemctl restart docker 卡住
未知原因:可能是啟動(dòng)的容器數(shù)量過多,或者磁盤IO問題
解決方式:
systemctl start docker-cleanup.service
systemctl start docker
二、權(quán)限問題報(bào)錯(cuò)
14、Got permission denied while trying to connect to the Docker daemon socket at unix:///var/run/docker.sock
解決方式:
查看 /var/run/docker.sock所在用戶組
將用戶重新加入docker組中,usermod -aG docker ${USER}
15、chown socket at step GROUP: No such process
原因:docker無法找到Group組信息,docker組有可能被誤刪除,
解決方式:
groupadd docker
16、Post http:///var/run/docker.sock/v1.XXX /auth: dial unix /var/run/docker.sock: permission denied. Are you trying to connect to a TLS-enabled daemon without TLS
原因:非Root用戶管理Docker時(shí),權(quán)限不足
解決方式:
groupadd docker
usermod -a -G docker user
17、docker commit鏡像時(shí)報(bào)錯(cuò)
Error processing tar file(exit status 1): unexpected EOF
原因:可能是權(quán)限問題引起
解決方式:
chmod +x 加一個(gè)執(zhí)行權(quán)限
三、鏡像和倉庫問題報(bào)錯(cuò)
18、Get https://registry-1.docker.io/v2/: dial tcp: lookup registry-1.docker.io
原因:Docker倉庫無法訪問
解決方式:
修改Docker倉庫源為國(guó)內(nèi)或者自建的倉庫源
修改/etc/docker/daemon.json
19、推送本地鏡像報(bào)錯(cuò)
The push refers to a repository [XXXX] Get https://xxx/v1/_ping: http: server gave HTTP response to HTTPS client
原因:docker registry未采用https服務(wù)所致
解決方式:
/etc/docker/daemon.json 文件寫入:
{ “insecure-registries”:[“”] }
20、/usr/bin/docker-current: Error response from daemon: oci runtime error: container_linux.go: starting container process caused “exec: “/bin/bash”: executable file not found in $PATH”.
原因:Docker鏡像自身問題或者Docker引擎版本比較低導(dǎo)致
解決方式:
可以升級(jí)Docker版本服務(wù)
21、構(gòu)建鏡像,執(zhí)行chown -R非常慢
原因:Docker使用寫時(shí)復(fù)制策略,所以chown命令執(zhí)行時(shí),會(huì)將上層鏡像文件全部復(fù)制到當(dāng)前層,然后再修改權(quán)限,再寫入文件系統(tǒng)。
解決方式:
不應(yīng)該使用chown -R 這類大批量修改文件的命令
22、docker build構(gòu)建鏡像的時(shí)候報(bào)錯(cuò):
Message from syslogd kernel:unregister_netdevice: waiting for lo to become free. Usage count = 1
原因:docker engine版本過高
解決方式:
docker engine版本需要和docker內(nèi)部鏡像的內(nèi)核版本匹配
23、docker: Error response from daemon: containerd: container did not start before the specified time-out.ERRO[0133] error getting events from daemon: context canceled
原因:修改完docker root dir,重啟后,下載鏡像報(bào)錯(cuò)
解決方式:
重啟docker服務(wù)
或者重啟服務(wù)器
四、資源問題報(bào)錯(cuò)
25、Docker no space left on device
原因:空間不足
解決方式:清理空間,刪除未被使用的容器,鏡像等資源
docker system prune -a
26、/var/lib/docker/containers 占用過大
原因:日志文件占用過大
解決方式:
cat /dev/null > *-json.log
或者
增加dockerd啟動(dòng)參數(shù),/etc/docker/daemon.json
{“l(fā)og-driver”:“json-file”,
“l(fā)og-opts”: {“max-size”:“2G”, “max-file”:“10”}
27、max virtual memory areas vm.max_map_count [65530] is too low, increase to at least [262144]
原因:系統(tǒng)參數(shù)默認(rèn)配置過小
解決方式:
修改/etc/sysctl.conf里面的vm.max_map_count 調(diào)大
28、Got starting container process caused “process_linux.go:301:
running exec setns process for init caused “exit status 40””: unknown.
from time to time
原因:可能是cache問題引起
解決方式:
echo 1 > /proc/sys/vm/drop_caches
29、docker本機(jī)啟動(dòng)多臺(tái)容器導(dǎo)致出現(xiàn)后續(xù)容器啟動(dòng)失敗
原因:查看硬盤空間是否滿,如果不是硬盤空間問題引起
解決方式:
vim /etc/sysctl.conf
添加參數(shù) fs.aio-max-nr = 1048576
sysctl -p
30、Docker啟動(dòng)異常,狀態(tài)反復(fù)restarting
Docker logs 容器名,查看異常日志
查看/var/log/messages
原因:內(nèi)存跑滿,引起OOM
解決方式:
釋放內(nèi)存后,再啟動(dòng)容器
五、版本不兼容報(bào)錯(cuò)
31、overlayfs: Can’t delete file moved from base layer to newly created dir even on ext4
原因:Centos 提供的文件系統(tǒng) XFS 和 Overlay 兼容問題導(dǎo)致,
解決方式:
這個(gè)問題的修復(fù)在內(nèi)核 4.4.6以上
32、docker: Error response from daemon: OCI runtime create failed: container_linux.go:344: starting container process caused “process_linux.go:297: getting the final child’s pid from pipe caused “read init-p: connection reset by peer””: unknown.
原因:Docker版本和操作系統(tǒng)版本不匹配
解決方式:
重新安裝和操作系統(tǒng)內(nèi)核支持的docker 版本
六、網(wǎng)絡(luò)或端口問題報(bào)錯(cuò)
33、WARNING: IPv4 forwarding is disabled. Networking will not work.
原因:ipv4網(wǎng)絡(luò)無法轉(zhuǎn)發(fā)
解決方式:
/usr/lib/sysctl.d/00-system.conf 在最后一行添加net.ipv4.ip_forward=1
重啟network服務(wù)。刪除錯(cuò)誤的容器,再次創(chuàng)建新容器
34、Creating network “xxxxxxx” with the default driver
原因:docker網(wǎng)關(guān)沖突
啟動(dòng)容器、docker-compose啟動(dòng)容器后,斷網(wǎng)問題
解決方式:
配置 docker-compose.yml內(nèi)給啟動(dòng)的容器配置參數(shù)network_mode: “bridge”
35、Unable to find a node that satisfies the following conditions [port xxxx]
原因:當(dāng)容器使用端口映射(docker run -p xxxx:xxxx或 compose模板中的
ports)之后 系統(tǒng)會(huì)在宿主機(jī)上創(chuàng)建一個(gè)port,通過NAT來訪問容器的指定port。如果宿主機(jī)上的端口被容器或者系統(tǒng)進(jìn)程占用,就會(huì)導(dǎo)致端口分配失敗。
解決方式:
清除占用端口的容器或者進(jìn)程,或調(diào)整容器端口映射的宿主機(jī)端口避免沖突
36、Error response from daemon: service endpoint with name xxx already
原因:端口已經(jīng)被占用
解決方式:
重啟docker容器
37、docker: Error response from daemon: driver failed programming external connectivity on endpoint XXXXX: Bind for 0.0.0.0:80 failed: port is already allocated
原因:容器端口沖突
解決方式:
更換宿主機(jī)綁定端口
七、Docker安裝報(bào)錯(cuò)
38、安裝docker報(bào)Requires: container-selinux >= 2.9
原因:container-selinux版本低或者是沒安裝的原因
解決方式:
wget -O /etc/yum.repos.d/CentOS-Base.repo
http://mirrors.aliyun.com/repo/Centos-7.repo
yum install epel-release
yum makecache
yum install container-selinux
39、安裝docker-compose時(shí)報(bào)錯(cuò) “ImportError: ‘module’ object has no attribute ‘check_specifier’”
原因:setuptools版本問題
解決方式:
升級(jí)setuptools到30.1.0版本以上版本
pip install --upgrade setuptools
40、安裝docker-compose時(shí)報(bào)錯(cuò)
DEPRECATION: Python 2.7 will reach the end of its life on January 1st, 2020. Please upgrade your Python as Python 2.7 won’t be maintained after that date. A future version of pip will drop support for Python 2.7.
原因:python2.7提示升級(jí)
解決方式:
pip install -i https://pypi.douban.com/simple docker-compose
八、Docker刪除報(bào)錯(cuò)
41、docker刪除容器報(bào)錯(cuò)
Error response from daemon:Driver overlay failed to remove root filesystem xxxxx: remove/var/lib/docker/overlay2/xxxxx/merged: device or resource busy
原因:容器掛載數(shù)據(jù)卷,無法直接刪除
解決方式:
grep docker /proc/*/mountinfo | grep xxxxx
kill進(jìn)程后,再重新刪除容器
42、狀態(tài)dead的容器刪除報(bào)錯(cuò)
Error response from daemon: Driver aufs failed to remove root filesystem XXXXXXXXXXXXXXXX: aufs: unmount error after retries: /var/lib/docker/aufs/mnt/xxxxxxxx: device or resource busy
原因:dead狀態(tài)容器無法刪除,還在占用資源
解決方式:
docker rm -fv 容器id
過幾分鐘后會(huì)自動(dòng)刪除
43、docker刪除鏡像報(bào)錯(cuò)
Error response from daemon: conflict: unable to remove repository reference “XXXX” (must force) - container XXXX is using its referenced image YYYY
原因:鏡像正在被某容器使用
解決方式:需要?jiǎng)h除相關(guān)ID容器后,才能刪除鏡像
44、docker刪除鏡像報(bào)錯(cuò)
Error response from daemon: conflict: unable to delete XXXXXXXXXX (must be forced) - image is referenced in multiple repositories
原因:鏡像login push 了遠(yuǎn)端其他倉庫
解決方式:如果不需要此鏡像, docker rmi -f 強(qiáng)刪
45、docker刪除鏡像報(bào)錯(cuò)
Error response from daemon: conflict: unable to delete XXX (cannot be forced) - image has dependent child images
原因:存在依賴于父鏡像的子鏡像
解決方式:強(qiáng)制刪除鏡像或者批量刪除容器,再刪除鏡像
九、其他報(bào)錯(cuò)
46、docker: Error response from daemon: driver failed programming external connectivity on end-point XXXXXXX: (iptables failed: iptables --wait -t filter -A DOCKER ! -i docker0 -o docker0 -p tcp -d 172.17.0.2 --dport 8080 -j ACCEPT: iptables: No chain/target/match by that name.
原因:防火墻問題引起
解決方式:關(guān)閉防火墻,重啟docker
47、執(zhí)行docker info出現(xiàn)如下警告
WARNING: bridge-nf-call-iptables is disabled
WARNING: bridge-nf-call-ip6tables is disabled
原因:配置問題引起,需要啟用bridge-nf-call-iptables
解決方式:
vi /etc/sysctl.conf // 添加以下內(nèi)容
net.bridge.bridge-nf-call-ip6tables = 1
net.bridge.bridge-nf-call-iptables = 1
net.bridge.bridge-nf-call-arptables = 1
48、docker數(shù)據(jù)庫相關(guān)報(bào)錯(cuò)
使用Docker創(chuàng)建mysql容器閃退
Database is uninitialized and password option is not specified
解決方式:文章來源:http://www.zghlxwxcb.cn/news/detail-781875.html
docker run -d -e MYSQL_ROOT_PASSWORD=[密碼] -p 3306:3306 mysql鏡像
Docker使用規(guī)范建議
- 盡量使用最近1-2年的新的穩(wěn)定的docker版本
- 不要去安裝今年前很老的版本,大量的bug已經(jīng)被新版本更新解決掉了
- 盡量不要去創(chuàng)建非常大的鏡像,比如5G10G以上的
- 鏡像要盡量輕量化,去除不必要的軟件,數(shù)據(jù)等
- 容器內(nèi)掛載宿主機(jī)配置,使用只讀
- 容器需要-v 宿主機(jī)的配置文件,盡量使用ro只讀
- 數(shù)據(jù)要掛載宿主機(jī)物理硬盤或存儲(chǔ)節(jié)點(diǎn)上
- 不要直接在容器里run,避免容器宕機(jī)引起數(shù)據(jù)丟失
- 應(yīng)用日志一定要掛到宿主機(jī)上
- 不要直接打印到容器內(nèi),避免只能docker logs方式查看,避免去vulume目錄里查看日志
- 不要只使用latest標(biāo)簽
- Tag要有個(gè)管理標(biāo)準(zhǔn),可以根據(jù)tag查找對(duì)應(yīng)版本
- 不要使用容器ip,配置里更不能寫死(默認(rèn)172.17.0.x)
- 容器重啟后,ip很可能會(huì)變
- 盡量不要在單容器內(nèi)跑多進(jìn)程
- 容器不是虛擬機(jī),盡量做到1個(gè)容器,1個(gè)進(jìn)程
- 跨環(huán)境鏡像保持一致
- 不論是測(cè)試,UAT,生產(chǎn)環(huán)境,盡量保持同一個(gè)鏡像,不要變更,環(huán)境變更只需要變更環(huán)境變量參數(shù)做區(qū)分
- 一定監(jiān)控docker容器,即使發(fā)現(xiàn)問題
- 建議使用prometheus監(jiān)控容器
- 一定要限制docker容器的資源, 尤其是CPU、內(nèi)存、硬盤空間,甚至是網(wǎng)絡(luò)等,避免侵占宿主機(jī)的硬件資源
原文鏈接:https://blog.csdn.net/qq_41958579/article/details/107927140文章來源地址http://www.zghlxwxcb.cn/news/detail-781875.html
到了這里,關(guān)于Docker 容器常見故障排查及處理的文章就介紹完了。如果您還想了解更多內(nèi)容,請(qǐng)?jiān)谟疑辖撬阉鱐OY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章,希望大家以后多多支持TOY模板網(wǎng)!