摘要:發(fā)現(xiàn)問(wèn)題之后,相應(yīng)的解決方法也很簡(jiǎn)單把當(dāng)前目錄的擁有者賦值給,再啟動(dòng)容器就一切正常了。這時(shí)我們已經(jīng)可以知道容器的本地?cái)?shù)據(jù)卷中文件目錄的權(quán)限是和宿主機(jī)上一致的,只是在容器和宿主機(jī)中可能映射為不同的用戶(hù)組名稱(chēng)。
Volume數(shù)據(jù)卷是Docker的一個(gè)重要概念。數(shù)據(jù)卷是可供一個(gè)或多個(gè)容器使用的特殊目錄,可以為容器應(yīng)用存儲(chǔ)提供有價(jià)值的特性:
持久化數(shù)據(jù)與容器的生命周期解耦:在容器刪除之后數(shù)據(jù)卷中的內(nèi)容可以保持。Docker 1.9之后引進(jìn)的named volume(命名文件卷)可以更加方便地管理數(shù)據(jù)卷的生命周期;數(shù)據(jù)卷可以被獨(dú)立地創(chuàng)建和刪除。 數(shù)據(jù)卷可以用于實(shí)現(xiàn)容器之間的數(shù)據(jù)共享 可以支持不同類(lèi)型的數(shù)據(jù)存儲(chǔ)實(shí)現(xiàn)
Docker缺省提供了對(duì)宿主機(jī)本地文件卷的支持,可以將宿主機(jī)的目錄掛載到容器之中。由于沒(méi)有容器分層文件系統(tǒng)帶來(lái)的性能損失,本地文件卷非常適合一些需要高性能數(shù)據(jù)訪(fǎng)問(wèn)的場(chǎng)景,比如MySQL的數(shù)據(jù)庫(kù)文件的存儲(chǔ)。同時(shí)Docker支持通過(guò)volume plugin實(shí)現(xiàn)不同類(lèi)型的數(shù)據(jù)卷,可以更加靈活解決不同應(yīng)用負(fù)載的存儲(chǔ)需求。比如在阿里云容器服務(wù)中可以為容器提供基于云盤(pán)的塊存儲(chǔ)、基于OSSFS和NAS/NFS的共享文件存儲(chǔ)。
然而Docker數(shù)據(jù)卷的權(quán)限管理經(jīng)常是非常令人困惑的。本文將結(jié)合實(shí)例給大家介紹Docker數(shù)據(jù)卷權(quán)限管理中的常見(jiàn)問(wèn)題和解決方法。
從Jenkins掛載本地?cái)?shù)據(jù)卷錯(cuò)誤談起
最近的一個(gè)同事在利用容器運(yùn)行Jenkins時(shí)遇到一個(gè)問(wèn)題,其復(fù)現(xiàn)步驟如下:
注:如果是Windows/Mac需要登錄到Boot2docker虛擬機(jī)之上,而Linux無(wú)需如此。
注:如果是Windows/Mac需要登錄到Boot2docker虛擬機(jī)之上,而Linux無(wú)需如此。
docker-machine ssh default
啟動(dòng)Jenkins官方鏡像,并檢查日志
docker run -d -p 8080:8080 -p 50000:50000 --name jenkins jenkins docker logs jenkins
我們可以發(fā)現(xiàn)"jenkins"容器日志顯示結(jié)果一切正常
然而為了持久化Jenkins配置數(shù)據(jù),當(dāng)我們把宿主機(jī)當(dāng)前目錄下的data文件夾掛載到容器中的目錄"/var/jenkins_home"的時(shí)候,問(wèn)題出現(xiàn)了:
docker rm -f jenkins
docker run -d -p 8080:8080 -p 50000:50000 -v $(pwd)/data:/var/jenkins_home --name jenkins jenkins
docker logs jenkins
錯(cuò)誤日志如下
touch: cannot touch ‘/var/jenkins_home/copy_reference_file.log’: Permission denied
Can not write to /var/jenkins_home/copy_reference_file.log. Wrong volume permissions?
這是神馬情況?
我們檢查一下之前啟動(dòng)方式的"/var/jenkins_home"目錄權(quán)限,查看Jenkins容器的當(dāng)前用戶(hù): 當(dāng)前用戶(hù)是"jenkins"而且"/var/jenkins_home"目錄是屬于jenkins用戶(hù)擁有的
docker@default:~$ docker run -ti --rm --entrypoint="/bin/bash" jenkins -c "whoami && id" jenkins uid=1000(jenkins) gid=1000(jenkins) groups=1000(jenkins) docker@default:~$ docker run -ti --rm --entrypoint="/bin/bash" jenkins -c "ls -la /var/jenkins_home" total 20 drwxr-xr-x 2 jenkins jenkins 4096 Jun 5 08:39 . drwxr-xr-x 28 root root 4096 May 24 16:43 .. -rw-r--r-- 1 jenkins jenkins 220 Nov 12 2014 .bash_logout -rw-r--r-- 1 jenkins jenkins 3515 Nov 12 2014 .bashrc -rw-r--r-- 1 jenkins jenkins 675 Nov 12 2014 .profile
而當(dāng)映射本地?cái)?shù)據(jù)卷時(shí),/var/jenkins_home目錄的擁有者變成了root用戶(hù)
docker run -ti --rm -v $(pwd)/data:/var/jenkins_home --entrypoint="/bin/bash" jenkins -c "ls -la /var/jenkins_home" total 4 drwxr-sr-x 2 root staff 40 Jun 5 08:32 . drwxr-xr-x 28 root root 4096 May 24 16:43 ..
這就解釋了為什么當(dāng)"jenkins"用戶(hù)的進(jìn)程訪(fǎng)問(wèn)"/var/jenkins_home"目錄時(shí),會(huì)出現(xiàn) Permission denied 的問(wèn)題
我們?cè)贆z查一下宿主機(jī)上的數(shù)據(jù)卷目錄,當(dāng)前路徑下"data"目錄的擁有者是"root",這是因?yàn)檫@個(gè)目錄是Docker進(jìn)程缺省創(chuàng)建出來(lái)的。
docker@default:~$ ls -la data total 0 drwxr-sr-x 2 root staff 40 Jun 5 08:32 ./ drwxr-sr-x 5 docker staff 160 Jun 5 08:32 ../
發(fā)現(xiàn)問(wèn)題之后,相應(yīng)的解決方法也很簡(jiǎn)單:把當(dāng)前目錄的擁有者賦值給uid 1000,再啟動(dòng)"jenkins"容器就一切正常了。
sudo chown -R 1000 data docker start jenkins
這時(shí)利用瀏覽器訪(fǎng)問(wèn) "http://192.168.99.100:8080/" 就可以看到Jenkins的Web界面了。注:如無(wú)法訪(fǎng)問(wèn),可能需要通過(guò)docker-machine ip命令獲得當(dāng)前Docker宿主機(jī)的IP地址。
當(dāng)我們?cè)龠M(jìn)入容器內(nèi)部查看"/var/jenkins_home"目錄的權(quán)限,其擁有者已經(jīng)變成 "jenkins"
docker@default:~$ docker exec jenkins ls -la /var/jenkins_home total 24 drwxr-sr-x 11 jenkins staff 340 Jun 5 09:00 . drwxr-xr-x 28 root root 4096 May 24 16:43 .. drwxr-sr-x 3 jenkins staff 60 Jun 5 08:59 .java -rw-r--r-- 1 jenkins staff 289 Jun 5 08:59 copy_reference_file.log ...
而有趣的是在宿主機(jī)上我們看到的 "data"目錄的擁有者是"docker",這是因?yàn)?docker"用戶(hù)在"boot2docker"宿主機(jī)上的uid也是"1000"。
docker@default:~$ ls -la data total 20 drwxr-sr-x 2 docker staff 40 Jun 5 11:55 ./ drwxr-sr-x 6 docker staff 180 Jun 5 11:55 ../ ...
這時(shí)我們已經(jīng)可以知道:容器的本地?cái)?shù)據(jù)卷中文件/目錄的權(quán)限是和宿主機(jī)上一致的,只是uid/gid在Docker容器和宿主機(jī)中可能映射為不同的用戶(hù)/組名稱(chēng)。
在上文,我們使用了一個(gè)常見(jiàn)的技巧,即在宿主機(jī)上執(zhí)行chown命令時(shí)采用了uid而不是具體的用戶(hù)名,這樣就可以保證設(shè)置正確的擁有者。
問(wèn)題雖然解決了,但思考并沒(méi)有結(jié)束。因?yàn)楫?dāng)使用本地?cái)?shù)據(jù)卷時(shí),Jenkins容器會(huì)依賴(lài)宿主機(jī)目錄權(quán)限的正確性,這會(huì)給自動(dòng)化部署帶來(lái)額外的工作。有沒(méi)有方法讓Jenkins容器為數(shù)據(jù)卷自動(dòng)地設(shè)置正確的權(quán)限呢?這個(gè)問(wèn)題對(duì)很多以non-root方式運(yùn)行的應(yīng)用也都有借鑒意義。
為non-root應(yīng)用正確地掛載本地?cái)?shù)據(jù)卷
我們可以從萬(wàn)能的stackoverflow.com找到很多相關(guān)的討論,其中一個(gè)非常有借鑒意義問(wèn)答如下
http://stackoverflow.com/ques...
其中的基本思路有兩個(gè):
一個(gè)是利用Data Container的方法在容器間共享數(shù)據(jù)卷。這樣就規(guī)避了解決宿主機(jī)上數(shù)據(jù)卷的權(quán)限問(wèn)題。由于在1.9版本之后,Docker提供了named volume來(lái)取代純數(shù)據(jù)容器,我們還需要真正地解決這個(gè)問(wèn)題。
另外一個(gè)思路就是讓容器中以root用戶(hù)啟動(dòng),在容器啟動(dòng)腳本中利用"chown"命令來(lái)修正數(shù)據(jù)卷文件權(quán)限,之后切換到non-root用戶(hù)來(lái)執(zhí)行程序
我們來(lái)參照第二個(gè)思路來(lái)解決這個(gè)問(wèn)題
下面是一個(gè)基于Jenkins鏡像的Dockerfile:它會(huì)切換到"root"用戶(hù)并在鏡像中添加"gosu"命令,和新的入口點(diǎn)"/entrypoint.sh"
FROM jenkins:latest USER root RUN GOSU_SHA=5ec5d23079e94aea5f7ed92ee8a1a34bbf64c2d4053dadf383992908a2f9dc8a && curl -sSL -o /usr/local/bin/gosu "https://github.com/tianon/gosu/releases/download/1.9/gosu-$(dpkg --print-architecture)" && chmod +x /usr/local/bin/gosu && echo "$GOSU_SHA /usr/local/bin/gosu" | sha256sum -c - COPY entrypoint.sh /entrypoint.sh ENTRYPOINT ["/entrypoint.sh"]
注釋?zhuān)篻osu 是經(jīng)常出現(xiàn)在官方Docker鏡像中的一個(gè)小工具。它是"su"和"sudo"命令的輕量級(jí)替代品,并解決了它們?cè)趖ty和信號(hào)傳遞中的一些問(wèn)題。
新入口點(diǎn)的"entrypoint.sh"的內(nèi)容如下:它會(huì)為"JENKINS_HOME"目錄設(shè)置"jenkins"的擁有權(quán)限,并且再利用"gosu"命令切換到"jenkins"用戶(hù)來(lái)執(zhí)行"jenkins"應(yīng)用。
#! /bin/bash set -e chown -R 1000 "$JENKINS_HOME" exec gosu jenkins /bin/tini -- /usr/local/bin/jenkins.sh
您可以直接從 https://github.com/denverdino... 獲得相關(guān)代碼,并構(gòu)建自己的Jenkins鏡像。執(zhí)行命令如下:
git clone https://github.com/AliyunContainerService/docker-jenkins cd docker-jenkins/jenkins docker build -t denverdino/jenkins .
然后基于新鏡像啟動(dòng)Jenkins容器
docker rm -f jenkins docker run -d -p 8080:8080 -p 50000:50000 -v $(pwd)/data:/var/jenkins_home --name jenkins denverdino/jenkins
總結(jié)
本文介紹了Docker數(shù)據(jù)卷的基本概念。針對(duì)non-root進(jìn)程訪(fǎng)問(wèn)本地?cái)?shù)據(jù)卷出現(xiàn)的權(quán)限問(wèn)題,我們給出了一個(gè)解決方案。我們計(jì)劃在未來(lái)為大家繼續(xù)總結(jié)在Docker數(shù)據(jù)卷上遇到的一些其他問(wèn)題,
文章版權(quán)歸作者所有,未經(jīng)允許請(qǐng)勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉(zhuǎn)載請(qǐng)注明本文地址:http://systransis.cn/yun/26743.html
摘要:正式上線(xiàn)已經(jīng)大約兩年,基本已經(jīng)成熟,為宜信大數(shù)據(jù)創(chuàng)新中心各個(gè)團(tuán)隊(duì)提供了統(tǒng)一的測(cè)試和生產(chǎn)環(huán)境,簡(jiǎn)化了服務(wù)的部署與上線(xiàn)流程,也降低了運(yùn)維人員對(duì)系統(tǒng)管理的復(fù)雜度。地址白皮書(shū)原文發(fā)布于高可用架構(gòu)作者宜信大數(shù)據(jù)創(chuàng)新中心團(tuán)隊(duì)王超一 一、基于Docker的PaaS平臺(tái)LAIN 在金融的場(chǎng)景下,LAIN 是為解放各個(gè)團(tuán)隊(duì)和業(yè)務(wù)線(xiàn)的生產(chǎn)力而設(shè)計(jì)的一個(gè)云平臺(tái)。LAIN 正式上線(xiàn)已經(jīng)大約兩年,基本已經(jīng)成熟,...
摘要:前言容器技術(shù)中最核心的一個(gè)技術(shù)點(diǎn)是分層存儲(chǔ)。當(dāng)容器運(yùn)行在進(jìn)程隔離模式下時(shí),在容器內(nèi)使用進(jìn)程相關(guān)賬號(hào)進(jìn)行操作。掛載好并指定盤(pán)符后就可以在在容器內(nèi)開(kāi)始使用掛載的存儲(chǔ)卷了。 前言 容器技術(shù)中最核心的一個(gè)技術(shù)點(diǎn)是分層存儲(chǔ)。在Linux下相關(guān)文件默認(rèn)被存放在/var/lib/docker下,而在Windows 10下安裝Docker for Windows 后默認(rèn)的存儲(chǔ)文件被放在 C:Progr...
閱讀 2025·2019-08-30 15:52
閱讀 2987·2019-08-29 16:09
閱讀 1333·2019-08-28 18:30
閱讀 2459·2019-08-26 12:24
閱讀 1106·2019-08-26 12:12
閱讀 2280·2019-08-26 10:45
閱讀 578·2019-08-23 17:52
閱讀 836·2019-08-23 16:03