在K8S集群中一步步構(gòu)建一個復(fù)雜的MySQL數(shù)據(jù)庫

YancyYe 發(fā)布于2019-06-28 16:25 / 3221人閱讀

摘要：結(jié)束語本文揉合多項技術(shù)，構(gòu)建了一個復(fù)雜且可做生產(chǎn)使用的范例，當(dāng)然，此庫是單實例數(shù)據(jù)庫，倘若需構(gòu)建數(shù)據(jù)庫高可用方案，需部署如集群，其中自動作業(yè)備份范例僅使用備份，在生產(chǎn)環(huán)境不是很實用，我們需要考慮使用備份以及備份日志。

文檔說明

? 本文面向容器初學(xué)者，作者先簡單的用MySQL官方鏡像搭建一個可運行的單實例數(shù)據(jù)庫，而后考慮生產(chǎn)或現(xiàn)實需求，一步一步完善并揉合K8S多個技術(shù)，從而構(gòu)建一個復(fù)雜且可供生產(chǎn)用的MySQL單實例庫。

簡單部署

? 如下所示，我們僅需設(shè)置root用戶密碼（環(huán)境變量MYSQL_ROOT_PASSWORD），便可輕松的使用MySQL官方鏡像構(gòu)建一個MySQL數(shù)據(jù)庫。

# kubectl create -f - <
?    注意：若你的K8S集群是minishift、openshift、origin，因其為安全考慮，不允許容器以root用戶運行，而官方MySQL鏡像卻需root權(quán)限，故為使其能順利運行，我們需將anyuid scc賦予default serviceaccount：
# oc adm policy add-scc-to-user anyuid -z default
?    創(chuàng)建一Service以便集群內(nèi)外均可訪問數(shù)據(jù)庫，其中集群外需通過nodePort設(shè)置的30006端口訪問。
# kubectl create -f - <
?    接著，訪問數(shù)據(jù)庫并驗證其運行正常：
# kubectl get pod                                   # 當(dāng)前Pod名稱
NAME                     READY     STATUS    RESTARTS   AGE
mysql-5b5668c448-t44ml   1/1       Running   0          3h

# 通過本機(jī)訪問
# kubectl exec -it mysql-5b5668c448-t44ml -- mysql -uroot -pChangeme

mysql> select 1;
+---+
| 1 |
+---+
| 1 |
+---+

# 集群內(nèi)部通過mysql service訪問：
# kubectl exec -it mysql-5b5668c448-t44ml -- mysql -uroot -pChangeme -hmysql

mysql> select now();
+---------------------+
| now()               |
+---------------------+
| 2018-05-21 07:19:14 |
+---------------------+

# 集群外部，可通過任何一個K8S節(jié)點訪問數(shù)據(jù)庫：
# mysql -uroot -pChangeme -horigin-lb-01 -P30006

mysql> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| mysql              |
| performance_schema |
| sys                |
+--------------------+
擴(kuò)展部署
持久化存儲
?    若要確保MySQL重啟后數(shù)據(jù)仍然存在，我們需為其配置可持久化存儲，作者的實驗環(huán)境配置了GlusterFS分布式存儲，其支持K8S動態(tài)提供特性，故可執(zhí)行如下命令創(chuàng)建PVC：
# kubectl create -f - <
?    而后，調(diào)整Deploy并掛載卷：
    spec:
      containers:
      - image: mysql
...
        volumeMounts:
        - name: mysql-data
          mountPath: /var/lib/mysql
      volumes:
      - name: mysql-data
        persistentVolumeClaim:
          claimName: mysql
自定義配置文件
?    通過創(chuàng)建cm并掛載到容器中，我們可自定義MySQL配置文件。如下所示，名為mysql-config的cm包含一個custom.cnf文件：
apiVersion: v1
metadata:
  name: mysql-config
data:
  custom.cnf: |
        [mysqld]
        default_storage_engine=innodb
        skip_external_locking
        lower_case_table_names=1
        skip_host_cache
        skip_name_resolve
kind: ConfigMap
?    將cm掛載到容器內(nèi)：
    spec:
...
      containers:
      - image: mysql
...
        volumeMounts:
        - name: mysql-config
          mountPath: /etc/mysql/conf.d/
...
      volumes:
      - name: mysql-config
        configMap:
          name: mysql-config
...
加密銘感數(shù)據(jù)
?    用戶密碼等銘感數(shù)據(jù)以Secret加密保存，而后被Deployment通過volume掛載或環(huán)境變量引用。如本例，我們創(chuàng)建root、app 、test用戶，將3個用戶的密碼加密保存：
# echo -n Changeme | base64
Q2hhbmdlbWU=
# kubectl create -f - <
?    Secret創(chuàng)建完成后，我們將用戶明文密碼從Deployment去除，采用環(huán)境變量方式引用Secret數(shù)據(jù)，參見如下Yaml修改，做了3個調(diào)整：

鏡像初始化時自動創(chuàng)建MYSQL_DATABASE環(huán)境變量¹設(shè)置的數(shù)據(jù)庫；
鏡像初始化時將MYSQL_DATABASE數(shù)據(jù)庫賦予MYSQL_USER用戶；

root用戶及MYSQL_USER用戶，其密碼均通過secretKeyRef從secret獲取；

    spec:
...
      containers:
      - image: mysql
        name: mysql
        imagePullPolicy: IfNotPresent
        env:
        - name: MYSQL_ROOT_PASSWORD
          valueFrom:
            secretKeyRef:
              name: mysql-user-pwd
              key: mysql-root-pwd
        - name: MYSQL_PASSWORD
          valueFrom:
            secretKeyRef:
              name: mysql-user-pwd
              key: mysql-app-user-pwd
        - name: MYSQL_USER
          value: app
        - name: MYSQL_DATABASE
          value: appdb
容器健康檢查
?    K8S鏡像控制器可通過livenessProbe判斷容器是否異常，進(jìn)而決定是否重建容器；而Service服務(wù)可通過readinessProbe判斷容器服務(wù)是否正常，從而確保服務(wù)可用性。
?    本例，作者配置的livenessProbe與readinessProbe是一樣的，即連續(xù)3次查詢數(shù)據(jù)庫失敗，則定義為異常。對livenessProbe與readinessProbe詳細(xì)用法，不在本文的討論范圍內(nèi)，可參考K8S官方文檔：

Configure Liveness and Readiness Probes
Pod Lifecycle

    spec:
      containers:
      - image: mysql
...
        livenessProbe:
          exec:
            command:
            - /bin/sh
            - "-c"
            - MYSQL_PWD="${MYSQL_ROOT_PASSWORD}"
            - mysql -h 127.0.0.1 -u root -e "SELECT 1"
          initialDelaySeconds: 30
          timeoutSeconds: 5
          successThreshold: 1
          failureThreshold: 3
        readinessProbe:
          exec:
            command:
            - /bin/sh
            - "-c"
            - MYSQL_PWD="${MYSQL_ROOT_PASSWORD}"
            - mysql -h 127.0.0.1 -u root -e "SELECT 1"
          initialDelaySeconds: 10
          timeoutSeconds: 1
          successThreshold: 1
          failureThreshold: 3
...
容器初始化
假設(shè)，我們有這樣的需求：“初始部署MySQL時，其已包應(yīng)用所需的數(shù)據(jù)庫、用戶、權(quán)限、表結(jié)構(gòu)與數(shù)據(jù)”。研究MySQL官方鏡像的Dockerfile可知，數(shù)據(jù)庫初始化時將自動執(zhí)行目錄/docker-entrypoint-initdb.d內(nèi)的.sh、.sql、.sql.gz文件，鑒于此，我們可有如下兩種方法：

基于官方鏡像重新編寫Dockerfile，將腳本copy到新鏡像/docker-entrypoint-initdb.d目錄，因需編譯新鏡像，故此方法不靈活；
初始化容器（initContainers）在常規(guī)容器（containers）前運行，故在初始化容器中可將腳本拷貝到共享目錄，而后MySQL鏡像掛載此目錄到/docker-entrypoint-initdb.d，此方法靈活。

本例，作者采用初始化容器方案，功能如下：

初始化與常規(guī)容器共享名為mysql-initdb的emptyDir，均被掛載到/docker-entrypoint-initdb.d目錄；
初始化容器將.sql文件置于共享的/docker-entrypoint-initdb.d目錄，其含初始化testdb與appdb數(shù)據(jù)庫；
為了避免MySQL數(shù)據(jù)庫目錄內(nèi)的lost+found目錄被誤認(rèn)為是數(shù)據(jù)庫，初始化容器中將其刪除；

    spec:
      initContainers:
      - name: mysql-init
        image: busybox
        imagePullPolicy: IfNotPresent
        env:
        - name: MYSQL_TEST_USER_PASSWORD
          valueFrom:
            secretKeyRef:
              name: mysql-user-pwd
              key: mysql-test-user-pwd
        command:  
          - sh
          - "-c"
          - |
            set -ex
            rm -fr /var/lib/mysql/lost+found
            cat > /docker-entrypoint-initdb.d/mysql-testdb-init.sql < /docker-entrypoint-initdb.d/mysql-appdb-init.sql <
完整Deployment

?    通過如上多步調(diào)整，MySQL數(shù)據(jù)庫的Deplyment如下所示：

apiVersion: extensions/v1beta1
kind: Deployment
metadata:
  labels:
    app: mysql
  name: mysql
spec:
  replicas: 1
  selector:
    matchLabels:
      app: mysql
  template:
    metadata:
      labels:
        app: mysql
    spec:
      initContainers:
      - name: mysql-init
        image: busybox
        imagePullPolicy: IfNotPresent
        env:
        - name: MYSQL_TEST_USER_PASSWORD
          valueFrom:
            secretKeyRef:
              name: mysql-user-pwd
              key: mysql-test-user-pwd
        command:  
          - sh
          - "-c"
          - |
            set -ex
            rm -fr /var/lib/mysql/lost+found
            cat > /docker-entrypoint-initdb.d/mysql-testdb-init.sql < /docker-entrypoint-initdb.d/mysql-appdb-init.sql <
創(chuàng)建此Deployment后，我們有如下組件：
# kubectl get all,pvc,cm,secret
# MySQL Deployment：
NAME           DESIRED   CURRENT   UP-TO-DATE   AVAILABLE   AGE
deploy/mysql   1         1         1            1           1m

# RS被Deployment調(diào)用，其是自動生成的
NAME                 DESIRED   CURRENT   READY     AGE
rs/mysql-998977cdd   1         1         1         1m

# Pod：
NAME                       READY     STATUS    RESTARTS   AGE
po/mysql-998977cdd-v2ks2   1/1       Running   1          1m

# Service：
NAME              TYPE        CLUSTER-IP      EXTERNAL-IP   PORT(S)          AGE
svc/mysql         NodePort    172.30.3.200            3306:30006/TCP   8h

# Pvc：
NAME            STATUS    VOLUME     CAPACITY   ACCESS MODES STORAGECLASS      AGE
pvc/mysql       Bound     pvc-fe..   1Gi        ROX          glusterfs-raid0   2m

# Configmap：
NAME              DATA      AGE
cm/mysql-config   1         6h

# Secret：
NAME                        TYPE                                  DATA      AGE
secrets/mysql-user-pwd      Opaque                                3         1h
定期自動備份
?    考慮到數(shù)據(jù)安全性，我們定期備份數(shù)據(jù)庫，在K8S集群中，我們可配置CronJob實現(xiàn)自動備份作業(yè)。首先，創(chuàng)建一個持久化存儲供備份用：
# kubectl create -f - <
?    繼而，配置實際的自動化作業(yè)任務(wù)，如下所示，每天凌晨0點將使用mysqldump備份appdb數(shù)據(jù)庫。
# kubectl create -f - < /mysql-backup/mysql-`date +"%Y%m%d"`.sql
            volumeMounts:
            - name: mysql-backup
              mountPath: /mysql-backup
          restartPolicy: OnFailure
          volumes:
          - name: mysql-backup
            persistentVolumeClaim:
              claimName: mysql-backup
EOF
結(jié)束語
?    本文揉合K8S多項技術(shù)，構(gòu)建了一個復(fù)雜且可做生產(chǎn)使用的范例，當(dāng)然，此庫是單實例數(shù)據(jù)庫，倘若需構(gòu)建數(shù)據(jù)庫高可用方案，需部署如MySQL HA、PXC集群，其中自動作業(yè)備份范例僅使用mysqldump備份，在生產(chǎn)環(huán)境不是很實用，我們需要考慮使用xtrabackup備份以及mysqlbinlog備份日志。

 參見docker-entrypoint.sh。 ?

GPU云服務(wù)器云服務(wù)器 k8s集群管理k8s集群 k8s docker集群搭建構(gòu)建一個

文章版權(quán)歸作者所有，未經(jīng)允許請勿轉(zhuǎn)載,若此文章存在違規(guī)行為，您可以聯(lián)系管理員刪除。

轉(zhuǎn)載請注明本文地址：http://systransis.cn/yun/27304.html

發(fā)表評論

登陸后可評論

0條評論

YancyYe

男|高級講師

我要關(guān)注我要私信

TA的文章

SpartanHost美國西雅圖高防VPS補貨，20Gbps DDOS防御，$2.88美元/月起

閱讀 1139·2021-11-08 13:13
利用clear清除浮動的一些問題

閱讀 1721·2019-08-30 15:55
webkit內(nèi)核下，字號會自動放大的問題

閱讀 2772·2019-08-29 11:26
文章8：面試總結(jié)

閱讀 2439·2019-08-26 13:56
關(guān)于ajax學(xué)習(xí)筆記

閱讀 2560·2019-08-26 12:15
移動地圖時自動獲取當(dāng)前地圖中心地區(qū)

閱讀 2143·2019-08-26 11:41
好看漂亮的html5網(wǎng)頁特效學(xué)習(xí)筆記(3)_猜猜下一個顏色是什么？

閱讀 1402·2019-08-26 11:00
mongo安裝

閱讀 1540·2019-08-23 18:30

成人国产在线小视频_日韩寡妇人妻调教在线播放_色成人www永久在线观看_2018国产精品久久_亚洲欧美高清在线30p_亚洲少妇综合一区_黄色在线播放国产_亚洲另类技巧小说校园_国产主播xx日韩_a级毛片在线免费

資訊專欄INFORMATION COLUMN

上云采購季！| 2核2G4M爆款云服務(wù)器低至59元/年，更有多臺、長期優(yōu)惠，快來選購！

在K8S集群中一步步構(gòu)建一個復(fù)雜的MySQL數(shù)據(jù)庫

相關(guān)文章