MySQL備份數(shù)據(jù)存儲(chǔ)基地--對(duì)象存儲(chǔ)

IT那活兒發(fā)布于2023-01-11 13:20 / 3088人閱讀

點(diǎn)擊上方“IT那活兒”，關(guān)注后了解更多精彩內(nèi)容?。?！

對(duì)象存儲(chǔ)，也稱為基于對(duì)象的存儲(chǔ)，是一種扁平結(jié)構(gòu)，其中的文件被拆分成多個(gè)部分并散布在多個(gè)硬件間。在對(duì)象存儲(chǔ)中，數(shù)據(jù)會(huì)被分解為稱為“對(duì)象”的離散單元，并保存在單個(gè)存儲(chǔ)庫(kù)中，而不是作為文件夾中的文件或服務(wù)器上的塊來(lái)保存。對(duì)象存儲(chǔ)卷會(huì)作為模塊化單元來(lái)工作，每個(gè)卷都是一個(gè)自包含式存儲(chǔ)庫(kù)，均含有數(shù)據(jù)。允許在分布式系統(tǒng)上找到對(duì)象的唯一標(biāo)識(shí)符以及描述數(shù)據(jù)的元數(shù)據(jù)。

今天所要介紹的是一款開(kāi)源對(duì)象存儲(chǔ)產(chǎn)品-MinIO。

MinIO部署

1、概述

MinIO 是一個(gè)基于Apache License v2.0開(kāi)源協(xié)議的對(duì)象存儲(chǔ)服務(wù)。它兼容亞馬遜S3云存儲(chǔ)服務(wù)接口，非常適合于存儲(chǔ)大容量非結(jié)構(gòu)化的數(shù)據(jù)，例如圖片、視頻、日志文件、備份數(shù)據(jù)和容器/虛擬機(jī)鏡像等，而一個(gè)對(duì)象文件可以是任意大小，從幾kb到最大5T不等。

MinIO是一個(gè)非常輕量的服務(wù),可以很簡(jiǎn)單的和其他應(yīng)用的結(jié)合，類似 NodeJS, Redis 或者 MySQL。

Minio 提供了兩種部署方式：?jiǎn)螜C(jī)部署和分布式，兩種部署方式都非常簡(jiǎn)單，其中分布式部署的優(yōu)勢(shì)有：

a. 數(shù)據(jù)保護(hù)

分布式Minio采用糾刪碼來(lái)防范多個(gè)節(jié)點(diǎn)宕機(jī)和位衰減bit rot。

分布式Minio至少需要4個(gè)硬盤(pán)，使用分布式Minio自動(dòng)引入了糾刪碼功能。

b. 高可用

單機(jī)Minio服務(wù)存在單點(diǎn)故障，相反，如果是一個(gè)有N塊硬盤(pán)的分布式Minio,只要有N/2硬盤(pán)在線，你的數(shù)據(jù)就是安全的。不過(guò)你需要至少有N/2+1個(gè)硬盤(pán)來(lái)創(chuàng)建新的對(duì)象。

c. 一致性

Minio在分布式和單機(jī)模式下，所有讀寫(xiě)操作都嚴(yán)格遵守read-after-write一致性模型。

2、分布式部署

MinIO分布式部署非常簡(jiǎn)單，不需要配置文件，一個(gè)簡(jiǎn)單的命令就可以。進(jìn)行部署前，先簡(jiǎn)單介紹下MinIO中的一些術(shù)語(yǔ)：

硬盤(pán)（Drive）：即存儲(chǔ)數(shù)據(jù)的磁盤(pán)，在 MinIO 啟動(dòng)時(shí)，以參數(shù)的方式傳入。
組（ Set ）：即一組 Drive 的集合，分布式部署根據(jù)集群規(guī)模自動(dòng)劃分一個(gè)或多個(gè) Set ，每個(gè) Set 中的 Drive 分布在不同位置。一個(gè)對(duì)象存儲(chǔ)在一個(gè) Set 上。
桶（Bucket）：文件對(duì)象存儲(chǔ)的邏輯位置，對(duì)于客戶端而言，就相當(dāng)于一個(gè)存放文件的頂層文件夾。
Zone：每組server稱為一個(gè)zone，對(duì)于外部的寫(xiě)數(shù)據(jù)請(qǐng)求，minio server會(huì)首先查找可用空間多的zone，然后再在zone內(nèi)選擇set和disk drive。

a. 環(huán)境

b. 部署

方式1

##以下命令需在每臺(tái)主機(jī)上都執(zhí)行

#客戶端或節(jié)點(diǎn)間訪問(wèn)的用戶、密碼
export  MINIO_ACCESS_KEY=admin
export MINIO_SECRET_KEY=12345678

#創(chuàng)建集群
minio server http://192.168.***.***/data1 http://192.168.***.***/data2 
       http://192.168.***.***/data3 http://192.168.***.***/data4 
       http://192.168.***.***/data1 http://192.168.***.***/data2 
       http://192.168.***.***/data3 http://192.168.***.***/data4 &

集群創(chuàng)建成功后，會(huì)出現(xiàn)以下信息：

方式2

##以下命令需在每臺(tái)主機(jī)上都執(zhí)行

#客戶端或節(jié)點(diǎn)間訪問(wèn)的用戶、密碼
export MINIO_ACCESS_KEY=admin
export MINIO_SECRET_KEY=12345678

#創(chuàng)建集群 
minio server http://192.168.***.**{0...1}/data{1...4} &

集群創(chuàng)建成功后，出現(xiàn)以下信息：

方式3

##以下命令需在每臺(tái)主機(jī)上都執(zhí)行

#客戶端或節(jié)點(diǎn)間訪問(wèn)的用戶、密碼
export MINIO_ACCESS_KEY=admin
export MINIO_SECRET_KEY=12345678

#創(chuàng)建集群 
minio server http://192.168.***.***/data{1...4} http://192.168.***.***/data{1...4} &

集群創(chuàng)建成功后，出現(xiàn)以下信息，該方式一般用于擴(kuò)展集群：

MinIO默認(rèn)提供一個(gè)web方式，進(jìn)行上傳、下載數(shù)據(jù)。

3、web界面

a. 登錄

填入環(huán)境變量MINIO_ACCESS_KEY/ MINIO_SECRET_KEY值，便可登錄。

b. 創(chuàng)建bucket

c. 上傳數(shù)據(jù)

#數(shù)據(jù)上傳中

#數(shù)據(jù)完成上傳

MySQL備份

上傳MySQL的備份數(shù)據(jù)至MinIO集群，可以使用MinIO的客戶端工具mc，也可以利用MinIO提供的API寫(xiě)程序進(jìn)行操作，本文利用mc工具進(jìn)行操作。

1、設(shè)置MinIO集群別名

2、創(chuàng)建bucket

#創(chuàng)建用于存放mysql備份數(shù)據(jù)的存儲(chǔ)桶

3、上傳備份數(shù)據(jù)

#上傳業(yè)務(wù)備份數(shù)據(jù)

#上傳binlog

如果指定MinIO存放數(shù)據(jù)為路徑的話，一定要在路徑后加“/”。

4、查看備份數(shù)據(jù)

#命令行查看

#web頁(yè)面查看

總結(jié)

MinIO做為一款開(kāi)源的對(duì)象存儲(chǔ)服務(wù)，它支持?jǐn)?shù)據(jù)保護(hù)、高可用、一致性等特性，為數(shù)據(jù)的安全性提供了高度保障機(jī)制，而且它的部署、維護(hù)非常簡(jiǎn)單，因此對(duì)于數(shù)據(jù)庫(kù)的備份數(shù)據(jù)存放來(lái)說(shuō)，MinIO是個(gè)不錯(cuò)的選擇。