成人国产在线小视频_日韩寡妇人妻调教在线播放_色成人www永久在线观看_2018国产精品久久_亚洲欧美高清在线30p_亚洲少妇综合一区_黄色在线播放国产_亚洲另类技巧小说校园_国产主播xx日韩_a级毛片在线免费

資訊專欄INFORMATION COLUMN

一致性比對工具 對象存儲 US3

ernest.wang / 2801人閱讀

摘要:一致性比對工具一致性比對工具一致性比對工具本篇目錄工具使用工具使用文件內(nèi)容解析文件內(nèi)容解析工具使用工具使用工具使用下載對應(yīng)的工具包解壓工具包,進(jìn)入目錄,執(zhí)行以下命令為工具附加可執(zhí)行權(quán)限使用拉

一致性比對工具

本篇目錄

工具使用checkData 文件內(nèi)容解析

工具使用

下載對應(yīng)的check工具包:
linux64     http://fail-check.cn-bj.ufileos.com/check-client-linux64.zip
mac        http://fail-check.cn-bj.ufileos.com/check-client-mac.zip 
解壓工具包,進(jìn)入目錄,執(zhí)行以下命令為工具附加可執(zhí)行權(quán)限:
chmod +x chmod.sh
./chmod.sh
使用./get_file_list.sh拉取有問題的文件列表
./get_file_list.sh <要校驗(yàn)的bucket名字> <要校驗(yàn)的本地文件目錄> <要校驗(yàn)的us3目錄>
執(zhí)行以上命令產(chǎn)生下列文件:
checkData.txt         :存放四種可疑文件列表
invalid_content.txt : 存放etag不一致或size不一致的文件列表
local_not_exists.txt: 存放相對us3目錄,本地不存在的文件列表
new_files.txt        : 存放相對本地目錄,us3不存在的文件列表
//checkData.txt中四種情況區(qū)分
[1]表示us3文件不存在
[2]表示本地文件不存在
[3]表示文件大小不一致
[4]表示etag不一致
如果需要重新上傳etag以及size不一致的批量文件,執(zhí)行以下命令
./upload_invalid_content.sh <要上傳的bucket>
如果需要上傳us3缺少的文件,執(zhí)行以下命令
./upload_new_files.sh <要上傳的bucket>
上傳完成后重新校驗(yàn)
./check.sh <要校驗(yàn)的bucket名字> <要校驗(yàn)的本地文件目錄> <要校驗(yàn)的us3目錄>

checkData 文件內(nèi)容解析

us3文件不存在
[1],us3 file does not exist,本地文件名,us3文件名
本地文件不存在
[2],local file does not exist,us3文件名
文件大小不一致
[3],inconsistent file size,本地文件名,文件大小,us3文件名,文件大小
etag不一致
[4],inconsistent etag,本地文件名,文件etag,us3文件名,文件etag

文章版權(quán)歸作者所有,未經(jīng)允許請勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。

轉(zhuǎn)載請注明本文地址:http://systransis.cn/yun/126653.html

相關(guān)文章

  • 常用工具 對象存儲 US3

    摘要:產(chǎn)品底層升級后,推出工具,便于用戶對存儲空間文件進(jìn)行管理操作,操作方式更靈活。文件掛載工具文件系統(tǒng)掛載工具可幫助用戶在環(huán)境下以協(xié)議方式掛載文件目錄,對文件對象進(jìn)行操作。一致性比對工具一致性比對工具用于比對用戶本地與存儲空間中的文件是否一致。 常用工具本篇目錄管理工具其他工具除使用 US3 管理控制臺之外,您還可以通過 US3 提供的各類常用工具對 US3 存儲空間及空間內(nèi)的文件對象進(jìn)行管理,...

    ernest.wang 評論0 收藏196
  • 跨云遷移過程中的數(shù)據(jù)同步及致性校驗(yàn)實(shí)踐(一)

    摘要:通過對一些客戶的跨云遷移過程進(jìn)行總結(jié),發(fā)現(xiàn)普遍存在的挑戰(zhàn)有三點(diǎn)數(shù)據(jù)完整性和一致性挑戰(zhàn)。簡而言之,跨云遷移過程中的數(shù)據(jù)一致性主要就集中在存量數(shù)據(jù)的遷移如何保證一致。前言隨著互聯(lián)網(wǎng)業(yè)務(wù)發(fā)展對容災(zāi)以及對訪問加速、多供應(yīng)商成本控制等需求的產(chǎn)生,互聯(lián)網(wǎng)公司的多云部署和跨云遷移逐漸成為剛需,而在此過程中,最困擾運(yùn)維和研發(fā)人員的就是數(shù)據(jù)的遷移和同步。俗語說 上屋搬下屋,搬灑一籮谷 ,在業(yè)務(wù)的遷移過程中一旦...

    Tecode 評論0 收藏0
  • 概覽 對象存儲 US3

    摘要:概覽概覽產(chǎn)品簡介產(chǎn)品概述功能概覽產(chǎn)品優(yōu)勢使用限制存儲類型地域和域名計(jì)量計(jì)費(fèi)產(chǎn)品價(jià)格計(jì)費(fèi)規(guī)則欠費(fèi)處理計(jì)費(fèi)案例快速上手開通服務(wù)開始使用控制臺指南存儲空間日志管理文件管理生命周期靜態(tài)網(wǎng)站托管域名管理鏡像回源跨區(qū)域復(fù)制跨域設(shè)置數(shù)據(jù)分析防盜鏈統(tǒng)計(jì)報(bào) 概覽產(chǎn)品簡介產(chǎn)品概述功能概覽產(chǎn)品優(yōu)勢使用限制存儲類型地域和域名計(jì)量計(jì)費(fèi)產(chǎn)品價(jià)格計(jì)費(fèi)規(guī)則欠費(fèi)處理計(jì)費(fèi)案例快速上手開通 US3 服務(wù)開始使用 US3控制臺指南...

    ernest.wang 評論0 收藏2651
  • 工具簡介 對象存儲 US3

    摘要:工具簡介工具簡介工具簡介本篇目錄概述概述版本和運(yùn)行環(huán)境版本和運(yùn)行環(huán)境主要功能主要功能使用限制使用限制概述概述概述是一個(gè)在系統(tǒng)環(huán)境中,將的存儲空間掛載到本地掛載點(diǎn)的工具,掛載成功后,您可以像操作本地文件一樣操作存儲空間中的文件。 工具簡介本篇目錄概述版本和運(yùn)行環(huán)境主要功能使用限制概述US3FS是一個(gè)在Linux/Windows系統(tǒng)環(huán)境中,將US3的存儲空間(Bucket)掛載到本地掛載點(diǎn)的工具...

    ernest.wang 評論0 收藏892
  • UCloud優(yōu)刻得推出自研存儲引擎US3 持續(xù)降低用戶存儲成本

    摘要:本次大會上,優(yōu)刻得基于自研的全新存儲底層架構(gòu)推出新一代對象存儲產(chǎn)品。推出新一代自研存儲引擎,持續(xù)降低存儲成本優(yōu)刻得在今年月推出了元月的歸檔存儲產(chǎn)品,打破了存儲領(lǐng)域降本的邊界。伴隨著5G、大數(shù)據(jù)的廣泛應(yīng)用,帶來了數(shù)據(jù)量的爆炸式增長。根據(jù)IDC預(yù)測,2025年全球數(shù)據(jù)總量將達(dá)到驚人的175ZB。數(shù)據(jù)存儲在未來的數(shù)字化時(shí)代將面臨更多挑戰(zhàn):每秒鐘存儲數(shù)據(jù)寫入性能、數(shù)據(jù)云端存儲可靠性、數(shù)據(jù)存儲成本增高...

    Tecode 評論0 收藏0
  • 對象存儲 性能數(shù)據(jù)與分析 US3

    摘要:缺陷雖然目前確實(shí)能給基于存儲的大數(shù)據(jù)方案帶來進(jìn)一步性能提高,但目前的設(shè)計(jì)還是有不少缺陷,主要在體現(xiàn)在幾個(gè)方面單點(diǎn)架構(gòu)使得可靠性降低。性能數(shù)據(jù)與分析本篇目錄測試環(huán)境測試數(shù)據(jù)us3vmds基于Go語言開發(fā),自帶了Go的profile功能,通過以下命令,可以在指定地址開啟Go的運(yùn)行時(shí)性能分析HTTP服務(wù):? bin ? us3vmds pprof --open 127.0.0.1 8081 ? ...

    ernest.wang 評論0 收藏140

發(fā)表評論

0條評論

最新活動
閱讀需要支付1元查看
<