摘要:工具簡(jiǎn)介工具簡(jiǎn)介工具簡(jiǎn)介本篇目錄概述概述原理說(shuō)明原理說(shuō)明版本和運(yùn)行環(huán)境版本和運(yùn)行環(huán)境概述概述概述適配器是為了解決訪問(wèn)對(duì)象存儲(chǔ)的問(wèn)題,實(shí)現(xiàn)了標(biāo)準(zhǔn)的文件系統(tǒng),支持等大數(shù)據(jù)計(jì)算框架可以像訪問(wèn)文件系統(tǒng)一樣,來(lái)讀寫存儲(chǔ)在上的數(shù)據(jù)。
US3Hadoop適配器是為了解決Hadoop訪問(wèn)UCloud對(duì)象存儲(chǔ)US3的問(wèn)題,實(shí)現(xiàn)了標(biāo)準(zhǔn)的Hadoop文件系統(tǒng),支持Hive、Spark、Flink等大數(shù)據(jù)計(jì)算框架可以像訪問(wèn)HDFS文件系統(tǒng)一樣,來(lái)讀寫存儲(chǔ)在US3上的數(shù)據(jù)。
適配器是實(shí)現(xiàn)了Hadoop提供的存儲(chǔ)訪問(wèn)接口FileSystem的適配器組件,類似HDFS實(shí)現(xiàn)的DistributedFileSystem和基于AWS S3協(xié)議實(shí)現(xiàn)的S3AFileSystem。適配器直接把IO,索引請(qǐng)求發(fā)給US3,架構(gòu)如下圖所示。
該架構(gòu)適合備份場(chǎng)景和小規(guī)模計(jì)算分析場(chǎng)景。
當(dāng)前版本:1.1.0
運(yùn)行環(huán)境hadoop-2.6.0hadoop-2.8.3hadoop-2.8.5hadoop-3.1.1文章版權(quán)歸作者所有,未經(jīng)允許請(qǐng)勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉(zhuǎn)載請(qǐng)注明本文地址:http://systransis.cn/yun/126804.html
摘要:概覽概覽產(chǎn)品簡(jiǎn)介產(chǎn)品概述功能概覽產(chǎn)品優(yōu)勢(shì)使用限制存儲(chǔ)類型地域和域名計(jì)量計(jì)費(fèi)產(chǎn)品價(jià)格計(jì)費(fèi)規(guī)則欠費(fèi)處理計(jì)費(fèi)案例快速上手開通服務(wù)開始使用控制臺(tái)指南存儲(chǔ)空間日志管理文件管理生命周期靜態(tài)網(wǎng)站托管域名管理鏡像回源跨區(qū)域復(fù)制跨域設(shè)置數(shù)據(jù)分析防盜鏈統(tǒng)計(jì)報(bào) 概覽產(chǎn)品簡(jiǎn)介產(chǎn)品概述功能概覽產(chǎn)品優(yōu)勢(shì)使用限制存儲(chǔ)類型地域和域名計(jì)量計(jì)費(fèi)產(chǎn)品價(jià)格計(jì)費(fèi)規(guī)則欠費(fèi)處理計(jì)費(fèi)案例快速上手開通 US3 服務(wù)開始使用 US3控制臺(tái)指南...
摘要:工具簡(jiǎn)介工具簡(jiǎn)介工具簡(jiǎn)介本篇目錄概述概述版本和運(yùn)行環(huán)境版本和運(yùn)行環(huán)境主要功能主要功能使用限制使用限制概述概述概述是一個(gè)在系統(tǒng)環(huán)境中,將的存儲(chǔ)空間掛載到本地掛載點(diǎn)的工具,掛載成功后,您可以像操作本地文件一樣操作存儲(chǔ)空間中的文件。 工具簡(jiǎn)介本篇目錄概述版本和運(yùn)行環(huán)境主要功能使用限制概述US3FS是一個(gè)在Linux/Windows系統(tǒng)環(huán)境中,將US3的存儲(chǔ)空間(Bucket)掛載到本地掛載點(diǎn)的工具...
摘要:工具簡(jiǎn)介工具簡(jiǎn)介工具簡(jiǎn)介本篇目錄概述概述介紹介紹概述概述概述為了解決寫入對(duì)象存儲(chǔ)的問(wèn)題,基于官方版本開發(fā),增加了中類型為對(duì)象存儲(chǔ)的支持,支持前綴掛載。介紹介紹介紹是一個(gè)用于的開源列式數(shù)據(jù)庫(kù),開發(fā)。具體介紹可參見官網(wǎng) 工具簡(jiǎn)介本篇目錄概述ClickHouse介紹概述為了解決clickhouse寫入U(xiǎn)Cloud對(duì)象存儲(chǔ)US3的問(wèn)題,US3基于官方clickhouse版本v20.8.7.15-lt...
摘要:產(chǎn)品底層升級(jí)后,推出工具,便于用戶對(duì)存儲(chǔ)空間文件進(jìn)行管理操作,操作方式更靈活。文件掛載工具文件系統(tǒng)掛載工具可幫助用戶在環(huán)境下以協(xié)議方式掛載文件目錄,對(duì)文件對(duì)象進(jìn)行操作。一致性比對(duì)工具一致性比對(duì)工具用于比對(duì)用戶本地與存儲(chǔ)空間中的文件是否一致。 常用工具本篇目錄管理工具其他工具除使用 US3 管理控制臺(tái)之外,您還可以通過(guò) US3 提供的各類常用工具對(duì) US3 存儲(chǔ)空間及空間內(nèi)的文件對(duì)象進(jìn)行管理,...
摘要:用戶可通過(guò)數(shù)據(jù)遷移的方式,將第三方的存儲(chǔ)集群數(shù)據(jù)遷移至的存儲(chǔ)空間中,充分利用對(duì)象存儲(chǔ)按需收費(fèi),無(wú)須購(gòu)買額外硬件資源的優(yōu)勢(shì),對(duì)數(shù)據(jù)進(jìn)行歸檔,以實(shí)現(xiàn)成本最優(yōu)。 數(shù)據(jù)遷移方案本篇目錄背景US3 鏡像回源功能US3 數(shù)據(jù)遷移工具背景對(duì)象存儲(chǔ)具有容量大、成本低、高擴(kuò)展性以及高可靠性等優(yōu)勢(shì),面對(duì)增量數(shù)據(jù)導(dǎo)致的存儲(chǔ)容量瓶頸、成本增加等問(wèn)題。用戶可通過(guò)數(shù)據(jù)遷移的方式,將第三方的存儲(chǔ)集群數(shù)據(jù)遷移至 US3 的...
摘要:遷移工具歷史版本遷移工具歷史版本遷移工具歷史版本本篇目錄介紹介紹安裝步驟安裝步驟介紹介紹介紹是對(duì)象存儲(chǔ)提供的一款將數(shù)據(jù)遷移至存儲(chǔ)空間的工具。 遷移工具(歷史版本)本篇目錄介紹安裝步驟介紹ufile-import 是對(duì)象存儲(chǔ) US3 提供的一款將數(shù)據(jù)遷移至 US3 存儲(chǔ)空間(Bucket) 的工具。您可以將 ufile-import 部署在本地服務(wù)或者云主機(jī)上,輕松將您其他云存儲(chǔ)的數(shù)據(jù)遷移到 ...
閱讀 484·2024-11-07 18:25
閱讀 130851·2024-02-01 10:43
閱讀 961·2024-01-31 14:58
閱讀 925·2024-01-31 14:54
閱讀 83048·2024-01-29 17:11
閱讀 3311·2024-01-25 14:55
閱讀 2086·2023-06-02 13:36
閱讀 3207·2023-05-23 10:26