分布式云數(shù)據(jù)中心SEARCH AGGREGATION
回答:這個(gè)太范化了吧。大數(shù)據(jù)架構(gòu)選擇的方案就有很多，海量數(shù)據(jù)的即席查詢本省就是業(yè)內(nèi)目前的痛點(diǎn)，暫時(shí)沒(méi)有太好的解決方案，kylin等框架也只是一個(gè)折中方案，如果你不是要求海量數(shù)據(jù)分析的秒級(jí)響應(yīng)的話sparkSql、presto等都是不錯(cuò)的方案，分鐘級(jí)別可以返回。
Paul_King
|
694人閱讀
回答:首先建議題主描述清楚應(yīng)用場(chǎng)景，否則別人做的方案可能都不符合需求。就Hadoop和OpenStack的糾結(jié)而言，支撐數(shù)據(jù)分析用前者，做資源管理用后者。=================補(bǔ)充=============題主的需求，實(shí)質(zhì)是搭建一個(gè)IoT實(shí)時(shí)大數(shù)據(jù)平臺(tái)，而不是一般意義的私有云。IoTa大數(shù)據(jù)平臺(tái)除了數(shù)據(jù)采集和結(jié)果反饋，其余部分和一般的大數(shù)據(jù)平臺(tái)相差不多。OpenStack長(zhǎng)于管理VM資源管理...
MonoLog
|
1074人閱讀
回答:ucloud一直在強(qiáng)調(diào)云端、大數(shù)據(jù)的重要性，同樣它也是這么做的。1月9ucloud云推出的ESSD云盤(pán)無(wú)疑是給上一代的云盤(pán)加上了一個(gè)強(qiáng)勁的發(fā)動(dòng)機(jī)，不論是底層微秒級(jí)延遲還是百億級(jí)IOPS，都大大增加了整個(gè)系統(tǒng)的性能、安全性，同時(shí)降低了成本。ucloud目前的企業(yè)級(jí)高性能產(chǎn)品線，速度較上一代提升50%，這一新型存儲(chǔ)推進(jìn)云端大數(shù)據(jù)時(shí)代大步向前，而且在此之前國(guó)家天文臺(tái)就已經(jīng)跟ucloud云進(jìn)行合作了，將所...
harryhappy
|
1075人閱讀
回答:分布式架構(gòu)是軟件系統(tǒng)分布式系統(tǒng)存儲(chǔ)是基于存儲(chǔ)、服務(wù)器、數(shù)據(jù)庫(kù)技術(shù)、容災(zāi)熱備等技術(shù)的系統(tǒng)集成數(shù)字經(jīng)濟(jì)時(shí)代，各個(gè)企業(yè)、個(gè)人都在生產(chǎn)數(shù)據(jù)，利用數(shù)據(jù)，數(shù)據(jù)也在社會(huì)中不斷流動(dòng)、循環(huán)，為這個(gè)時(shí)代創(chuàng)造著價(jià)值與機(jī)遇。盡管數(shù)據(jù)如此珍貴，但我們?nèi)匀粫?huì)聽(tīng)到在集中式存儲(chǔ)場(chǎng)景中，由于網(wǎng)絡(luò)攻擊、火災(zāi)、地震而造成數(shù)據(jù)故障、丟失等問(wèn)題。為了防止數(shù)據(jù)出現(xiàn)故障、數(shù)據(jù)丟失、服務(wù)器出錯(cuò)、數(shù)據(jù)無(wú)法恢復(fù)等情況，越來(lái)越多企業(yè)開(kāi)始把集中存儲(chǔ)轉(zhuǎn)變...
cocopeak
|
600人閱讀
回答:分布式處理，分布式系統(tǒng)(其實(shí)也包含分布式存儲(chǔ)系統(tǒng))一直把RAS、MTBF、MTTR等作為可靠性衡量指標(biāo)，但是專業(yè)指標(biāo)是CAP指標(biāo)，可用性作為其中重要因素之一。CAP理論闡述了在分布式系統(tǒng)的設(shè)計(jì)中，沒(méi)有一種設(shè)計(jì)可以同時(shí)滿足一致性，可用性和分區(qū)容錯(cuò)性。所以一個(gè)好的分布式系統(tǒng)，必須在架構(gòu)上充分考慮上述指標(biāo)。分布式系統(tǒng)設(shè)計(jì)中，BASE理論作為CAP理論的折中或延伸，在分布式系統(tǒng)中被大量使用。分布式系統(tǒng)的可...
lolomaco
|
1257人閱讀
回答:分布式存儲(chǔ)是當(dāng)下互聯(lián)網(wǎng)流行技術(shù)區(qū)塊鏈的特質(zhì)之一。它與傳統(tǒng)互聯(lián)網(wǎng)技術(shù)有些區(qū)別，一句話兩句話也說(shuō)不清楚，直接上圖：第一種A圖就是中心化，也就是傳統(tǒng)互聯(lián)網(wǎng)數(shù)據(jù)的儲(chǔ)存方式，基于官方服務(wù)器，一旦服務(wù)器出現(xiàn)故障，數(shù)據(jù)、信息、資料都有可能丟失或泄露。第二種B圖就是去中心化,會(huì)出現(xiàn)一些節(jié)點(diǎn)，一個(gè)節(jié)點(diǎn)記錄下一個(gè)節(jié)點(diǎn)生成或者儲(chǔ)存信息的值（具體如何記錄或者驗(yàn)證，小編不是專業(yè)的不敢亂講），這就是所謂的去中心化、分布式記賬...
snifes
|
1127人閱讀
...有云和公有云之間的實(shí)時(shí)異步數(shù)據(jù)存儲(chǔ)，非常契合用戶多數(shù)據(jù)中心數(shù)據(jù)同步的安全需求。第二大產(chǎn)品功能，UMStor統(tǒng)一分布式存儲(chǔ)平臺(tái)的Cloud Archive歸檔服務(wù)就是針對(duì)混合云歷史數(shù)據(jù)的定期歸檔場(chǎng)景定制的重要產(chǎn)品功能。不僅可以...
...路上領(lǐng)先一個(gè)身位。分布式云存儲(chǔ)漸成主流多年以來(lái)，在數(shù)據(jù)中心領(lǐng)域，傳統(tǒng)SAN存儲(chǔ)一直占據(jù)霸主地位。而隨著云風(fēng)暴席卷全球，傳統(tǒng)SAN存儲(chǔ)不得不一次又一次面對(duì)分布式云存儲(chǔ)發(fā)起的沖擊和挑戰(zhàn)，兩者之間的天平有進(jìn)一步向分...
1、數(shù)據(jù)中心向整合化和綠色節(jié)能方向發(fā)展目前傳統(tǒng)數(shù)據(jù)中心的建設(shè)正面臨異構(gòu)網(wǎng)絡(luò)、靜態(tài)資源、管理復(fù)雜、能耗高等方面問(wèn)題，云計(jì)算數(shù)據(jù)中心與傳統(tǒng)數(shù)據(jù)中心有所不同，它既要解決如何在短時(shí)間內(nèi)快速、高效完成企業(yè)級(jí)數(shù)據(jù)...
...，Cloud+Native。Cloud表示應(yīng)用程序位于云中，而不是傳統(tǒng)的數(shù)據(jù)中心；Native表示應(yīng)用程序從設(shè)計(jì)之初即考慮到云的環(huán)境，原生為云而設(shè)計(jì)，在云上以最佳姿勢(shì)運(yùn)行，充分利用和發(fā)揮云平臺(tái)的彈性+分布式優(yōu)勢(shì)。云原生數(shù)據(jù)庫(kù)就是在云...
...大數(shù)據(jù)，人工智能等技術(shù)不斷深入到我們的工作和生活，數(shù)據(jù)中心（IDC）也在短短的幾十年間從傳統(tǒng)的數(shù)據(jù)存儲(chǔ)和處理中心發(fā)展到如今的分部式數(shù)據(jù)中心，云管理數(shù)據(jù)中心，成為整個(gè)社會(huì)IT體系中最重要的組成部分。數(shù)據(jù)中心（I...
近年數(shù)據(jù)中心處于高速的建設(shè)發(fā)展時(shí)期，十三五規(guī)劃中也將大數(shù)據(jù)、云計(jì)算作為當(dāng)前國(guó)家經(jīng)濟(jì)社會(huì)發(fā)展的重要戰(zhàn)略內(nèi)容，各政府部門(mén)對(duì)戰(zhàn)略性新興產(chǎn)業(yè)的大力扶持，以及對(duì)云計(jì)算、物聯(lián)網(wǎng)、寬帶和下一代網(wǎng)絡(luò)的發(fā)展的高度重...
...分離的。李飛飛表示。李飛飛介紹說(shuō)，POLARDB采用的是分布式共享存儲(chǔ)架構(gòu)，計(jì)算與存儲(chǔ)分離。由于計(jì)算與存儲(chǔ)的解耦，存儲(chǔ)就可以通過(guò)RDMA高速網(wǎng)絡(luò)做成一個(gè)分布式存儲(chǔ)，而看起來(lái)仍然像一個(gè)本地盤(pán)。正是由于采用了計(jì)算與存...
...展能力，消除數(shù)據(jù)傳輸瓶頸。Intel ? Xeon ? Scalable平臺(tái)作為數(shù)據(jù)中心創(chuàng)新的基礎(chǔ)，較上一代平均性能提升了1．65倍。結(jié)合英特爾的技術(shù)創(chuàng)新，華為最新版本的FusionStorage單節(jié)點(diǎn)IOPS從10萬(wàn)提升到20萬(wàn)?；谌娴漠a(chǎn)品能力，華為存儲(chǔ)致...
...立一個(gè)更方便、更易用的混合云。混合云不是兩個(gè)獨(dú)立的數(shù)據(jù)中心的簡(jiǎn)單連接，而是從硬件到軟件、從基礎(chǔ)架構(gòu)到應(yīng)用各個(gè)層面全聯(lián)通的一個(gè)統(tǒng)一的整體。相對(duì)于統(tǒng)一資源管理、統(tǒng)一存儲(chǔ)管理和統(tǒng)一應(yīng)用管理的三類需求，統(tǒng)一存...
...來(lái)向企業(yè)組織銷售信息技術(shù)，使得兩家公司成了全球企業(yè)數(shù)據(jù)中心的可信合作伙伴。所有這些力量現(xiàn)在匯聚在一起，這些公司的云服務(wù)部門(mén)都在力爭(zhēng)邊緣計(jì)算服務(wù)市場(chǎng)的先機(jī)，據(jù)估計(jì)，邊緣計(jì)算服務(wù)市場(chǎng)至2025年將增長(zhǎng)到近160億...
...需求，適用于政府、金融、運(yùn)營(yíng)商和大型制造企業(yè)的線下數(shù)據(jù)中心云存儲(chǔ)業(yè)務(wù)場(chǎng)景。 6月13日，阿里云宣布彈性計(jì)算Apsara Block Storage產(chǎn)品正式發(fā)布，為企業(yè)級(jí)客戶量身打造，構(gòu)建高性能、彈性、可靠的大規(guī)模分布式塊存儲(chǔ)服務(wù)平臺(tái)...
...且使用率持續(xù)提升；另一項(xiàng)關(guān)于金錢，在2012～2026年企業(yè)數(shù)據(jù)中心存儲(chǔ)支出預(yù)測(cè)中，分布式存儲(chǔ)會(huì)成為云數(shù)據(jù)中心的主流。對(duì)這兩項(xiàng)判斷的解讀在今天早已通俗易懂。分布式云存儲(chǔ)的先天優(yōu)勢(shì)帶來(lái)的增值特性，讓運(yùn)營(yíng)商、金融用...
...數(shù)量可能會(huì)高達(dá)十萬(wàn)臺(tái)并跨越幾個(gè)坐落于不同物理地點(diǎn)的數(shù)據(jù)中心，同時(shí)還運(yùn)行成百上千種應(yīng)用。如何有效地管理這些服務(wù)器，保證這些服務(wù)器組成的系統(tǒng)能提供7＊24小時(shí)不間斷服務(wù)是一個(gè)巨大的挑戰(zhàn)。云計(jì)算系統(tǒng)管理技術(shù)是云...
...術(shù)，持續(xù)平滑地遷移到私有云，提供虛擬化、SDN 網(wǎng)絡(luò)、分布式存儲(chǔ)、容器、安全等核心服務(wù)，具備統(tǒng)一管理、資源調(diào)度、監(jiān)控日志及運(yùn)營(yíng)運(yùn)維等一整套云管理能力；以及開(kāi)放兼容、穩(wěn)定可靠、安全可信、持續(xù)進(jìn)化的特性。UCloudSt...
ChatGPT和Sora等AI大模型應(yīng)用，將AI大模型和算力需求的熱度不斷帶上新的臺(tái)階。哪里可以獲得...
大模型的訓(xùn)練用4090是不合適的，但推理（inference/serving）用4090不能說(shuō)合適，...
圖示為GPU性能排行榜，我們可以看到所有GPU的原始相關(guān)性能圖表。同時(shí)根據(jù)訓(xùn)練、推理能力由高到低做了...
