hadoop的架構(gòu)SEARCH AGGREGATION
回答:Hadoop生態(tài)Apache?Hadoop?項(xiàng)目開發(fā)了用于可靠，可擴(kuò)展的分布式計(jì)算的開源軟件。Apache Hadoop軟件庫是一個(gè)框架，該框架允許使用簡單的編程模型跨計(jì)算機(jī)集群對(duì)大型數(shù)據(jù)集進(jìn)行分布式處理。 它旨在從單個(gè)服務(wù)器擴(kuò)展到數(shù)千臺(tái)機(jī)器，每臺(tái)機(jī)器都提供本地計(jì)算和存儲(chǔ)。 庫本身不是設(shè)計(jì)用來依靠硬件來提供高可用性，而是設(shè)計(jì)為在應(yīng)用程序?qū)訖z測和處理故障，因此可以在計(jì)算機(jī)集群的頂部提供高可用性服務(wù)，...
娣辯孩
|
1801人閱讀
回答:首先建議題主描述清楚應(yīng)用場景，否則別人做的方案可能都不符合需求。就Hadoop和OpenStack的糾結(jié)而言，支撐數(shù)據(jù)分析用前者，做資源管理用后者。=================補(bǔ)充=============題主的需求，實(shí)質(zhì)是搭建一個(gè)IoT實(shí)時(shí)大數(shù)據(jù)平臺(tái)，而不是一般意義的私有云。IoTa大數(shù)據(jù)平臺(tái)除了數(shù)據(jù)采集和結(jié)果反饋，其余部分和一般的大數(shù)據(jù)平臺(tái)相差不多。OpenStack長于管理VM資源管理...
MonoLog
|
1212人閱讀
回答:這個(gè)太范化了吧。大數(shù)據(jù)架構(gòu)選擇的方案就有很多，海量數(shù)據(jù)的即席查詢本省就是業(yè)內(nèi)目前的痛點(diǎn)，暫時(shí)沒有太好的解決方案，kylin等框架也只是一個(gè)折中方案，如果你不是要求海量數(shù)據(jù)分析的秒級(jí)響應(yīng)的話sparkSql、presto等都是不錯(cuò)的方案，分鐘級(jí)別可以返回。
Paul_King
|
784人閱讀
回答:軟件產(chǎn)品架構(gòu)是不斷迭代演化的，從單體服務(wù)架構(gòu)發(fā)展到現(xiàn)在的服務(wù)化、微服務(wù)的架構(gòu)。單體架構(gòu)單體架構(gòu)就是所有的業(yè)務(wù)模塊都是耦合在一個(gè)項(xiàng)目中，開發(fā)、部署都在一起；如果其中一個(gè)模塊需要上線升級(jí)，那么所有模塊都要一起啟停；在早期，單體架構(gòu)的項(xiàng)目團(tuán)隊(duì)成員需要是全棧，因?yàn)榍岸?、后端、?shù)據(jù)庫都是一波人負(fù)責(zé)，后來開始進(jìn)行了邏輯分層，團(tuán)隊(duì)也分成了前端 UI 團(tuán)隊(duì)、后端和 DBA 團(tuán)隊(duì)，每個(gè)團(tuán)隊(duì)都有自己負(fù)責(zé)的職責(zé)。然而隨...
khs1994
|
2201人閱讀
回答:到底怎樣的程序員能稱為架構(gòu)師？首先要知道架構(gòu)師是做什么的，架構(gòu)師主要職責(zé)是確認(rèn)和評(píng)估系統(tǒng)需求，給出開發(fā)規(guī)范，搭建系統(tǒng)實(shí)現(xiàn)的核心構(gòu)架，并澄清技術(shù)細(xì)節(jié)、掃清主要難點(diǎn)的技術(shù)人員。那么怎樣從一個(gè)程序員成為架構(gòu)師呢，我總結(jié)了以下幾個(gè)方面： 意識(shí)方面首先程序員自身想往架構(gòu)師方向發(fā)展，然后換位思考與架構(gòu)師的差距，該如何努力才能符合一個(gè)優(yōu)秀的架構(gòu)師，所以關(guān)注范圍是不同的，程序員專注于具體細(xì)節(jié)，而架構(gòu)師專注于宏觀視...
edgardeng
|
708人閱讀
實(shí)際上,關(guān)于Hadoop及其生態(tài)系統(tǒng)的文章或者書籍已經(jīng)汗牛充棟,在2016年大數(shù)據(jù)這個(gè)概念興起的時(shí)候,有幸于能進(jìn)入數(shù)據(jù)行業(yè)。雖然,在這2年里,并沒有達(dá)到自己最初的期望,不過還是跨出了那么一步。 這里,我們簡單的聊聊Hadoop及其...
實(shí)際上,關(guān)于Hadoop及其生態(tài)系統(tǒng)的文章或者書籍已經(jīng)汗牛充棟,在2016年大數(shù)據(jù)這個(gè)概念興起的時(shí)候,有幸于能進(jìn)入數(shù)據(jù)行業(yè)。雖然,在這2年里,并沒有達(dá)到自己最初的期望,不過還是跨出了那么一步。 這里,我們簡單的聊聊Hadoop及其...
ChatGPT和Sora等AI大模型應(yīng)用，將AI大模型和算力需求的熱度不斷帶上新的臺(tái)階。哪里可以獲得...
一、活動(dòng)亮點(diǎn)：全球31個(gè)節(jié)點(diǎn)覆蓋 + 線路升級(jí)，跨境業(yè)務(wù)福音！爆款云主機(jī)0.5折起：香港、海外多節(jié)點(diǎn)...
大模型的訓(xùn)練用4090是不合適的，但推理（inference/serving）用4090不能說合適，...
Object
