海量數(shù)據(jù)架構(gòu)SEARCH AGGREGATION
回答:這個(gè)太范化了吧。大數(shù)據(jù)架構(gòu)選擇的方案就有很多，海量數(shù)據(jù)的即席查詢(xún)本省就是業(yè)內(nèi)目前的痛點(diǎn)，暫時(shí)沒(méi)有太好的解決方案，kylin等框架也只是一個(gè)折中方案，如果你不是要求海量數(shù)據(jù)分析的秒級(jí)響應(yīng)的話(huà)sparkSql、presto等都是不錯(cuò)的方案，分鐘級(jí)別可以返回。
Paul_King
|
691人閱讀
回答:現(xiàn)在有幸參與傳統(tǒng)銀行數(shù)字化轉(zhuǎn)型，負(fù)責(zé)技術(shù)架構(gòu)部分的轉(zhuǎn)型設(shè)計(jì)。高性能的數(shù)據(jù)架構(gòu)（High Performance Data Architecture），正是我們架構(gòu)轉(zhuǎn)型的重點(diǎn)。隨著科技的蓬勃發(fā)展、社交網(wǎng)絡(luò)的廣泛使用、線(xiàn)上消費(fèi)的普及、數(shù)據(jù)挖掘的技術(shù)提升等大趨勢(shì)，全球銀行業(yè)正迎來(lái)一場(chǎng)聲勢(shì)浩大的數(shù)字化創(chuàng)新浪潮。數(shù)字化為消費(fèi)者的生活及行為模式帶來(lái)翻天覆地的變化，也孵化出一批新型的金融科技(Fintech)競(jìng)...
Lowky
|
543人閱讀
回答:以mysql為列：1：支撐高并發(fā)系統(tǒng)，一定會(huì)涉及事務(wù)，所以數(shù)據(jù)庫(kù)引擎必選innodb，innodb支持事務(wù)，事務(wù)級(jí)別根據(jù)業(yè)務(wù)而定，如果業(yè)務(wù)數(shù)據(jù)一致性要求很高，事務(wù)就開(kāi)啟序列化級(jí)別，這樣就完全隔離事務(wù)，但是會(huì)導(dǎo)致鎖資源競(jìng)爭(zhēng)加劇。mysql的性能有一定的降低。2：讀寫(xiě)分離，數(shù)據(jù)庫(kù)分成主庫(kù)和從庫(kù)，主庫(kù)負(fù)責(zé)寫(xiě)數(shù)據(jù)，叢庫(kù)負(fù)責(zé)讀數(shù)據(jù)。注意主從數(shù)據(jù)庫(kù)數(shù)據(jù)一致性問(wèn)題。3：冷熱數(shù)據(jù)分離，美團(tuán)，餓了么部分設(shè)計(jì)采用冷熱...
Vultr
|
1279人閱讀
回答:軟件產(chǎn)品架構(gòu)是不斷迭代演化的，從單體服務(wù)架構(gòu)發(fā)展到現(xiàn)在的服務(wù)化、微服務(wù)的架構(gòu)。單體架構(gòu)單體架構(gòu)就是所有的業(yè)務(wù)模塊都是耦合在一個(gè)項(xiàng)目中，開(kāi)發(fā)、部署都在一起；如果其中一個(gè)模塊需要上線(xiàn)升級(jí)，那么所有模塊都要一起啟停；在早期，單體架構(gòu)的項(xiàng)目團(tuán)隊(duì)成員需要是全棧，因?yàn)榍岸恕⒑蠖?、?shù)據(jù)庫(kù)都是一波人負(fù)責(zé)，后來(lái)開(kāi)始進(jìn)行了邏輯分層，團(tuán)隊(duì)也分成了前端 UI 團(tuán)隊(duì)、后端和 DBA 團(tuán)隊(duì)，每個(gè)團(tuán)隊(duì)都有自己負(fù)責(zé)的職責(zé)。然而隨...
khs1994
|
1876人閱讀
回答:超融合是什么參考維基百科中的超融合定義：超融合基礎(chǔ)架構(gòu)（hyper-converged infrastructure）是一個(gè)軟件定義的 IT 基礎(chǔ)架構(gòu)，它可虛擬化常見(jiàn)硬件定義系統(tǒng)的所有元素。HCI 包含的最小集合是：虛擬化計(jì)算（hypervisor），虛擬存儲(chǔ)（SDS）和虛擬網(wǎng)絡(luò)。HCI 通常運(yùn)行在標(biāo)準(zhǔn)商用服務(wù)器之上。超融合基礎(chǔ)架構(gòu)（hyper-converged infrastructure）與...
mdluo
|
1023人閱讀
回答:從系統(tǒng)架構(gòu)本身來(lái)說(shuō)，一般系統(tǒng)優(yōu)化主要從三個(gè)方面入手，數(shù)據(jù)持久層、業(yè)務(wù)邏輯層和前端展示層。數(shù)據(jù)持久層限制系統(tǒng)性能主要有兩個(gè)方面，一是數(shù)據(jù)庫(kù)自身的性能，二是對(duì)數(shù)據(jù)庫(kù)操作的方式，數(shù)據(jù)庫(kù)自身相對(duì)簡(jiǎn)單，一般通過(guò)優(yōu)化配置、采用高可用方案、搭建集群或者使用性能更好的數(shù)據(jù)庫(kù)來(lái)提升性能；數(shù)據(jù)庫(kù)操作主要是數(shù)據(jù)庫(kù)讀寫(xiě)操作，可以通過(guò)SQL優(yōu)化的方式來(lái)提升讀寫(xiě)速度，或者通過(guò)緩存的方式減低并發(fā)、提升性能。業(yè)務(wù)邏輯層代碼層面常...
senntyou
|
1097人閱讀
...日后臺(tái)架構(gòu)專(zhuān)場(chǎng)的出品人我今天給大家?guī)?lái)《構(gòu)造高可靠海量用戶(hù)服務(wù)-SNG數(shù)億級(jí)日活躍業(yè)務(wù)后臺(tái)核心技術(shù)揭秘》，一起探討怎么從可用性的維度提升海量服務(wù)的可靠性及海量服務(wù)的故障處理方式，包括：SNG后臺(tái)架構(gòu)的概覽；面...
...音樂(lè)，圖片，視頻監(jiān)控文件，軟件，鏡像，掃描件等其他海量文件的存儲(chǔ)，這些都可以使用，主要還是易用性跟性?xún)r(jià)比。 分享三： 從架構(gòu)來(lái)看，云存儲(chǔ)比緊耦合設(shè)計(jì)的傳統(tǒng)存儲(chǔ)有更好的橫向擴(kuò)展性，這樣在容量和性能上有...
...音樂(lè)，圖片，視頻監(jiān)控文件，軟件，鏡像，掃描件等其他海量文件的存儲(chǔ)，這些都可以使用，主要還是易用性跟性?xún)r(jià)比。分享三：從架構(gòu)來(lái)看，云存儲(chǔ)比緊耦合設(shè)計(jì)的傳統(tǒng)存儲(chǔ)有更好的橫向擴(kuò)展性，這樣在容量和性能上有更大的...
...微云、QQ空間相冊(cè)等的運(yùn)維工作。 12月16日，首期沙龍海量運(yùn)維實(shí)踐大曝光在騰訊大廈圓滿(mǎn)舉行。沙龍出品人騰訊運(yùn)維技術(shù)總監(jiān)、復(fù)旦大學(xué)客座講師、DevOps專(zhuān)家梁定安，講師騰訊手機(jī)QQ運(yùn)維負(fù)責(zé)人郭智文，騰訊高級(jí)工程師魏旸...
...打造極致的技術(shù)基礎(chǔ)和質(zhì)量口碑。 12月16日，首期沙龍海量運(yùn)維實(shí)踐大曝光在騰訊大廈圓滿(mǎn)舉行。沙龍出品人騰訊運(yùn)維技術(shù)總監(jiān)、復(fù)旦大學(xué)客座講師、DevOps專(zhuān)家梁定安，講師騰訊手機(jī)QQ運(yùn)維負(fù)責(zé)人郭智文，騰訊高級(jí)工程師魏...
...0年，曾師從圖靈獎(jiǎng)獲得者Jim Grey，還在惠普實(shí)驗(yàn)室從事過(guò)海量并行內(nèi)存數(shù)據(jù)庫(kù)開(kāi)發(fā)，根正苗紅，習(xí)得一身硬本事；回國(guó)后的10年，歷任華勝天成CTO、惠普大中華區(qū)數(shù)據(jù)挖掘總監(jiān)、SUN/ORACLE大中華區(qū)服務(wù)總裁，創(chuàng)造過(guò)一年翻22倍，近1...
IT 技術(shù)的迅猛發(fā)展，給運(yùn)維人員帶來(lái)了越來(lái)越多的挑戰(zhàn)。只負(fù)責(zé)安裝、部署的傳統(tǒng)型運(yùn)維的發(fā)展空間已經(jīng)受到越來(lái)越多的擠壓：互聯(lián)網(wǎng)的快速發(fā)展，使各種軟件的部署、安裝已經(jīng)不再是技術(shù)問(wèn)題，各種開(kāi)源解決方案也讓人懷疑...
... 冰河出版的技術(shù)圖書(shū) 即將出版的《深入理解XXXXXXXXX》 《海量數(shù)據(jù)處理與大數(shù)據(jù)技術(shù)實(shí)戰(zhàn)》 《MySQL技術(shù)大全：開(kāi)發(fā)、優(yōu)化與運(yùn)維實(shí)戰(zhàn)》 《深入理解高并發(fā)編程》 《并發(fā)編程核心知識(shí)》 《冰河的滲透實(shí)戰(zhàn)筆記》 《我要進(jìn)大廠(chǎng)系...
...了100%的 CAP。 云原生數(shù)據(jù)庫(kù) POLARDB：極致彈性+兼容性 為海量數(shù)據(jù)和海量并發(fā)而生 前面介紹了數(shù)據(jù)庫(kù)市場(chǎng)背景和云原生數(shù)據(jù)庫(kù)的基本要素，接下來(lái)我將結(jié)合阿里云 POLARDB 以及 AnalyticDB 兩款數(shù)據(jù)庫(kù)系統(tǒng)，分享以上技術(shù)的具體落地情...
ChatGPT和Sora等AI大模型應(yīng)用，將AI大模型和算力需求的熱度不斷帶上新的臺(tái)階。哪里可以獲得...
大模型的訓(xùn)練用4090是不合適的，但推理（inference/serving）用4090不能說(shuō)合適，...
圖示為GPU性能排行榜，我們可以看到所有GPU的原始相關(guān)性能圖表。同時(shí)根據(jù)訓(xùn)練、推理能力由高到低做了...
