回答:這個太范化了吧。大數(shù)據(jù)架構(gòu)選擇的方案就有很多,海量數(shù)據(jù)的即席查詢本省就是業(yè)內(nèi)目前的痛點,暫時沒有太好的解決方案,kylin等框架也只是一個折中方案,如果你不是要求海量數(shù)據(jù)分析的秒級響應(yīng)的話sparkSql、presto等都是不錯的方案,分鐘級別可以返回。
回答:現(xiàn)在有幸參與傳統(tǒng)銀行數(shù)字化轉(zhuǎn)型,負責技術(shù)架構(gòu)部分的轉(zhuǎn)型設(shè)計。高性能的數(shù)據(jù)架構(gòu)(High Performance Data Architecture),正是我們架構(gòu)轉(zhuǎn)型的重點。隨著科技的蓬勃發(fā)展、社交網(wǎng)絡(luò)的廣泛使用、線上消費的普及、數(shù)據(jù)挖掘的技術(shù)提升等大趨勢,全球銀行業(yè)正迎來一場聲勢浩大的數(shù)字化創(chuàng)新浪潮。數(shù)字化為消費者的生活及行為模式帶來翻天覆地的變化,也孵化出一批新型的金融科技(Fintech)競...
回答:以mysql為列:1:支撐高并發(fā)系統(tǒng),一定會涉及事務(wù),所以數(shù)據(jù)庫引擎必選innodb,innodb支持事務(wù),事務(wù)級別根據(jù)業(yè)務(wù)而定,如果業(yè)務(wù)數(shù)據(jù)一致性要求很高,事務(wù)就開啟序列化級別,這樣就完全隔離事務(wù),但是會導(dǎo)致鎖資源競爭加劇。mysql的性能有一定的降低。2:讀寫分離,數(shù)據(jù)庫分成主庫和從庫,主庫負責寫數(shù)據(jù),叢庫負責讀數(shù)據(jù)。注意主從數(shù)據(jù)庫數(shù)據(jù)一致性問題。3:冷熱數(shù)據(jù)分離,美團,餓了么部分設(shè)計采用冷熱...
回答:軟件產(chǎn)品架構(gòu)是不斷迭代演化的,從單體服務(wù)架構(gòu)發(fā)展到現(xiàn)在的服務(wù)化、微服務(wù)的架構(gòu)。單體架構(gòu)單體架構(gòu)就是所有的業(yè)務(wù)模塊都是耦合在一個項目中,開發(fā)、部署都在一起;如果其中一個模塊需要上線升級,那么所有模塊都要一起啟停;在早期,單體架構(gòu)的項目團隊成員需要是全棧,因為前端、后端、數(shù)據(jù)庫都是一波人負責,后來開始進行了邏輯分層,團隊也分成了前端 UI 團隊、后端和 DBA 團隊,每個團隊都有自己負責的職責。然而隨...
回答:超融合是什么參考維基百科中的超融合定義:超融合基礎(chǔ)架構(gòu)(hyper-converged infrastructure)是一個軟件定義的 IT 基礎(chǔ)架構(gòu),它可虛擬化常見硬件定義系統(tǒng)的所有元素。HCI 包含的最小集合是:虛擬化計算(hypervisor),虛擬存儲(SDS)和虛擬網(wǎng)絡(luò)。HCI 通常運行在標準商用服務(wù)器之上。超融合基礎(chǔ)架構(gòu)(hyper-converged infrastructure)與...
回答:從系統(tǒng)架構(gòu)本身來說,一般系統(tǒng)優(yōu)化主要從三個方面入手,數(shù)據(jù)持久層、業(yè)務(wù)邏輯層和前端展示層。數(shù)據(jù)持久層限制系統(tǒng)性能主要有兩個方面,一是數(shù)據(jù)庫自身的性能,二是對數(shù)據(jù)庫操作的方式,數(shù)據(jù)庫自身相對簡單,一般通過優(yōu)化配置、采用高可用方案、搭建集群或者使用性能更好的數(shù)據(jù)庫來提升性能;數(shù)據(jù)庫操作主要是數(shù)據(jù)庫讀寫操作,可以通過SQL優(yōu)化的方式來提升讀寫速度,或者通過緩存的方式減低并發(fā)、提升性能。業(yè)務(wù)邏輯層代碼層面常...
...事情,比如我們常常看到的基于數(shù)據(jù)埋點的微服務(wù)可視化解決方案,這類架構(gòu)可視化手段通常在分布式追蹤、APM等監(jiān)控領(lǐng)域使用較多,下圖為某APM產(chǎn)品提供的應(yīng)用維度架構(gòu)可視化方案: 我們稱這種可視化方式為__埋點式感知...
...解決 數(shù)據(jù)庫經(jīng)常出現(xiàn)死鎖,查看哪塊業(yè)務(wù)造出的并提出解決方案 這塊的業(yè)務(wù)耦合太高了。我們開會討論如何做。 是日常工作中,你無時無刻的在架構(gòu),而你與架構(gòu)師唯一的區(qū)別是你是遇到問題再想解決方案,而架構(gòu)師會提前...
...解決 數(shù)據(jù)庫經(jīng)常出現(xiàn)死鎖,查看哪塊業(yè)務(wù)造出的并提出解決方案 這塊的業(yè)務(wù)耦合太高了。我們開會討論如何做。 是日常工作中,你無時無刻的在架構(gòu),而你與架構(gòu)師唯一的區(qū)別是你是遇到問題再想解決方案,而架構(gòu)師會提前...
...解決 數(shù)據(jù)庫經(jīng)常出現(xiàn)死鎖,查看哪塊業(yè)務(wù)造出的并提出解決方案 這塊的業(yè)務(wù)耦合太高了。我們開會討論如何做。 是日常工作中,你無時無刻的在架構(gòu),而你與架構(gòu)師唯一的區(qū)別是你是遇到問題再想解決方案,而架構(gòu)師會提前...
...的功能和穩(wěn)定性測試,打造了全球領(lǐng)先的云架構(gòu)數(shù)據(jù)倉庫解決方案。 該方案擁有如下優(yōu)勢: 兼具Shared Nothing(無共享)和Shared Everything(全共享)架構(gòu)的技術(shù)優(yōu)勢; 兼具列式存儲和云計算架構(gòu)的優(yōu)勢,滿足超大數(shù)據(jù)...
...索引、鎖、事務(wù),原理分析MySQL:查詢速度慢與性能差的解決方案MySQL:事務(wù)ACID特性的實現(xiàn)原理MySQL:大佬是怎么思考設(shè)計MySQL優(yōu)化方案的MySQL:一份非常完整的MySQL規(guī)范 面試必備 面試必備:淺談Java中15種鎖的分析比較面試官問:...
...索引、鎖、事務(wù),原理分析MySQL:查詢速度慢與性能差的解決方案MySQL:事務(wù)ACID特性的實現(xiàn)原理MySQL:大佬是怎么思考設(shè)計MySQL優(yōu)化方案的MySQL:一份非常完整的MySQL規(guī)范 面試必備 面試必備:淺談Java中15種鎖的分析比較面試官問:...
...能夠保證云數(shù)據(jù)中心系統(tǒng)的安全可靠?華為的云數(shù)據(jù)中心解決方案很好地解決了以上問題,下面我們將逐一討論所涉及到的熱點技術(shù):公有云VS私有云大多數(shù)廣電在規(guī)劃云數(shù)據(jù)中心架構(gòu)的時候都在猶豫是采用分布式存儲還是使用...
2019年1月4日,OceanBase遷移服務(wù)解決方案在ATEC城市峰會中正式發(fā)布。螞蟻金服資深技術(shù)專家?guī)熚膮R和技術(shù)專家韓谷悅共同分享了OceanBase遷移服務(wù)的重要特性和業(yè)務(wù)實踐。 螞蟻數(shù)據(jù)庫架構(gòu)的三代升級史 在過去的十多年時間里,...
2019年1月4日,OceanBase遷移服務(wù)解決方案在ATEC城市峰會中正式發(fā)布。螞蟻金服資深技術(shù)專家?guī)熚膮R和技術(shù)專家韓谷悅共同分享了OceanBase遷移服務(wù)的重要特性和業(yè)務(wù)實踐。 螞蟻數(shù)據(jù)庫架構(gòu)的三代升級史 在過去的十多年時間里,...
...短板?;旌显萍軜?gòu)的三種形態(tài)(架構(gòu)圖:UCloud混合云架構(gòu)解決方案)如上圖所示,混合云架構(gòu)的形態(tài)一般包括:一些特定行業(yè)用戶基于合規(guī)、制度的要求,業(yè)務(wù)不采用公有云方式,可選擇獨立采購硬件服務(wù)器或租用IDC的方式,存...
...和落地會面臨很大的挑戰(zhàn), 因此需要一套完整的微服務(wù)解決方案。 在Java領(lǐng)域,Spring框架的出現(xiàn)給Java企業(yè)級軟件開發(fā)帶來 了福音, 提高了開發(fā)效率。 在2014年底,Spring團隊推出Spring Cloud, 目標使其成為Java 領(lǐng)域微服務(wù)架構(gòu)落地的...
...。2、流量的敏感性。傳統(tǒng)PC和web的應(yīng)用架構(gòu)可能不太關(guān)注數(shù)據(jù)量、流量,但移動端、無線端,流量有限,用戶非常關(guān)注。所以在架構(gòu)和協(xié)議設(shè)計以及數(shù)據(jù)上,要給予非常重點的關(guān)注。3、消息的可達性。在PC和web端一般認為消息發(fā)...
ChatGPT和Sora等AI大模型應(yīng)用,將AI大模型和算力需求的熱度不斷帶上新的臺階。哪里可以獲得...
大模型的訓(xùn)練用4090是不合適的,但推理(inference/serving)用4090不能說合適,...
圖示為GPU性能排行榜,我們可以看到所有GPU的原始相關(guān)性能圖表。同時根據(jù)訓(xùn)練、推理能力由高到低做了...