回答:這個(gè)太范化了吧。大數(shù)據(jù)架構(gòu)選擇的方案就有很多,海量數(shù)據(jù)的即席查詢(xún)本省就是業(yè)內(nèi)目前的痛點(diǎn),暫時(shí)沒(méi)有太好的解決方案,kylin等框架也只是一個(gè)折中方案,如果你不是要求海量數(shù)據(jù)分析的秒級(jí)響應(yīng)的話(huà)sparkSql、presto等都是不錯(cuò)的方案,分鐘級(jí)別可以返回。
回答:現(xiàn)在有幸參與傳統(tǒng)銀行數(shù)字化轉(zhuǎn)型,負(fù)責(zé)技術(shù)架構(gòu)部分的轉(zhuǎn)型設(shè)計(jì)。高性能的數(shù)據(jù)架構(gòu)(High Performance Data Architecture),正是我們架構(gòu)轉(zhuǎn)型的重點(diǎn)。隨著科技的蓬勃發(fā)展、社交網(wǎng)絡(luò)的廣泛使用、線(xiàn)上消費(fèi)的普及、數(shù)據(jù)挖掘的技術(shù)提升等大趨勢(shì),全球銀行業(yè)正迎來(lái)一場(chǎng)聲勢(shì)浩大的數(shù)字化創(chuàng)新浪潮。數(shù)字化為消費(fèi)者的生活及行為模式帶來(lái)翻天覆地的變化,也孵化出一批新型的金融科技(Fintech)競(jìng)...
回答:以mysql為列:1:支撐高并發(fā)系統(tǒng),一定會(huì)涉及事務(wù),所以數(shù)據(jù)庫(kù)引擎必選innodb,innodb支持事務(wù),事務(wù)級(jí)別根據(jù)業(yè)務(wù)而定,如果業(yè)務(wù)數(shù)據(jù)一致性要求很高,事務(wù)就開(kāi)啟序列化級(jí)別,這樣就完全隔離事務(wù),但是會(huì)導(dǎo)致鎖資源競(jìng)爭(zhēng)加劇。mysql的性能有一定的降低。2:讀寫(xiě)分離,數(shù)據(jù)庫(kù)分成主庫(kù)和從庫(kù),主庫(kù)負(fù)責(zé)寫(xiě)數(shù)據(jù),叢庫(kù)負(fù)責(zé)讀數(shù)據(jù)。注意主從數(shù)據(jù)庫(kù)數(shù)據(jù)一致性問(wèn)題。3:冷熱數(shù)據(jù)分離,美團(tuán),餓了么部分設(shè)計(jì)采用冷熱...
回答:一名PHP程序員的基本要求:1、精通html、CSS、JS等網(wǎng)站前端技術(shù)。2、掌握PHP編程技術(shù)。3、了解Linux及Apache、MySql4、知道基本的網(wǎng)絡(luò)原理,了解TCP/IP協(xié)議。5、了解基本的軟件工程知識(shí)和軟件設(shè)計(jì)技術(shù)。
回答:目前最可靠的倉(cāng)庫(kù)不是機(jī)械硬盤(pán),不是ssd,不是u盤(pán),是光盤(pán),雖然,市面上已經(jīng)很少見(jiàn)到光盤(pán),但光盤(pán)目前還是最廉價(jià)最可靠的個(gè)人用存儲(chǔ)介質(zhì),本人20年前刻錄的dvd光盤(pán),依然能讀取數(shù)據(jù),試問(wèn),還有多少人20年前的硬盤(pán)還健在?目前,容量最大的光盤(pán)是藍(lán)光光盤(pán),價(jià)格也很低廉,一片容量為23g的刻錄光盤(pán),最多3元錢(qián),藍(lán)光刻錄光驅(qū),也僅300元左右一臺(tái),僅僅是一塊1t機(jī)械盤(pán)的價(jià)格,但它可存儲(chǔ)的容量,就是它的刻錄壽...
回答:軟件產(chǎn)品架構(gòu)是不斷迭代演化的,從單體服務(wù)架構(gòu)發(fā)展到現(xiàn)在的服務(wù)化、微服務(wù)的架構(gòu)。單體架構(gòu)單體架構(gòu)就是所有的業(yè)務(wù)模塊都是耦合在一個(gè)項(xiàng)目中,開(kāi)發(fā)、部署都在一起;如果其中一個(gè)模塊需要上線(xiàn)升級(jí),那么所有模塊都要一起啟停;在早期,單體架構(gòu)的項(xiàng)目團(tuán)隊(duì)成員需要是全棧,因?yàn)榍岸?、后端、?shù)據(jù)庫(kù)都是一波人負(fù)責(zé),后來(lái)開(kāi)始進(jìn)行了邏輯分層,團(tuán)隊(duì)也分成了前端 UI 團(tuán)隊(duì)、后端和 DBA 團(tuán)隊(duì),每個(gè)團(tuán)隊(duì)都有自己負(fù)責(zé)的職責(zé)。然而隨...
大數(shù)據(jù)正在徹底改變IT世界。那么,什么樣的數(shù)據(jù)談得上數(shù)據(jù)呢? ? 根據(jù)IDC的報(bào)告,未來(lái)十年全球大數(shù)據(jù)將增加50倍。僅在2011年,我們就將看到1.8ZB(也就是1.8萬(wàn)億GB)的大數(shù)據(jù)創(chuàng)建產(chǎn)生。這相當(dāng)于每位美國(guó)人每分鐘寫(xiě)3條Tweet,而...
?????? 大數(shù)據(jù)正在徹底改變IT世界。那么,什么樣的數(shù)據(jù)談得上數(shù)據(jù)呢? 根據(jù)IDC的報(bào)告,未來(lái)十年全球大數(shù)據(jù)將增加50倍。僅在2011年,我們就將看到1.8ZB(也就是1.8萬(wàn)億GB)的大數(shù)據(jù)創(chuàng)建產(chǎn)生。這相當(dāng)于每位美國(guó)人每分鐘寫(xiě)3條...
...邏輯,譬如控制人物的行走,戰(zhàn)斗,場(chǎng)景,聊天,存檔,數(shù)據(jù)庫(kù)等,都可以運(yùn)行在一個(gè)獨(dú)立的容器中。這一系列的容器,就構(gòu)成了一個(gè)獨(dú)立的游戲世界的自治系統(tǒng)。 目前,騰訊內(nèi)部業(yè)務(wù)運(yùn)行環(huán)境基本全部實(shí)現(xiàn)了容器化,在2014 Con...
云計(jì)算和數(shù)據(jù)倉(cāng)庫(kù)是合理的一對(duì)。云存儲(chǔ)可以按需擴(kuò)展,云可以將大量服務(wù)器貢獻(xiàn)于某一具體任務(wù)。數(shù)據(jù)倉(cāng)庫(kù)通用功能是本地?cái)?shù)據(jù)分析工具,受到計(jì)算和存儲(chǔ) 資源的限制,同時(shí)也受到設(shè)計(jì)者考慮新數(shù)據(jù)源集成的能力的限制。如...
...用性。在二中使用Docker的第二種方式就可以看出,我們將數(shù)據(jù)庫(kù)和Tomcat運(yùn)行在不同的容器中,從某種角度來(lái)說(shuō),這也降低了模塊之間的耦合性,便于拓展。比如我們要把MySQL替換為oracle,只需要再構(gòu)建一個(gè)oracle鏡像并啟動(dòng)與Tomcat...
云計(jì)算和數(shù)據(jù)倉(cāng)庫(kù)是合理的一對(duì)。云存儲(chǔ)可以按需擴(kuò)展,云可以將大量服務(wù)器貢獻(xiàn)于某一具體任務(wù)。數(shù)據(jù)倉(cāng)庫(kù)通用功能是本地?cái)?shù)據(jù)分析工具,受到計(jì)算和存儲(chǔ)資源的限制,同時(shí)也受到設(shè)計(jì)者考慮新數(shù)據(jù)源集成的能力的限制。如...
...迎訪(fǎng)問(wèn)網(wǎng)易云社區(qū),了解更多網(wǎng)易技術(shù)產(chǎn)品運(yùn)營(yíng)經(jīng)驗(yàn)。 數(shù)據(jù)倉(cāng)庫(kù)作為企業(yè)提供決策支持而構(gòu)建的集成化數(shù)據(jù)環(huán)境,本身并不產(chǎn)生或者消費(fèi)數(shù)據(jù),基本架構(gòu)包含的是數(shù)據(jù)流入流出的過(guò)程,首先放上一張數(shù)據(jù)倉(cāng)庫(kù)的架構(gòu)圖。數(shù)據(jù)倉(cāng)...
...含操作系統(tǒng),比如centos鏡像;有中間件鏡像,比如redis等數(shù)據(jù)庫(kù)鏡像;最后是應(yīng)用鏡像,就是指具體的應(yīng)用服務(wù)了,應(yīng)用鏡像可以非常豐富,隨時(shí)可以發(fā)布,這三者之間依次疊加。 所以當(dāng)我們?cè)谑褂?Docker構(gòu)建鏡像的時(shí)候,每一...
...r), 業(yè)務(wù)層,是最為核心的一層。 持久層(Data tier),數(shù)據(jù)持久層。 3 層架構(gòu)是存在物理上分層概念的,從上往下即展示層、業(yè)務(wù)層、持久層,也從上往下由上一層依賴(lài)下一層。不同層之間也是 高內(nèi)聚低耦合 的體現(xiàn),層內(nèi)高...
ChatGPT和Sora等AI大模型應(yīng)用,將AI大模型和算力需求的熱度不斷帶上新的臺(tái)階。哪里可以獲得...
大模型的訓(xùn)練用4090是不合適的,但推理(inference/serving)用4090不能說(shuō)合適,...
圖示為GPU性能排行榜,我們可以看到所有GPU的原始相關(guān)性能圖表。同時(shí)根據(jù)訓(xùn)練、推理能力由高到低做了...