大數(shù)據(jù)什么時(shí)候提出SEARCH AGGREGATION
回答:這個(gè)太范化了吧。大數(shù)據(jù)架構(gòu)選擇的方案就有很多，海量數(shù)據(jù)的即席查詢本省就是業(yè)內(nèi)目前的痛點(diǎn)，暫時(shí)沒(méi)有太好的解決方案，kylin等框架也只是一個(gè)折中方案，如果你不是要求海量數(shù)據(jù)分析的秒級(jí)響應(yīng)的話sparkSql、presto等都是不錯(cuò)的方案，分鐘級(jí)別可以返回。
Paul_King
|
690人閱讀
回答:隨著云計(jì)算的高速發(fā)展，越來(lái)越多的應(yīng)用需要存儲(chǔ)海量數(shù)據(jù)，并且對(duì)高并發(fā)和處理海量數(shù)據(jù)提出了更高的要求，傳統(tǒng)的關(guān)系型數(shù)據(jù)庫(kù)對(duì)于這些應(yīng)用場(chǎng)景難以滿足應(yīng)用需求。作為NoSQL數(shù)據(jù)庫(kù)之一的MongoDB數(shù)據(jù)庫(kù)能夠完全滿足和解決在海量數(shù)據(jù)存儲(chǔ)方面的應(yīng)用，越來(lái)越多的大網(wǎng)站和企業(yè)選擇MongoDB代替Mysql進(jìn)行存儲(chǔ)。什么是MongoDB？MongoDB[1] 是一個(gè)基于分布式文件存儲(chǔ)的數(shù)據(jù)庫(kù)。由C 語(yǔ)言編寫。旨...
Enlightenment
|
1111人閱讀
回答:通常來(lái)說(shuō)，當(dāng)數(shù)據(jù)多、并發(fā)量大的時(shí)候，架構(gòu)中可以引入Redis，幫助提升架構(gòu)的整體性能，減少M(fèi)ysql(或其他數(shù)據(jù)庫(kù))的壓力，但不是使用Redis，就不用MySQL。因?yàn)镽edis的性能十分優(yōu)越，可以支持每秒十幾萬(wàn)此的讀/寫操作，并且它還支持持久化、集群部署、分布式、主從同步等，Redis在高并發(fā)的場(chǎng)景下數(shù)據(jù)的安全和一致性，所以它經(jīng)常用于兩個(gè)場(chǎng)景：緩存經(jīng)常會(huì)被查詢，但是不經(jīng)常被修改或者刪除的數(shù)據(jù)；比...
zacklee
|
3495人閱讀
回答:近幾年，大數(shù)據(jù)的概念逐漸深入人心，大數(shù)據(jù)的趨勢(shì)越來(lái)越火爆。但是，大數(shù)據(jù)到底是個(gè)啥？怎么樣才能玩好大數(shù)據(jù)呢？大數(shù)據(jù)的基本含義就是海量數(shù)據(jù)，麥肯錫全球研究所給出的定義是：一種規(guī)模大到在獲取、存儲(chǔ)、管理、分析方面大大超出了傳統(tǒng)數(shù)據(jù)庫(kù)軟件工具能力范圍的數(shù)據(jù)集合，具有海量的數(shù)據(jù)規(guī)模、快速的數(shù)據(jù)流轉(zhuǎn)、多樣的數(shù)據(jù)類型和價(jià)值密度低四大特征。數(shù)字經(jīng)濟(jì)的要素之一就是大數(shù)據(jù)資源，現(xiàn)在大家聊得最多的大數(shù)據(jù)是基于已經(jīng)存在的...
khlbat
|
819人閱讀
回答:在大數(shù)據(jù)領(lǐng)域大概有四個(gè)大的工作方向，除了大數(shù)據(jù)平臺(tái)應(yīng)用及開(kāi)發(fā)、大數(shù)據(jù)分析與應(yīng)用和大數(shù)據(jù)平臺(tái)集成與運(yùn)維之外，還有大數(shù)據(jù)平臺(tái)架構(gòu)與研發(fā)，除了以上四個(gè)大的工作方向之外，還有一個(gè)工作方向是大數(shù)據(jù)技術(shù)推廣和培訓(xùn)，這部分工作目前也有不少人在從事。大數(shù)據(jù)平臺(tái)架構(gòu)與研發(fā)主要的工作內(nèi)容是研發(fā)底層的大數(shù)據(jù)平臺(tái)，這部分工作的難度較高，從事這部分工作的研發(fā)級(jí)崗位也并不多?，F(xiàn)在不少技術(shù)研發(fā)團(tuán)隊(duì)都以Hadoop、Spark平...
zhangxiangliang
|
3519人閱讀
回答:采集記錄足夠多的數(shù)據(jù)，使工作更加針對(duì)化和精準(zhǔn)化，這是大數(shù)據(jù)嗎？這不是大數(shù)據(jù)而只是數(shù)據(jù)化。什么是大數(shù)據(jù)呢？例如洛杉磯警方曾對(duì)以往的刑事案件做了統(tǒng)計(jì)，通過(guò)算法得出了第二天的高概率犯罪地點(diǎn)，然后有針對(duì)性的派警察去該處巡邏，從而使得當(dāng)?shù)氐姆缸铿F(xiàn)象下降20%。這是大數(shù)據(jù)。再比如，經(jīng)濟(jì)學(xué)家都認(rèn)為股票無(wú)法預(yù)測(cè)，而一位劍橋大學(xué)畢業(yè)的博士搞了個(gè)公司，對(duì)有史以來(lái)幾乎所有的證券交易的數(shù)據(jù)進(jìn)行記錄，然后通過(guò)算法進(jìn)行分析。...
DevWiki
|
668人閱讀
云計(jì)算正在走向成熟，大數(shù)據(jù)正在發(fā)展 在經(jīng)歷了對(duì)云計(jì)算的認(rèn)識(shí)以后，已經(jīng)成為當(dāng)前信息通信行業(yè)的主旋律。我們可以用維基百科看一看當(dāng)前對(duì)三個(gè)重要技術(shù)概念的理解。一個(gè)是曾經(jīng)人們跟云計(jì)算混淆不清的網(wǎng)格計(jì)算，一個(gè)是...
...機(jī)器學(xué)習(xí)與深度學(xué)習(xí)？ 大家好，我是楊鋒，作為一個(gè)大數(shù)據(jù)從業(yè)人員，相信大家整天都在被 AI、機(jī)器學(xué)習(xí)、深度學(xué)習(xí)等一些概念轟炸。有時(shí)候甚至有點(diǎn)誠(chéng)惶誠(chéng)恐，一方面作為一個(gè)業(yè)內(nèi)人士而自豪，二方面覺(jué)得新概念一個(gè)接...
...原始鏈接：http://www.ituring.com.cn/article/177529 董飛，Coursera數(shù)據(jù)工程師。曾先后在創(chuàng)業(yè)公司酷迅，百度基礎(chǔ)架構(gòu)組，Amazon 云計(jì)算部門，LinkedIn擔(dān)任高級(jí)工程師，負(fù)責(zé)垂直搜索，百度云計(jì)算平臺(tái)研發(fā)和廣告系統(tǒng)的架構(gòu)。董飛本科畢業(yè)...
...水平擴(kuò)容、分庫(kù)分表、異步削峰這樣的技術(shù)或者我所在的數(shù)據(jù)領(lǐng)域的中間件的出現(xiàn)和發(fā)展門檻是不是很高呢？是不是一個(gè)架構(gòu)師應(yīng)該有的核心競(jìng)爭(zhēng)力？ 在我看來(lái)，也不是，起碼不全是。 因?yàn)檎_的技術(shù)選型，中間件的合理運(yùn)用...
...到幾十個(gè)。但是接下來(lái)另外一個(gè)瓶頸又出現(xiàn)了，他們用的數(shù)據(jù)庫(kù)也是單數(shù)據(jù)庫(kù)，同樣有擴(kuò)展性的問(wèn)題。這個(gè)問(wèn)題可以通過(guò)改用集群版數(shù)據(jù)庫(kù)來(lái)解決。最終雖然所有的問(wèn)題得到了解決，但是耽誤了時(shí)間也產(chǎn)生了損失，他們?cè)诰€人數(shù)...
...到幾十個(gè)。但是接下來(lái)另外一個(gè)瓶頸又出現(xiàn)了，他們用的數(shù)據(jù)庫(kù)也是單數(shù)據(jù)庫(kù)，同樣有擴(kuò)展性的問(wèn)題。這個(gè)問(wèn)題可以通過(guò)改用集群版數(shù)據(jù)庫(kù)來(lái)解決。最終雖然所有的問(wèn)題得到了解決，但是耽誤了時(shí)間也產(chǎn)生了損失，他們?cè)诰€人數(shù)...
...到幾十個(gè)。但是接下來(lái)另外一個(gè)瓶頸又出現(xiàn)了，他們用的數(shù)據(jù)庫(kù)也是單數(shù)據(jù)庫(kù)，同樣有擴(kuò)展性的問(wèn)題。這個(gè)問(wèn)題可以通過(guò)改用集群版數(shù)據(jù)庫(kù)來(lái)解決。最終雖然所有的問(wèn)題得到了解決，但是耽誤了時(shí)間也產(chǎn)生了損失，他們?cè)诰€人數(shù)...
...貸業(yè)務(wù)獲客、風(fēng)控管理已經(jīng)嚴(yán)重依賴于技術(shù)交易和現(xiàn)在的數(shù)據(jù)模型。所以這個(gè)領(lǐng)域?qū)τ诮鹑陬I(lǐng)域自身改革，金融數(shù)字化轉(zhuǎn)型基礎(chǔ)就是IT設(shè)施的支撐，無(wú)論從行業(yè)服務(wù)的需要還是我們自身發(fā)展的需要，我們迫切需要解決云計(jì)算應(yīng)用...
ChatGPT和Sora等AI大模型應(yīng)用，將AI大模型和算力需求的熱度不斷帶上新的臺(tái)階。哪里可以獲得...
大模型的訓(xùn)練用4090是不合適的，但推理（inference/serving）用4090不能說(shuō)合適，...
圖示為GPU性能排行榜，我們可以看到所有GPU的原始相關(guān)性能圖表。同時(shí)根據(jù)訓(xùn)練、推理能力由高到低做了...
