大數(shù)據(jù)架構什么SEARCH AGGREGATION
回答:這個太范化了吧。大數(shù)據(jù)架構選擇的方案就有很多，海量數(shù)據(jù)的即席查詢本省就是業(yè)內(nèi)目前的痛點，暫時沒有太好的解決方案，kylin等框架也只是一個折中方案，如果你不是要求海量數(shù)據(jù)分析的秒級響應的話sparkSql、presto等都是不錯的方案，分鐘級別可以返回。
Paul_King
|
694人閱讀
回答:近幾年，大數(shù)據(jù)的概念逐漸深入人心，大數(shù)據(jù)的趨勢越來越火爆。但是，大數(shù)據(jù)到底是個啥？怎么樣才能玩好大數(shù)據(jù)呢？大數(shù)據(jù)的基本含義就是海量數(shù)據(jù)，麥肯錫全球研究所給出的定義是：一種規(guī)模大到在獲取、存儲、管理、分析方面大大超出了傳統(tǒng)數(shù)據(jù)庫軟件工具能力范圍的數(shù)據(jù)集合，具有海量的數(shù)據(jù)規(guī)模、快速的數(shù)據(jù)流轉(zhuǎn)、多樣的數(shù)據(jù)類型和價值密度低四大特征。數(shù)字經(jīng)濟的要素之一就是大數(shù)據(jù)資源，現(xiàn)在大家聊得最多的大數(shù)據(jù)是基于已經(jīng)存在的...
khlbat
|
823人閱讀
回答:在大數(shù)據(jù)領域大概有四個大的工作方向，除了大數(shù)據(jù)平臺應用及開發(fā)、大數(shù)據(jù)分析與應用和大數(shù)據(jù)平臺集成與運維之外，還有大數(shù)據(jù)平臺架構與研發(fā)，除了以上四個大的工作方向之外，還有一個工作方向是大數(shù)據(jù)技術推廣和培訓，這部分工作目前也有不少人在從事。大數(shù)據(jù)平臺架構與研發(fā)主要的工作內(nèi)容是研發(fā)底層的大數(shù)據(jù)平臺，這部分工作的難度較高，從事這部分工作的研發(fā)級崗位也并不多。現(xiàn)在不少技術研發(fā)團隊都以Hadoop、Spark平...
zhangxiangliang
|
3534人閱讀
回答:采集記錄足夠多的數(shù)據(jù)，使工作更加針對化和精準化，這是大數(shù)據(jù)嗎？這不是大數(shù)據(jù)而只是數(shù)據(jù)化。什么是大數(shù)據(jù)呢？例如洛杉磯警方曾對以往的刑事案件做了統(tǒng)計，通過算法得出了第二天的高概率犯罪地點，然后有針對性的派警察去該處巡邏，從而使得當?shù)氐姆缸铿F(xiàn)象下降20%。這是大數(shù)據(jù)。再比如，經(jīng)濟學家都認為股票無法預測，而一位劍橋大學畢業(yè)的博士搞了個公司，對有史以來幾乎所有的證券交易的數(shù)據(jù)進行記錄，然后通過算法進行分析。...
DevWiki
|
674人閱讀
回答:很高興能夠看到和回答這個問題！如今這個時代，大數(shù)據(jù)，云計算這些熱門概念是人們茶余飯后議論的熱點話題，然而很多人還是搞不清楚什么是大數(shù)據(jù)。今天，每日精彩科技將根據(jù)自己的經(jīng)驗回答這個問題！什么是大數(shù)據(jù)？半個世紀以來，當計算機技術全面融入社會，信息不斷積累，直至變革開始。它不僅充滿了信息，而且加速了信息的增長。在天文學、遺傳學等信息爆炸的領域，出現(xiàn)了 大數(shù)據(jù) 的概念。如今，這一概念幾乎適用于人類思維和發(fā)...
guyan0319
|
742人閱讀
回答:近年來，大數(shù)據(jù)非常火，人人都談大數(shù)據(jù)。但也有人認為，大數(shù)據(jù)是華而不實，沒有什么實際意義。那么大數(shù)據(jù)究竟是什么？大數(shù)據(jù)能為我們帶來什么呢？我們一起來看一看。大數(shù)據(jù)是什么？對于很多人來說，當?shù)谝淮温牭酱髷?shù)據(jù)這個詞的時候，就會自然而然地從字面上去理解：大數(shù)據(jù)就是大量的數(shù)據(jù)，大數(shù)據(jù)技術就是大量數(shù)據(jù)的存儲和處理技術。然而，事實并非如此，大數(shù)據(jù)比我們一般的想象更為復雜。大數(shù)據(jù)技術不只是一項數(shù)據(jù)處理和存儲的技術...
Julylovin
|
630人閱讀
...藝術節(jié)上，Motley Fool的Tim Byers說過：在很多方面，云和大數(shù)據(jù)越來越密不可分且功能相似-云資源用來支撐大數(shù)據(jù)的存儲及項目，而且大數(shù)據(jù)相對于云來說是一個龐大的業(yè)務案例。大數(shù)據(jù)和云技術的最終聯(lián)姻，必定是天作之合。 ?...
大數(shù)據(jù)的應用開發(fā)過于偏向底層，具有學習難度大，涉及技術面廣的問題，這制約了大數(shù)據(jù)的普及。現(xiàn)在需要一種技術，把大數(shù)據(jù)開發(fā)中一些通用的，重復使用的基礎代碼、算法封裝為類庫，降低大數(shù)據(jù)的學習門檻，降低開...
...系統(tǒng)，以及很多太短的通用平臺與系統(tǒng)，主要關注架構、數(shù)據(jù)庫、O2O等方面的技術。 壹佰案例： 作為同時負責過58同城和58到家業(yè)務的架構師，可否從架構方向談下兩項業(yè)務的技術難點有何不同？ 沈劍：58同城是一個信息平臺...
...是幾次的訪問。此時網(wǎng)站架構的特點：請求量是比較低，數(shù)據(jù)量比較小，代碼量也比較小?？赡苷?guī)讉€工程師，很容易就做一個這樣的站點，根本沒什么「架構」可言。 其實，這也是很多創(chuàng)業(yè)公司初期面臨的問題，最開始58同城...
我們現(xiàn)在的社會正在步入物聯(lián)網(wǎng)、大數(shù)據(jù)和云計算時代。這些技術中的每一個都會有瓶頸，例如可伸縮性差安全性問題以及傳統(tǒng)信息技術框架中的安裝困難，容錯、維護和性能低下。因此，我們需要利用這些技術中的每一種來找...
... TiDB DevCon 2019 上，我司聯(lián)合創(chuàng)始人兼 CTO 黃東旭分享了對數(shù)據(jù)庫行業(yè)大趨勢以及未來數(shù)據(jù)庫技術的看法。以下是演講實錄，enjoy~ 我司聯(lián)合創(chuàng)始人兼 CTO 黃東旭 大家今天在這里看到了 TiDB 社區(qū)用戶實踐分享和我們自己的一些技術...
... TiDB DevCon 2019 上，我司聯(lián)合創(chuàng)始人兼 CTO 黃東旭分享了對數(shù)據(jù)庫行業(yè)大趨勢以及未來數(shù)據(jù)庫技術的看法。以下是演講實錄，enjoy~ 我司聯(lián)合創(chuàng)始人兼 CTO 黃東旭 大家今天在這里看到了 TiDB 社區(qū)用戶實踐分享和我們自己的一些技術...
大數(shù)據(jù)正在徹底改變IT世界。那么，什么樣的數(shù)據(jù)談得上數(shù)據(jù)呢? ? 根據(jù)IDC的報告，未來十年全球大數(shù)據(jù)將增加50倍。僅在2011年，我們就將看到1.8ZB(也就是1.8萬億GB)的大數(shù)據(jù)創(chuàng)建產(chǎn)生。這相當于每位美國人每分鐘寫3條Tweet，而...
?????? 大數(shù)據(jù)正在徹底改變IT世界。那么，什么樣的數(shù)據(jù)談得上數(shù)據(jù)呢? 根據(jù)IDC的報告，未來十年全球大數(shù)據(jù)將增加50倍。僅在2011年，我們就將看到1.8ZB(也就是1.8萬億GB)的大數(shù)據(jù)創(chuàng)建產(chǎn)生。這相當于每位美國人每分鐘寫3條...
...于超融合統(tǒng)一構建的私有云、托管云和混合云，以及構建數(shù)據(jù)中心資源池的超融合一體機；基礎架構業(yè)務則包括桌面云、SD－WAN、應用交付，和今天正式發(fā)布的企業(yè)級分布式存儲EDS。同時，深信服智安全＋云計算＋新IT3大業(yè)...
...Dubbo，然后另外涉及到了Redis緩存、RocketMQ作為消息系統(tǒng)、數(shù)據(jù)庫中間件。平時正常開發(fā)都沒多大問題，就是基于Dubbo寫一些服務，然后在里面填充業(yè)務邏輯就OK。也許有時候架構設計會用到Redis，也可能會用到RocketMQ，也會用到數(shù)...
...下游依賴關系圖，在故障發(fā)生時，開發(fā)人員可以借助依賴數(shù)據(jù)快速定位到問題的來源，極大縮短問題修復時間（MTTR）。借助架構圖，我們還可以梳理出系統(tǒng)中存在的強弱依賴，在業(yè)務高峰期對弱依賴進行降級，或者針對系統(tǒng)依...
ChatGPT和Sora等AI大模型應用，將AI大模型和算力需求的熱度不斷帶上新的臺階。哪里可以獲得...
大模型的訓練用4090是不合適的，但推理（inference/serving）用4090不能說合適，...
圖示為GPU性能排行榜，我們可以看到所有GPU的原始相關性能圖表。同時根據(jù)訓練、推理能力由高到低做了...
