大數(shù)據(jù)如何統(tǒng)計(jì)SEARCH AGGREGATION
回答:目前階段大數(shù)據(jù)技術(shù)及體系已經(jīng)逐漸趨于成熟，不再是以概念貫穿的模式，大數(shù)據(jù)越來越多的被使用，伴隨互聯(lián)網(wǎng)化的發(fā)展更多的企業(yè)信息化已經(jīng)由IT時(shí)代轉(zhuǎn)變?yōu)镈T時(shí)代，以數(shù)據(jù)為核心，用數(shù)據(jù)進(jìn)行決策，基于數(shù)據(jù)驅(qū)動(dòng)企業(yè)的創(chuàng)新與發(fā)展，相信在將來大數(shù)據(jù)也會(huì)有更廣泛的應(yīng)用空間，對(duì)于大數(shù)據(jù)的理解主要分為以下幾個(gè)層面。1.數(shù)據(jù)來源：對(duì)于大數(shù)據(jù)時(shí)代而言更多強(qiáng)調(diào)基于業(yè)務(wù)數(shù)據(jù)的沉淀，在一定規(guī)模的數(shù)據(jù)上進(jìn)行進(jìn)一步的分析、處理、轉(zhuǎn)換，...
arashicage
|
1248人閱讀
回答:大數(shù)據(jù)是處理海量數(shù)據(jù)的一種技術(shù)，你說的寫SQL只能處理結(jié)構(gòu)化數(shù)據(jù)，更多的是非結(jié)構(gòu)化數(shù)據(jù)（文本數(shù)據(jù)），和半結(jié)構(gòu)化數(shù)據(jù)。并且通過SQL處理的數(shù)據(jù)量一般很少，幾個(gè)T就根本不行，大數(shù)據(jù)涉及存儲(chǔ)（存儲(chǔ)級(jí)別為PB級(jí)別），資源調(diào)度（一般是分布式系統(tǒng)，不是一臺(tái)機(jī)器），計(jì)算框架（hadoop;storm;spark）這三部分，缺一不可，你說的寫SQL只是相當(dāng)于計(jì)算框架（勉強(qiáng)算得上，性能差遠(yuǎn)了）。
tracymac7
|
803人閱讀
回答:這是一個(gè)非常好的問題，作為一名IT從業(yè)者，同時(shí)也在帶大數(shù)據(jù)方向的研究生，所以我來回答一下這個(gè)問題。首先，從技術(shù)體系結(jié)構(gòu)上來看，當(dāng)前的大數(shù)據(jù)技術(shù)已經(jīng)趨于成熟了，在數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)分析、數(shù)據(jù)呈現(xiàn)和數(shù)據(jù)應(yīng)用等方面，已經(jīng)形成了一整套技術(shù)框架，相關(guān)的技術(shù)生態(tài)也在不斷完善當(dāng)中。當(dāng)前大型科技公司也開始逐漸形成自己的大數(shù)據(jù)平臺(tái)，不同平臺(tái)也都有自身的技術(shù)特點(diǎn)，總的來說，當(dāng)前在技術(shù)上已經(jīng)為大數(shù)據(jù)的行業(yè)應(yīng)用創(chuàng)新奠定了基礎(chǔ)...
alexnevsky
|
1187人閱讀
回答:謝謝邀請(qǐng)！大數(shù)據(jù)是我的主要研究方向之一，同時(shí)也在帶大數(shù)據(jù)方向的研究生，所以我來回答一下這個(gè)問題。學(xué)習(xí)大數(shù)據(jù)首先要根據(jù)自身的知識(shí)結(jié)構(gòu)選擇學(xué)習(xí)方向，比如數(shù)學(xué)和統(tǒng)計(jì)學(xué)專業(yè)的學(xué)生可以選擇數(shù)據(jù)分析方向，而計(jì)算機(jī)專業(yè)的學(xué)生可以選擇大數(shù)據(jù)開發(fā)方向，不同的學(xué)習(xí)方向需要制定不同的學(xué)習(xí)計(jì)劃。雖然不同的學(xué)習(xí)方向往往需要學(xué)習(xí)不同的內(nèi)容，但是對(duì)于零基礎(chǔ)的學(xué)習(xí)者來說，以下三方面基礎(chǔ)知識(shí)是都需要學(xué)習(xí)的：第一：編程語言。不論是選...
546669204
|
638人閱讀
...，查詢引擎面臨的挑戰(zhàn)的細(xì)節(jié)，這些細(xì)節(jié)也可以作為訪問數(shù)據(jù)庫(kù)引擎、查詢引擎和存儲(chǔ)引擎組合以及滿足事務(wù)、運(yùn)營(yíng)、分析或混合工作負(fù)載需求的指南。以下評(píng)估選項(xiàng)實(shí)際上也是面臨的挑戰(zhàn)： 為了滿足您的工作負(fù)載需求，查詢...
我們稱這個(gè)時(shí)代為大數(shù)據(jù)時(shí)代之時(shí)，也將其稱之為云計(jì)算時(shí)代，這究竟是誰的時(shí)代?數(shù)據(jù)中心與云計(jì)算在未來又該如何相處?我們時(shí)常提到的數(shù)據(jù)中心是指一整套復(fù)雜的設(shè)施，它包括計(jì)算機(jī)系統(tǒng)和其它與之配套的設(shè)備，還包含了冗...
線上服務(wù)的有效監(jiān)控和數(shù)據(jù)收集，一直是后端服務(wù)離不開的話題。直播 CDN 作為一種經(jīng)典的分布式系統(tǒng)，監(jiān)控以及數(shù)據(jù)收集更是必不可少的工作。如何對(duì)海量的服務(wù)集群有效的監(jiān)控和保活，又如何抓取集群中的碎片數(shù)據(jù)中來優(yōu)...
線上服務(wù)的有效監(jiān)控和數(shù)據(jù)收集，一直是后端服務(wù)離不開的話題。直播 CDN 作為一種經(jīng)典的分布式系統(tǒng)，監(jiān)控以及數(shù)據(jù)收集更是必不可少的工作。如何對(duì)海量的服務(wù)集群有效的監(jiān)控和保活，又如何抓取集群中的碎片數(shù)據(jù)中來優(yōu)...
線上服務(wù)的有效監(jiān)控和數(shù)據(jù)收集，一直是后端服務(wù)離不開的話題。直播作為一種經(jīng)典的分布式系統(tǒng)，監(jiān)控以及數(shù)據(jù)收集更是必不可少的工作。如何對(duì)海量的服務(wù)集群有效的監(jiān)控和?；睿秩绾巫ト〖褐械乃槠瑪?shù)據(jù)中來優(yōu)化...
線上服務(wù)的有效監(jiān)控和數(shù)據(jù)收集，一直是后端服務(wù)離不開的話題。直播作為一種經(jīng)典的分布式系統(tǒng)，監(jiān)控以及數(shù)據(jù)收集更是必不可少的工作。如何對(duì)海量的服務(wù)集群有效的監(jiān)控和?；睿秩绾巫ト〖褐械乃槠瑪?shù)據(jù)中來優(yōu)化...
... 視界云認(rèn)為其中有兩個(gè)核心的點(diǎn)需要被關(guān)注：技術(shù)指標(biāo)數(shù)據(jù)&服務(wù)支撐。 技術(shù)指標(biāo)數(shù)據(jù)：總體上： 穩(wěn)定運(yùn)行、良好的性價(jià)比、靈活便捷、節(jié)點(diǎn)覆蓋范圍廣、質(zhì)量有保證、豐富的行業(yè)經(jīng)驗(yàn)和為人稱道的服務(wù)意識(shí)、 DNS 調(diào)度準(zhǔn)確、寬...
ChatGPT和Sora等AI大模型應(yīng)用，將AI大模型和算力需求的熱度不斷帶上新的臺(tái)階。哪里可以獲得...
大模型的訓(xùn)練用4090是不合適的，但推理（inference/serving）用4090不能說合適，...
圖示為GPU性能排行榜，我們可以看到所有GPU的原始相關(guān)性能圖表。同時(shí)根據(jù)訓(xùn)練、推理能力由高到低做了...
leiyi
孫吉亮
