大數(shù)據(jù)架構(gòu)工作內(nèi)容SEARCH AGGREGATION
回答:這個(gè)太范化了吧。大數(shù)據(jù)架構(gòu)選擇的方案就有很多，海量數(shù)據(jù)的即席查詢本省就是業(yè)內(nèi)目前的痛點(diǎn)，暫時(shí)沒(méi)有太好的解決方案，kylin等框架也只是一個(gè)折中方案，如果你不是要求海量數(shù)據(jù)分析的秒級(jí)響應(yīng)的話sparkSql、presto等都是不錯(cuò)的方案，分鐘級(jí)別可以返回。
Paul_King
|
690人閱讀
回答:大數(shù)據(jù)技術(shù)包括數(shù)據(jù)采集，數(shù)據(jù)管理，數(shù)據(jù)分析，數(shù)據(jù)可視化，數(shù)據(jù)安全等內(nèi)容。數(shù)據(jù)分析的核心是機(jī)器學(xué)習(xí)，當(dāng)然也包括深度學(xué)習(xí)和強(qiáng)化學(xué)習(xí)，以及自然語(yǔ)言處理，圖與網(wǎng)絡(luò)分析等。
wean
|
2490人閱讀
回答:先上一張大數(shù)據(jù)技術(shù)學(xué)習(xí)的必備技能圖：入門學(xué)習(xí)需要掌握的基本技能：1、Java2、Linux命令3、HDFS4、MapReduce5、 Hadoop6、Hive7、ZooKeeper8、HBase9、Redis10、Flume11、SSM12、Kafka13、Scala14、Spark15、MongoDB16、Python與數(shù)據(jù)分析等等。我們所說(shuō)的大數(shù)據(jù)培訓(xùn)學(xué)習(xí)，一般是指大數(shù)據(jù)開(kāi)發(fā)。大數(shù)據(jù)開(kāi)發(fā)需要學(xué)...
felix0913
|
1308人閱讀
回答:在大數(shù)據(jù)領(lǐng)域大概有四個(gè)大的工作方向，除了大數(shù)據(jù)平臺(tái)應(yīng)用及開(kāi)發(fā)、大數(shù)據(jù)分析與應(yīng)用和大數(shù)據(jù)平臺(tái)集成與運(yùn)維之外，還有大數(shù)據(jù)平臺(tái)架構(gòu)與研發(fā)，除了以上四個(gè)大的工作方向之外，還有一個(gè)工作方向是大數(shù)據(jù)技術(shù)推廣和培訓(xùn)，這部分工作目前也有不少人在從事。大數(shù)據(jù)平臺(tái)架構(gòu)與研發(fā)主要的工作內(nèi)容是研發(fā)底層的大數(shù)據(jù)平臺(tái)，這部分工作的難度較高，從事這部分工作的研發(fā)級(jí)崗位也并不多?，F(xiàn)在不少技術(shù)研發(fā)團(tuán)隊(duì)都以Hadoop、Spark平...
zhangxiangliang
|
3520人閱讀
回答:這是一個(gè)非常好的問(wèn)題，也是很多初學(xué)者比較關(guān)心的問(wèn)題，作為一名IT從業(yè)者，我來(lái)回答一下。首先，所謂的Java大數(shù)據(jù)通常指的是采用Java語(yǔ)言來(lái)完成一些大數(shù)據(jù)領(lǐng)域的開(kāi)發(fā)任務(wù)，整體的學(xué)習(xí)內(nèi)容涉及到三大塊，其一是Java語(yǔ)言基礎(chǔ)，其二是大數(shù)據(jù)平臺(tái)基礎(chǔ)，其三是場(chǎng)景開(kāi)發(fā)基礎(chǔ)?？傮w上來(lái)說(shuō)，Java大數(shù)據(jù)的學(xué)習(xí)內(nèi)容是比較多的，而且也具有一定的難度。java語(yǔ)言基礎(chǔ)部分的學(xué)習(xí)內(nèi)容相對(duì)比較明確，由于Java語(yǔ)言本身的...
kelvinlee
|
778人閱讀
回答:很多初學(xué)者在學(xué)習(xí)大數(shù)據(jù)之前往往都有這樣一個(gè)疑問(wèn)，那就是學(xué)習(xí)多久才能掌握相關(guān)的技術(shù)，達(dá)到就業(yè)崗位的要求？要想知道類似問(wèn)題的答案需要從多個(gè)角度來(lái)分析，大數(shù)據(jù)本身涉及到一系列圍繞數(shù)據(jù)的相關(guān)技術(shù)，這些技術(shù)涉及到大數(shù)據(jù)平臺(tái)技術(shù)、大數(shù)據(jù)開(kāi)發(fā)技術(shù)、數(shù)據(jù)分析技術(shù)、數(shù)據(jù)呈現(xiàn)技術(shù)、數(shù)據(jù)采集整理技術(shù)等等，這些技術(shù)既有區(qū)別又有聯(lián)系，相關(guān)技術(shù)也都有相對(duì)應(yīng)的崗位，所以作為學(xué)習(xí)者來(lái)說(shuō)應(yīng)該選擇一個(gè)細(xì)分方向來(lái)學(xué)習(xí)，而不能簡(jiǎn)單的說(shuō)學(xué)...
newtrek
|
1424人閱讀
本文授權(quán)轉(zhuǎn)載自公眾號(hào)蛋蛋團(tuán)。 01 數(shù)據(jù)中心是什么 數(shù)據(jù)中心，指用于安置計(jì)算機(jī)系統(tǒng)及相關(guān)部件的設(shè)施，例如電信和儲(chǔ)存系統(tǒng)。 為了滿足自身的業(yè)務(wù)需求，保證數(shù)據(jù)的穩(wěn)定和可靠。無(wú)論是互聯(lián)網(wǎng)還是傳統(tǒng)行業(yè)，都會(huì)有自己...
...系統(tǒng)，以及很多太短的通用平臺(tái)與系統(tǒng)，主要關(guān)注架構(gòu)、數(shù)據(jù)庫(kù)、O2O等方面的技術(shù)。 壹佰案例： 作為同時(shí)負(fù)責(zé)過(guò)58同城和58到家業(yè)務(wù)的架構(gòu)師，可否從架構(gòu)方向談下兩項(xiàng)業(yè)務(wù)的技術(shù)難點(diǎn)有何不同？ 沈劍：58同城是一個(gè)信息平臺(tái)...
...出版的技術(shù)圖書 即將出版的《深入理解XXXXXXXXX》 《海量數(shù)據(jù)處理與大數(shù)據(jù)技術(shù)實(shí)戰(zhàn)》 《MySQL技術(shù)大全：開(kāi)發(fā)、優(yōu)化與運(yùn)維實(shí)戰(zhàn)》 《深入理解高并發(fā)編程》 《并發(fā)編程核心知識(shí)》 《冰河的滲透實(shí)戰(zhàn)筆記》 《我要進(jìn)大廠系列之面...
...、微服務(wù)架構(gòu)及 Serverless、中間件平臺(tái)、容器、AI DevOps、數(shù)據(jù)庫(kù)、大前端、Fintech、機(jī)器學(xué)習(xí)、人工智能、智能硬件、效率管理等 20 個(gè)技術(shù)專題。 史海峰、惠新宸、袁進(jìn)輝、沈劍、陳皓等經(jīng)驗(yàn)豐富的一線技術(shù)團(tuán)隊(duì)帶頭人現(xiàn)場(chǎng)分享...
...、微服務(wù)架構(gòu)及 Serverless、中間件平臺(tái)、容器、AI DevOps、數(shù)據(jù)庫(kù)、大前端、Fintech、機(jī)器學(xué)習(xí)、人工智能、智能硬件、效率管理等 20 個(gè)技術(shù)專題。 史海峰、惠新宸、袁進(jìn)輝、沈劍、陳皓等經(jīng)驗(yàn)豐富的一線技術(shù)團(tuán)隊(duì)帶頭人現(xiàn)場(chǎng)分享...
...開(kāi)發(fā)模式和要求展現(xiàn)，結(jié)合云引擎的架構(gòu)、Monitor，定義數(shù)據(jù)模型等來(lái)提高 H5 性能、實(shí)用性及持續(xù)性。 Slides: http://pan.baidu.com/s/1mgIj7DI 陳愷 《微服務(wù)架構(gòu)云端實(shí)踐》 第二位分享嘉賓是靈雀云的 CTO 陳愷，關(guān)于微服務(wù)架構(gòu)的實(shí)踐經(jīng)...
大數(shù)據(jù)時(shí)代為數(shù)據(jù)存儲(chǔ)帶來(lái)壓力，越來(lái)越多的組織需要在云計(jì)算的技術(shù)基礎(chǔ)上搭建起能夠存儲(chǔ)大量結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)的存儲(chǔ)平臺(tái)。云存儲(chǔ)應(yīng)云而生。 所謂云存儲(chǔ)，是指通過(guò)集群應(yīng)用、網(wǎng)格技術(shù)或分布式文件系統(tǒng)等...
ChatGPT和Sora等AI大模型應(yīng)用，將AI大模型和算力需求的熱度不斷帶上新的臺(tái)階。哪里可以獲得...
大模型的訓(xùn)練用4090是不合適的，但推理（inference/serving）用4090不能說(shuō)合適，...
圖示為GPU性能排行榜，我們可以看到所有GPU的原始相關(guān)性能圖表。同時(shí)根據(jù)訓(xùn)練、推理能力由高到低做了...
