大數(shù)據(jù)如何開(kāi)發(fā)SEARCH AGGREGATION
回答:隨著大數(shù)據(jù)應(yīng)用的逐漸落地，很多人都想從事大數(shù)據(jù)方面的工作，這其中自然就有很多非大數(shù)據(jù)相關(guān)專(zhuān)業(yè)（數(shù)學(xué)、計(jì)算機(jī)、統(tǒng)計(jì)學(xué)）的從業(yè)者，那么大數(shù)據(jù)到底能不能從零基礎(chǔ)開(kāi)始學(xué)呢？答案是肯定的，但是也要根據(jù)自身的知識(shí)結(jié)構(gòu)來(lái)選擇大數(shù)據(jù)的學(xué)習(xí)方向。大數(shù)據(jù)技術(shù)體系在2016年的時(shí)候已經(jīng)趨于成熟，目前正處在落地應(yīng)用的階段，大數(shù)據(jù)的細(xì)分崗位比較多，自然也就需要具備不同的知識(shí)結(jié)構(gòu)。大數(shù)據(jù)的崗位集中在數(shù)據(jù)采集、整理、存儲(chǔ)、分析...
wuyangnju
|
888人閱讀
回答:數(shù)據(jù)庫(kù)開(kāi)發(fā)工程和大數(shù)據(jù)開(kāi)發(fā)嚴(yán)格意義上來(lái)說(shuō)不算轉(zhuǎn)行，從技術(shù)層面來(lái)講大數(shù)據(jù)開(kāi)發(fā)需要更深層的技術(shù)基礎(chǔ)和更廣的架構(gòu)思路，也其說(shuō)轉(zhuǎn)行不如說(shuō)是對(duì)自身職業(yè)的一個(gè)飛躍。數(shù)據(jù)庫(kù)開(kāi)發(fā)工程對(duì)于基本的數(shù)據(jù)庫(kù)開(kāi)發(fā)比如說(shuō)SQL的熟練，表結(jié)構(gòu)的分析，數(shù)據(jù)庫(kù)編程的掌握，數(shù)據(jù)庫(kù)的運(yùn)維，這都是數(shù)據(jù)庫(kù)開(kāi)發(fā)工程師的天然優(yōu)勢(shì)和技術(shù)積累，如果要上升到大數(shù)據(jù)開(kāi)發(fā)顯示是比小白更具優(yōu)勢(shì)，向大數(shù)據(jù)庫(kù)開(kāi)發(fā)提升，建議從以下幾方面著手：1.從技術(shù)上要學(xué)習(xí)...
sean
|
738人閱讀
回答:在大數(shù)據(jù)領(lǐng)域大概有四個(gè)大的工作方向，除了大數(shù)據(jù)平臺(tái)應(yīng)用及開(kāi)發(fā)、大數(shù)據(jù)分析與應(yīng)用和大數(shù)據(jù)平臺(tái)集成與運(yùn)維之外，還有大數(shù)據(jù)平臺(tái)架構(gòu)與研發(fā)，除了以上四個(gè)大的工作方向之外，還有一個(gè)工作方向是大數(shù)據(jù)技術(shù)推廣和培訓(xùn)，這部分工作目前也有不少人在從事。大數(shù)據(jù)平臺(tái)架構(gòu)與研發(fā)主要的工作內(nèi)容是研發(fā)底層的大數(shù)據(jù)平臺(tái)，這部分工作的難度較高，從事這部分工作的研發(fā)級(jí)崗位也并不多?，F(xiàn)在不少技術(shù)研發(fā)團(tuán)隊(duì)都以Hadoop、Spark平...
zhangxiangliang
|
3519人閱讀
回答:是的。一方面，大數(shù)據(jù)計(jì)算通常不能在內(nèi)存中完成，需要多次讀寫(xiě)硬盤(pán)數(shù)據(jù)。另一方面，數(shù)據(jù)分布在不同的機(jī)器上，需要對(duì)數(shù)據(jù)進(jìn)行網(wǎng)絡(luò)傳輸。因此，大數(shù)據(jù)運(yùn)算更多的時(shí)間是在讀寫(xiě)磁盤(pán)和網(wǎng)絡(luò)傳輸數(shù)據(jù)。因?yàn)閿?shù)據(jù)I/O的效率通常低于CPU運(yùn)算效率。因此，對(duì)讀寫(xiě)同一張表的多個(gè)SQL進(jìn)行合并，可以減少本地磁盤(pán)讀寫(xiě)次數(shù)，以及網(wǎng)絡(luò)傳輸?shù)臄?shù)據(jù)，從而提高程序運(yùn)行效率。
李增田
|
1128人閱讀
回答:誠(chéng)邀回答，下面我來(lái)說(shuō)說(shuō)我的個(gè)人觀點(diǎn)：隨著大數(shù)據(jù)的熱度不斷升溫、技術(shù)日趨成熟，應(yīng)用越來(lái)越廣泛，很多人都看好大數(shù)據(jù)未來(lái)的發(fā)展前景。這其中不乏大量Java開(kāi)發(fā)崗位轉(zhuǎn)大數(shù)據(jù)方向的程序員。究竟是堅(jiān)守java崗還是去做大數(shù)據(jù)？我認(rèn)為最重要的還是要結(jié)合個(gè)人的職業(yè)發(fā)展來(lái)定位。并不是大數(shù)據(jù)火了，轉(zhuǎn)行做大數(shù)據(jù)就業(yè)前景就更可觀，個(gè)人能力、與企業(yè)技能要求的匹配度、市場(chǎng)競(jìng)爭(zhēng)環(huán)境、行業(yè)人才需求及機(jī)遇等都會(huì)左右我們最終的職業(yè)走...
Tony_Zby
|
1068人閱讀
回答:目前階段大數(shù)據(jù)技術(shù)及體系已經(jīng)逐漸趨于成熟，不再是以概念貫穿的模式，大數(shù)據(jù)越來(lái)越多的被使用，伴隨互聯(lián)網(wǎng)化的發(fā)展更多的企業(yè)信息化已經(jīng)由IT時(shí)代轉(zhuǎn)變?yōu)镈T時(shí)代，以數(shù)據(jù)為核心，用數(shù)據(jù)進(jìn)行決策，基于數(shù)據(jù)驅(qū)動(dòng)企業(yè)的創(chuàng)新與發(fā)展，相信在將來(lái)大數(shù)據(jù)也會(huì)有更廣泛的應(yīng)用空間，對(duì)于大數(shù)據(jù)的理解主要分為以下幾個(gè)層面。1.數(shù)據(jù)來(lái)源：對(duì)于大數(shù)據(jù)時(shí)代而言更多強(qiáng)調(diào)基于業(yè)務(wù)數(shù)據(jù)的沉淀，在一定規(guī)模的數(shù)據(jù)上進(jìn)行進(jìn)一步的分析、處理、轉(zhuǎn)換，...
arashicage
|
1246人閱讀
...造財(cái)富，只分配財(cái)富的行業(yè)。? 1.為什么很多人進(jìn)入IT/大數(shù)據(jù)行業(yè)？ ? ? ? ?工作這些年，參與和負(fù)責(zé)的面試人數(shù)在百人以上，也算見(jiàn)識(shí)過(guò)形形色色的面試者，有初出校園的大學(xué)生，有深入行業(yè)多年的佼佼者，有某個(gè)領(lǐng)域的專(zhuān)家...
大數(shù)據(jù)的應(yīng)用開(kāi)發(fā)過(guò)于偏向底層，具有學(xué)習(xí)難度大，涉及技術(shù)面廣的問(wèn)題，這制約了大數(shù)據(jù)的普及?，F(xiàn)在需要一種技術(shù)，把大數(shù)據(jù)開(kāi)發(fā)中一些通用的，重復(fù)使用的基礎(chǔ)代碼、算法封裝為類(lèi)庫(kù)，降低大數(shù)據(jù)的學(xué)習(xí)門(mén)檻，降低開(kāi)...
...，用戶(hù)畫(huà)像的概念也應(yīng)運(yùn)而生。用戶(hù)畫(huà)像是指，在大數(shù)據(jù)時(shí)代，企業(yè)通過(guò)對(duì)海量數(shù)據(jù)信息進(jìn)行清洗、聚類(lèi)、分析，將數(shù)據(jù)抽象成標(biāo)簽，再利用這些標(biāo)簽將用戶(hù)形象具體化的過(guò)程。用戶(hù)畫(huà)像的建立能夠幫助企業(yè)更好地為用戶(hù)提...
...愛(ài)的開(kāi)發(fā)工具。 在這場(chǎng)圓桌討論中PingWest邀請(qǐng)了做開(kāi)發(fā)者數(shù)據(jù)分析服務(wù)的TalkingData創(chuàng)始人崔曉波、做移動(dòng)應(yīng)用云測(cè)試平臺(tái)的云測(cè)CEO王軍、為開(kāi) 發(fā)者提供富媒體文件存儲(chǔ)的七牛CEO許式偉、為移動(dòng)開(kāi)發(fā)者提供后端云服務(wù)的AVOS Cloud中...
...開(kāi)發(fā)模式和要求展現(xiàn)，結(jié)合云引擎的架構(gòu)、Monitor，定義數(shù)據(jù)模型等來(lái)提高 H5 性能、實(shí)用性及持續(xù)性。 Slides: http://pan.baidu.com/s/1mgIj7DI 陳愷 《微服務(wù)架構(gòu)云端實(shí)踐》 第二位分享嘉賓是靈雀云的 CTO 陳愷，關(guān)于微服務(wù)架構(gòu)的實(shí)踐經(jīng)...
ChatGPT和Sora等AI大模型應(yīng)用，將AI大模型和算力需求的熱度不斷帶上新的臺(tái)階。哪里可以獲得...
大模型的訓(xùn)練用4090是不合適的，但推理（inference/serving）用4090不能說(shuō)合適，...
圖示為GPU性能排行榜，我們可以看到所有GPU的原始相關(guān)性能圖表。同時(shí)根據(jù)訓(xùn)練、推理能力由高到低做了...
