成人国产在线小视频_日韩寡妇人妻调教在线播放_色成人www永久在线观看_2018国产精品久久_亚洲欧美高清在线30p_亚洲少妇综合一区_黄色在线播放国产_亚洲另类技巧小说校园_国产主播xx日韩_a级毛片在线免费

資訊專欄INFORMATION COLUMN

大快搜索數(shù)據(jù)爬蟲技術(shù)實(shí)例安裝教學(xué)

20171112 / 2066人閱讀

摘要:作為搭建大數(shù)據(jù)處理平臺(tái)的重要基石,關(guān)于它的分析和講解的文章已經(jīng)有很多了。并且由于是開源軟件,其安裝過程相對(duì)比較復(fù)雜。針對(duì)每個(gè)組建都要配置的這種情況,提供了自動(dòng)化安裝應(yīng)用來部署。這就大大縮短了的安裝時(shí)間,同時(shí)也簡(jiǎn)化了安裝的過程。

Hadoop作為搭建大數(shù)據(jù)處理平臺(tái)的重要“基石”,關(guān)于它的分析和講解的文章已經(jīng)有很多了。Hadoop本身是一分布式的系統(tǒng),因此在安裝的時(shí)候,需要多每一個(gè)節(jié)點(diǎn)進(jìn)行組建的安裝。并且由于是開源軟件,其安裝過程相對(duì)比較復(fù)雜。這也是很多人在搭建hadoop運(yùn)行環(huán)境時(shí)總是不能一次性成功的主要原因。
hadoop每個(gè)組建都要做很多的配置工作,如果手動(dòng)去完成這個(gè)工作,工作量其實(shí)還是非常龐大。正是這一點(diǎn)我覺得很多做國(guó)產(chǎn)發(fā)行版hadoop軟件開發(fā)的都沒有大快的DKhadoop發(fā)行版做的好。我記得在之前寫DKHadoop運(yùn)行環(huán)境搭建流程的時(shí)候也提到過這個(gè)問題,DKH可以說是把易用性做的非常好了,無論是對(duì)于老手還是新入門者,上手速度要比其他的一些發(fā)行版快的多。
針對(duì)hadoop每個(gè)組建都要配置的這種情況,DKH提供了自動(dòng)化安裝應(yīng)用來部署Hadoop。這就大大縮短了Hadoop的安裝時(shí)間,同時(shí)也簡(jiǎn)化了安裝Hadoop的過程。如果你在安裝之后想要拓展節(jié)點(diǎn),其實(shí)也不用擔(dān)心。因?yàn)镈KH中提供了節(jié)點(diǎn)管理的功能。
“節(jié)點(diǎn)”是集群中的服務(wù)器。DKH集群中的節(jié)點(diǎn)擔(dān)任不同服務(wù)的不同角色,協(xié)同工作。我們可以在DKH管理界面添加節(jié)點(diǎn)。 然后在相應(yīng)的服務(wù)中選擇“添加角色”,那么新添加的節(jié)點(diǎn)就有了該服務(wù)的功能。
1、進(jìn)入管理界面(在“主機(jī)”菜單中)

這里你可以查看節(jié)點(diǎn)的基本信息,并且可以添加和刪除節(jié)點(diǎn)。
2、添加節(jié)點(diǎn):點(diǎn)擊“向集群添加主機(jī)”進(jìn)入“添加節(jié)點(diǎn)”界面

輸入對(duì)應(yīng)節(jié)點(diǎn)的IP地址即可。
3、為節(jié)點(diǎn)指定服務(wù):在每一個(gè)服務(wù)界面中,選擇“添加角色”如下圖所示

選擇要添加的節(jié)點(diǎn),點(diǎn)擊“繼續(xù)”即可完成添加。

文章版權(quán)歸作者所有,未經(jīng)允許請(qǐng)勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。

轉(zhuǎn)載請(qǐng)注明本文地址:http://systransis.cn/yun/72014.html

相關(guān)文章

  • 大快搜索數(shù)據(jù)爬蟲技術(shù)實(shí)例安裝教學(xué)

    摘要:大快搜索數(shù)據(jù)爬蟲技術(shù)實(shí)例安裝教學(xué)篇爬蟲安裝前準(zhǔn)備工作大快大數(shù)據(jù)平臺(tái)安裝完成等組件安裝啟動(dòng)成功。 大快搜索數(shù)據(jù)爬蟲技術(shù)實(shí)例安裝教學(xué)篇 爬蟲安裝前準(zhǔn)備工作:大快大數(shù)據(jù)平臺(tái)安裝完成、zookeeper、redis、elasticsearch、mysql等組件安裝啟動(dòng)成功。 1、修改爬蟲安裝配置文件(最好在線下修改好后再上傳平臺(tái)) showImg(https://segmentfault.co...

    PingCAP 評(píng)論0 收藏0
  • hadoop需要哪些技術(shù)支持

    摘要:是在端的,是提前的,需要自己設(shè)置。如果在開源大數(shù)據(jù)框架上部署大快的開發(fā)框架,需要平臺(tái)的組件支持如下數(shù)據(jù)源與引擎數(shù)據(jù)采集數(shù)據(jù)處理模塊機(jī)器學(xué)習(xí)和模塊上傳服務(wù)器端包,直接支持搜索引擎模塊不獨(dú)立發(fā)布 hadoop是一個(gè)開源軟件框架,可安裝在一個(gè)商用機(jī)器集群中,使機(jī)器可彼此通信并協(xié)同工作,以高度分布式的方式共同存儲(chǔ)和處理大量數(shù)據(jù)。最初,Hadoop 包含以下兩個(gè)主要組件:Hadoop Distr...

    MartinHan 評(píng)論0 收藏0
  • 什么是自然語言處理技術(shù)

    摘要:自然語言處理是計(jì)算機(jī)科學(xué)領(lǐng)域與人工智能領(lǐng)域中的一個(gè)重要方向。自然語言處理并不是一般地研究自然語言,而在于研制能有效地實(shí)現(xiàn)自然語言通信的計(jì)算機(jī)系統(tǒng),特別是其中的軟件系統(tǒng)。自然語言處理無可避免地成為信息科學(xué)技術(shù)中長(zhǎng)期發(fā)展的一個(gè)新的戰(zhàn)略制高點(diǎn)。 自然語言處理(NLP)是計(jì)算機(jī)科學(xué),人工智能,語言學(xué)關(guān)注計(jì)算機(jī)和人類(自然)語言之間的相互作用的領(lǐng)域。自然語言處理是計(jì)算機(jī)科學(xué)領(lǐng)域與人工智能領(lǐng)域中的...

    邱勇 評(píng)論0 收藏0
  • Python爬蟲教學(xué)(寫給入門的新手) 一

    摘要:在不懂和等協(xié)議的情況下,我直接打個(gè)比方來解釋一下什么是請(qǐng)求,以瀏覽器為例,人在瀏覽器輸入,然后敲擊鍵,直到頁面出現(xiàn),整個(gè)過程,我們可以抽象為我們向百度服務(wù)器發(fā)起的一次請(qǐng)求。更專業(yè),更詳細(xì)的解釋,自己去百度學(xué)習(xí)吧。 前言 ??剛學(xué)完python基礎(chǔ),想學(xué)習(xí)爬蟲的新手,這里有你想要的東西。??本文著重點(diǎn)在于教新手如何學(xué)習(xí)爬蟲,并且會(huì)以外行人的思維進(jìn)行形象地講解。最近我一兄弟想學(xué),我就想寫個(gè)...

    zone 評(píng)論0 收藏0
  • 學(xué)習(xí)Hadoop大數(shù)據(jù)基礎(chǔ)框架

    摘要:大快的大數(shù)據(jù)通用計(jì)算平臺(tái),已經(jīng)集成相同版本號(hào)的開發(fā)框架的全部組件。,更是集成了大快的大數(shù)據(jù)一體化開發(fā)框架開發(fā)框架提供了大數(shù)據(jù)搜索自然語言處理和人工智能開發(fā)中常用的二十多個(gè)類,通過總計(jì)一百余種方法,實(shí)現(xiàn)了倍以上的開發(fā)效率的提升。 什么是大數(shù)據(jù)?進(jìn)入本世紀(jì)以來,尤其是2010年之后,隨著互聯(lián)網(wǎng)特別是移動(dòng)互聯(lián)網(wǎng)的發(fā)展,數(shù)據(jù)的增長(zhǎng)呈爆炸趨勢(shì),已經(jīng)很難估計(jì)全世界的電子設(shè)備中存儲(chǔ)的數(shù)據(jù)到底有多少,...

    amc 評(píng)論0 收藏0

發(fā)表評(píng)論

0條評(píng)論

最新活動(dòng)
閱讀需要支付1元查看
<