成人国产在线小视频_日韩寡妇人妻调教在线播放_色成人www永久在线观看_2018国产精品久久_亚洲欧美高清在线30p_亚洲少妇综合一区_黄色在线播放国产_亚洲另类技巧小说校园_国产主播xx日韩_a级毛片在线免费

資訊專欄INFORMATION COLUMN

基本操作 托管Hadoop集群 UHadoop

ernest.wang / 2711人閱讀

摘要：監(jiān)控數(shù)據(jù)查看監(jiān)控數(shù)據(jù)查看用戶可于產(chǎn)品界面右側(cè)彈框中查看集群監(jiān)控數(shù)據(jù)，也可進入監(jiān)控視圖中進行詳細查看集群及各節(jié)點監(jiān)控數(shù)據(jù)信息。

基本操作

本篇目錄

集群管理服務(wù)管理告警與監(jiān)控數(shù)據(jù)均衡Yarn Application跟蹤

集群管理

1、進入集群管理頁面

通過UHadoop集群列表頁面進入集群管理頁面：

2、獲取當前節(jié)點配置信息

本例中，Master 節(jié)點數(shù)量 2，機型為 C1-large；Core 節(jié)點數(shù)量為 2，機型為 F1-large。

3、添加節(jié)點

點擊添加節(jié)點后彈窗如下：

輸入節(jié)點初始密碼，點擊確定，等待節(jié)點創(chuàng)建。

4、刪除節(jié)點

選中需要下線的節(jié)點，先點擊下線，待節(jié)點狀態(tài)變?yōu)椤安豢捎谩睍r，點擊刪除。

如果節(jié)點長時間處于下線狀態(tài)，可提工單處理。

5、集群登錄

a) 通過控制臺登錄。如果節(jié)點機型是物理機，那么由于不同服務(wù)器廠商標準不同，暫不能通過控制臺登錄集群。

b) 綁定外網(wǎng)eip，本地可通過外網(wǎng)ssh連接登錄。目前僅master節(jié)點支持綁定。Eip使用詳情請見 EIP說明文檔 本例中可通過”ssh [email protected] -p22”進行登錄。

c) 通過云主機（uhost）內(nèi)網(wǎng)ssh進行登錄。本例中可在云主機上通過”ssh [email protected] -p22”進行登錄。 登錄密碼為集群創(chuàng)建時設(shè)置的密碼

6、節(jié)點密碼重置

可在【節(jié)點管理】頁面，對節(jié)點密碼重置。

7、節(jié)點重啟

目前節(jié)點的重啟是通過【關(guān)機】【開機】實現(xiàn)的。

如有重啟需求，請在【節(jié)點管理】頁面中，先對節(jié)點【關(guān)機】，再對節(jié)點做【開機】。

服務(wù)管理

1、進入集群管理頁面

通過右側(cè)彈出框點擊進入

2、應(yīng)用開啟

若創(chuàng)建時未選擇部署該服務(wù)，可在控制臺點擊開啟并選擇所需版本。

3、服務(wù)關(guān)閉、重啟

頁面可進行相應(yīng)服務(wù)關(guān)閉，以及服務(wù)重啟

4、參數(shù)調(diào)整

4.1 點擊參數(shù)配置可進行參數(shù)調(diào)整

4.2 在界面修改已有參數(shù)，修改后確認重啟生效

4.3 新參數(shù)的配置添加

參數(shù)名稱： 您需要添加的參數(shù)名稱。

使用范圍： 該參數(shù)所要應(yīng)用的范圍。目前支持cluster（整個集群）、master（所有master節(jié)點）、core（所有core節(jié)點）、task（所有task節(jié)點）。

文件： 參數(shù)應(yīng)存在位置。

參數(shù)值： 您設(shè)置的參數(shù)值。

4.4 參數(shù)刪除

一些非必要參數(shù)可在控制臺進行刪除操作。

5、配置隊列

5.1 選擇 應(yīng)用-hadoop-隊列配置 進行隊列配置

5.2 選擇 創(chuàng)建隊列

5.3 輸入隊列名稱，點擊確定

5.4 修改隊列配置

5.5 隊列歷史配置回退

若用戶對隊列配置進行修改后想要回退到歷史配置，可使用此功能

更多關(guān)于隊列配置內(nèi)容可參考隊列配置及Apache官網(wǎng)介紹。

告警與監(jiān)控

1、告警模板設(shè)置

監(jiān)控視圖中修改相應(yīng)集群和集群節(jié)點的告警模板。

也可到監(jiān)控頁面進行對應(yīng)產(chǎn)品的告警設(shè)置與告警模板修改。

2、監(jiān)控數(shù)據(jù)查看

用戶可于產(chǎn)品界面右側(cè)彈框中查看集群監(jiān)控數(shù)據(jù)，也可進入監(jiān)控視圖中進行詳細查看集群及各節(jié)點監(jiān)控數(shù)據(jù)信息。

===== 外網(wǎng)訪問配置 =====

綁定外網(wǎng)IP:

目前只支持對master節(jié)點配置外網(wǎng)IP，可以配置防火墻限制訪問IP。

1.申請彈性IP

2.為Master節(jié)點綁定IP

3.設(shè)置防火墻策略

請參考：防火墻操作指南

4.為綁定外網(wǎng)IP的主機配置防火墻

數(shù)據(jù)均衡

選中數(shù)集群，在右側(cè)的管理界面選中均衡數(shù)據(jù)按鈕，均衡數(shù)據(jù)的過程會對集群的性能產(chǎn)生一定影響，持續(xù)時間根據(jù)集群內(nèi)數(shù)據(jù)量，以及均衡程度而不同。

Yarn Application跟蹤

控制臺【Yarn Application跟蹤】頁面的信息來自集群中的 Yarn 服務(wù)?？刹樽罱?5天內(nèi)提交的 Application 情況。

對于 MapReduce、Spark 類型 Application，可查子任務(wù)日志、以及 Application Master 日志詳情。

暫不支持查看其他類型的 Application 詳情。

Yarn Application 狀態(tài)說明：

狀態(tài)說明NEWApplication請求到ID和可用資源后，狀態(tài)為NEWNEWSAVINGResourceManager接收到Application的詳細資源請求后，狀態(tài)為NEWSAVINGSUBMITTEDResourceManager存儲Job信息后，狀態(tài)為SUBMITTEDACCEPTEDResourceManager的Scheduler做資源、用戶權(quán)限等驗證，驗證通過后，狀態(tài)為ACCEPTEDRUNNING資源就緒，開始執(zhí)行ApplicationFINISHEDJob如期執(zhí)行完畢，狀態(tài)為FINISHEDFAILED執(zhí)行失敗KILLED由用戶終止了Job

文章版權(quán)歸作者所有，未經(jīng)允許請勿轉(zhuǎn)載,若此文章存在違規(guī)行為，您可以聯(lián)系管理員刪除。

轉(zhuǎn)載請注明本文地址：http://systransis.cn/yun/126819.html

相關(guān)文章

  • 托管Hadoop集群 快速上手 UHadoop

    摘要：也可以將托管集群設(shè)置為快捷方式，通過左側(cè)快捷方式菜單欄點擊進入?？蚣芗褐袃H部署。用于做存儲集群，有專屬的節(jié)點機型。節(jié)點管理節(jié)點，負責協(xié)調(diào)整個集群服務(wù)。目前僅節(jié)點支持綁定。通過云主機內(nèi)網(wǎng)進行登錄。登錄密碼為集群創(chuàng)建時設(shè)置的密碼。 快速上手本篇目錄創(chuàng)建集群提交任務(wù)本文檔將帶領(lǐng)您如何創(chuàng)建UHadoop集群，并使用UHadoop集群完成數(shù)據(jù)處理任務(wù)。創(chuàng)建集群本章簡單介紹了用戶使用UHadoop服務(wù)...

    ernest.wang 評論0 收藏295

  • 常用操作 托管Hadoop集群 UHadoop

    摘要：查看上的歷史日志查看上的歷史日志任務(wù)的日志在任務(wù)運行結(jié)束之后會上傳到上，當日志文件過大無法通過來查看時，可以通過將日志文件從上下載下來查看。掛載在允許的主機上執(zhí)行 常用操作本篇目錄應(yīng)用的Web接口查看日志配置NFS掛載hdfs到本地應(yīng)用的Web接口Hadoop 提供了基于 Web 的用戶界面，可通過它查看您的 Hadoop 集群。Web 服務(wù)會在主節(jié)點上運行（Active NameNode或...

    ernest.wang 評論0 收藏1142

  • 元數(shù)據(jù)管理 托管Hadoop集群 UHadoop

    摘要：架構(gòu)架構(gòu)元數(shù)據(jù)管理元數(shù)據(jù)管理元數(shù)據(jù)管理創(chuàng)建集群時可在控制臺開啟元數(shù)據(jù)獨立管理。若項目中已開啟過元數(shù)據(jù)獨立管理，則新集群開啟該功能時，不再創(chuàng)建新的，而是將新集群的元數(shù)據(jù)存儲于已有的中。 元數(shù)據(jù)管理本篇目錄介紹產(chǎn)品架構(gòu)元數(shù)據(jù)管理介紹UHadoop 支持將 Hive-Metastore 的數(shù)據(jù)庫獨立于 Hadoop 集群部署，也支持多個集群訪問同一個 Hive 元數(shù)據(jù)庫，可在控制臺對其做管理。產(chǎn)品...

    ernest.wang 評論0 收藏2953

  • 配置openvpn 托管Hadoop集群 UHadoop

    摘要：設(shè)置，如果選擇默認，可以直接回車設(shè)置，如果選擇默認，可以直接回車創(chuàng)建的同時，也會給創(chuàng)建一個客戶端文件，輸入客戶端文件名這里測試生成一個的文件一路回車下去，會生成文件客戶端客戶端客戶端把部署時生成的客戶端用戶文件，拷貝到本地。 配置openvpn本篇目錄1.服務(wù)端2.客戶端3. 配置hosts按以下步驟，可以在綁定EIP的uhost安裝openvpn，下面以centos7操作系統(tǒng)示例：1.服務(wù)...

    ernest.wang 評論0 收藏2154

  • 托管Hadoop集群-故障排查 UHadoop

    摘要：集群運行慢時，通常會在日志中可以查找到明顯的異常，或者花費時間長的操作。檢查集群節(jié)點的運行狀態(tài)檢查集群節(jié)點的運行狀態(tài)管理群集上部署的各種服務(wù)。如果主節(jié)點遇到性能問題，整個群集都會受到影響。工作的不均衡分配可能會導致處理速度較慢。 故障排查本篇目錄任務(wù)執(zhí)行失敗排查工具故障描述集群運行速度慢任務(wù)執(zhí)行失敗1.查看console輸出日志查看任務(wù)執(zhí)行時控制臺輸出的log，檢查是否有ERROR2.查看任...

    ernest.wang 評論0 收藏2025

發(fā)表評論

0條評論

最新活動
閱讀需要支付1元查看
<