1. 程式人生 > >hadoop快速入門教程:hadoop安裝包下載與監控參數說明

hadoop快速入門教程:hadoop安裝包下載與監控參數說明

分布式 height tex region 集群 RoCE 發行版 store serve

前階段用了差不多兩周的時間把DKhadoop的運行環境搭建以及安裝的各個操作都介紹了一遍。關於DKhadoop安裝包下載也只是順帶說了一下,但好像大快搜索的服務器在更新,新的下載頁面還不好用!有好些朋友留言說了大快搜索網站上無法下載。我已經將之前下載的這個版本上傳到了網盤了,需要的DKhadoop安裝包的朋友可以直接通過網盤下載!

DKHadoop安裝包下載:

關於DKhadoop版本在寫Hadoop環境搭建部署的時候有提到過,大版本主要有DKHadoop標準版本、DKH-分布式SQL版本、DKHadoop商業發行版。我們自己可以去下載到的包括我之前下載的安裝包版本都是三節點的學習版本。DKhadoop標準版本有測試用的單機版,支持3節點的學習版本,以及支持個人研發用的5節點標準服務器版本。3節點此前是提供免費下載,5節點可能需要提交申請,但還好同樣也是免費的!

DKHadoop安裝包下載地址:

https://pan.baidu.com/s/1-427Sh6lTLrLAPh6KMOYVg

密碼: vg2w

DKM平臺監控參數說明:

平臺監控參數的內容主要就是針對下載安裝了DKHadoop的朋友了,下面簡單的各大家介紹幾個監控參數。

1、首頁監控界面

1 集群平均負載

技術分享圖片

監控集群CUP負載

縱軸表示 任務數量,單位個

橫軸表示時間,單位分鐘

表示集群內等待的任務數量, 比如1分鐘的紅線代表在1分鐘之內需要等待執行的任務數量, 5分鐘的線代表5分鐘之內需要等待執行的任務數量。

2集群磁盤IO

技術分享圖片

監控集群磁盤IO

縱軸表示讀寫速度,單位KB/S

橫軸表示時間,單位分鐘

磁盤字節寫入速度表示寫磁盤的速度。

磁盤字節數量讀取表示讀磁盤的速度。單位是KB/S

3集群磁盤使用情況

技術分享圖片

監控集群磁盤使用的情況

縱軸表示磁盤空間 ,單位GB

橫軸表示時間,單位分鐘

Total:表示集群磁盤的總體空間

Free:表示空余空間

Used:表示已經使用的空間

2、HDFS監控界面

1 HDFS 容量監控

技術分享圖片

監控集群中HDFS的容量

縱軸表示HDFS的容量,單位GB

橫軸表示時間,單位分鐘

2 DataNode 讀取字節數

技術分享圖片

監控集群中DataNode 讀取量

縱軸表示DataNode字節數,單位B

橫軸表示時間,單位分鐘

3 DataNode 寫入字節數

技術分享圖片

監控集群中DataNode 寫入量

縱軸表示DataNode字節數,單位B

橫軸表示時間

,單位分鐘

3、Hbase監控界面

1 RegionServer 的總數

技術分享圖片

監控RegionServer 的總數

縱軸表示數量,單位個

橫軸表示時間,單位分鐘

2RegionServer中memstoresize的數量

技術分享圖片

監控RegionServer中memstoresize的數量

縱軸表示數量,單位個

橫軸表示時間,單位分鐘

3 RegionServer 讀寫請求次數

技術分享圖片

監控 RegionServer 讀寫請求次數

縱軸表示次/每秒,單位秒

橫軸表示時間,單位分鐘

4 RegionServer 中總store個數

技術分享圖片

監控 RegionServer 中總store個數

縱軸表示store數量,單位個

橫軸表示時間,單位分鐘

5 RegionServer 中總storFile個數

技術分享圖片

監控 RegionServer 中總storeFile個數

縱軸表示storeFile數量,單位個

橫軸表示時間,單位分鐘

DKH平臺監控參數太多,本篇就簡單介紹這幾個吧,不然碼的篇幅太長,看著也累!下次將會接著就監控平臺的參數進行說明。我盡量把我知道的寫完吧!本文的重點還是最上部分的安裝包下載,提取碼上面也給了。下載玩一下吧!


hadoop快速入門教程:hadoop安裝包下載與監控參數說明