節點擴容
更新時間 2025-04-01 16:27:01
最近更新時間: 2025-04-01 16:27:01
分享文章
本章節主要介紹翼MapReduce服務如何擴容節點。
當master、core或task節點組內的計算或存儲資源無法滿足您的業務需求時,您可以使用節點擴容功能增加實例數量。
背景信息
- V2.15版本起,數據湖、數據分析、數據服務、實時數據流與自定義場景支持節點擴容功能。
- V2.17版本起,云搜索場景支持節點擴容功能。
- V2.17版本起,新增master擴容功能,支持對Hive、HDFS、YARN、ZooKeeper、Kyuubi等服務的部分角色實例進行擴容。數據分析與云搜索場景暫不支持master擴容。
- 僅支持對狀態為“運行中”的集群進行節點擴容操作。
操作步驟
Core與Task擴容
- 登錄翼MapReduce管理控制臺。
- 從“我的集群”中 ,選中一個運行中的集群并單擊集群名稱,進入集群信息頁面。
- 選擇“節點管理”,在需要擴容的節點組的“操作”列單擊“擴容”,在節點擴容彈窗中進行配置。
- 選擇需要擴容的配置并完成支付后,可在“節點管理”的節點信息中,查看節點擴容結果。當節點組狀態從“變更中”變為“運行中”,且展開節點組信息可以看到新增節點,表示擴容成功。
Master擴容
- 登錄翼MR控制臺,進入目標集群,在節點管理頁面,點擊master節點組操作列中的“擴容”按鈕。
說明
當前僅支持對Hive、HDFS、YARN、ZooKeeper、Kyuubi以及OpenLDAP集群服務的部分角色實例進行擴容。
自定義場景下,若集群已部署上述組件服務,Master擴容按鈕亮起,否則按鈕將置灰。
- 在彈窗中,選擇需要增加的節點數,并規劃新增節點上需要部署的服務。
說明僅支持對已部署的服務進行master擴容,如需新增服務,請先完成新增集群服務操作,再進行Master節點擴容。
- 若選擇在新增master節點上部署ZooKeeper-ZKServer、HDFS-NameNode、YARN-ResourceManager或Hive-MetaStore角色實例,在控制臺顯示擴容完成后,需要前往翼MR-Manager,在相應的集群服務詳情中進行“Master配置生效”操作。
說明
HDFS擴容后,請對服務進行滾動重啟操作。
擴容與配置生效過程中,請勿進行其他運維操作,避免影響擴容生效。
配置生效過程中可能產生短暫的服務不可用,請合理安排操作時間。
進行配置生效前,ZooKeeper、HDFS、YARN與Hive的新增節點無法使用,未避免影響業務開展,請在擴容后盡快進行配置生效操作。
- 對ZooKeeper、HDFS、YARN、Hive集群服務進行master擴容后,相關聯的集群服務可能被影響,請參考Master擴容-服務配置修改建議進行操作,避免影響數據業務。