使用Spark客戶端
更新時間 2024-03-31 18:58:27
最近更新時間: 2024-03-31 18:58:27
分享文章
本章節主要介紹使用Spark的操作指導。
前提條件
已安裝客戶端。
例如安裝目錄為“/opt/hadoopclient”，以下操作的客戶端目錄只是舉例，請根據實際安裝目錄修改。
使用Spark客戶端
- 安裝客戶端。
- 登錄安裝客戶端的節點。
- 執行以下命令，切換到客戶端安裝目錄。
cd /opt/hadoopclient - 集群默認為安全模式，執行以下命令進行用戶認證。
kinit 組件業務用戶 - 直接執行命令。例如：
spark-shell --master spark://IP:port
