數據質量
更新時間 2023-12-07 10:58:16
最近更新時間: 2023-12-07 10:58:16
分享文章
本章節主要介紹數據質量相關問題。
質量作業和對賬作業有什么區別?
- 質量作業可將創建的規則應用到建好的表中進行質量監控。
- 對賬作業支持跨源數據對賬能力,可將創建的規則應用到兩張表中進行質量監控,并輸出對賬結果。
數據對賬對于數據開發和數據遷移流程中的數據一致性至關重要,而跨源數據對賬的能力是檢驗數據遷移或數據加工前后是否一致的關鍵指標。
如何確認質量作業或對賬作業已經阻塞?
作業運行狀態長時間處于運行中時,選擇“運維管理”,點擊操作欄中的“結果&日志”并選擇查看“運行日志”,當“運行日志”不再更新,表示作業已經阻塞。

如何手工重啟阻塞的質量作業或對賬作業?
阻塞的作業需要進行手工重啟,如不重啟1天內也會因作業超時自動結束該作業。
手工重啟需要選擇“運維管理”,先點擊對應作業操作欄中的“取消”,作業運行狀態變更為“失敗”,此時然后點擊操作欄中的“重跑”即可完成作業重啟。

怎樣查看質量規則模板關聯的作業?
1.單擊待操作規則模板操作列的“發布歷史”。

2.點擊歷史版本最右側的“下線”按鈕。則可以查看該規則模板對應的關聯作業。

用戶在執行質量作業時提示無MRS權限怎么辦?
用戶在執行質量作業時報錯,查看質量作業的日志,提示“ The current user does not exist on MRS Manager. Grant the user
sufficient permissions on IAM and then perform IAM user synchronization on the Dashboard tab page. !”
此類問題一般是由于用戶不具備MRS集群操作權限導致的。
對于租戶下新增的用戶,需要在MRS集群列表的界面找到對應的MRS集群實例,手動單擊同步。
操作如下:
- 進入MRS控制臺,查看現有集群,單擊對應的集群名稱進入概覽頁。

2.在“IAM用戶同步”處,單擊同步。

3.在操作日志處查看操作結果。

4.如果經過上述步驟,賬號已同步。但還是提示Mrs權限不足的話,則需要登錄到Manger管理頁面中創建一個與當前主賬號同名的賬號。
注意在步驟4中,需要創建一個與當前主賬號同名的賬號。