Data Quality Monitor
更新時間 2023-07-18 21:47:49
最近更新時間: 2023-07-18 21:47:49
分享文章
本章節主要介紹節點參考的Data Quality Monitor。
功能
通過Data Quality Monitor節點可以對運行的數據進行質量監控。
參數
用戶可參考下表配置Data Quality Monitor節點的參數。
屬性參數
| 參數 | 是否必選 | 說明 |
|---|---|---|
| 節點名稱 | 是 | 節點名稱,可以包含中文、英文字母、數字、“_”、“-”、“/”、“<”、“>”等各類特殊字符,長度為1~128個字符。 |
| DQC作業類型 | 是 | 數據質量作業的類型: 質量作業 對賬作業 |
| 質量作業名稱 | 是 | DQC作業類型為質量作業時需要配置。選擇在數據質量模塊中創建的質量作業名稱。 |
| 是否忽略質量作業告警 | 是 | DQC作業類型為質量作業時需要配置。 是:如果該質量作業處于告警狀態時,當前節點的狀態將被設置為成功,繼續執行后續節點。 否:如果該質量作業處于告警狀態時,則當前節點的狀態將被設置為失敗。 |
| 對賬作業名稱 | 是 | DQC作業類型為對賬作業時需要配置。選擇在數據質量模塊中創建的對賬作業名稱。 |
| 是否忽略對賬作業告警 | 是 | DQC作業類型為對賬作業時需要配置。 是:如果該對賬作業處于告警狀態時,當前節點的狀態將被設置為成功,繼續執行后續節點。 否:如果該對賬作業處于告警狀態時,則當前節點的狀態將被設置為失敗。 |
高級參數
| 參數 | 是否必選 | 說明 |
|---|---|---|
| 節點執行的最長時間 | 是 | 設置節點執行的超時時間,如果節點配置了重試,在超時時間內未執行完成,該節點將不會再重試,直接置為失敗狀態。 |
| 失敗重試 | 是 | 節點執行失敗后,是否重新執行節點。 是:重新執行節點,請配置以下參數。 ? 最大重試次數 ? 重試間隔時間(秒) 否:默認值,不重新執行節點。 說明 如果作業節點配置了重試,并且配置了超時時間,該節點執行超時后將不會再重試,直接置為失敗狀態。 |
| 失敗策略 | 是 | 節點執行失敗后的操作: 終止當前作業執行計劃:停止當前作業運行,當前作業實例狀態顯示為“失敗”。 繼續執行下一節點:忽略當前節點失敗,當前作業實例狀態顯示為“忽略失敗成功”。 掛起當前作業執行計劃:暫停當前作業運行,當前作業實例狀態顯示為“等待運行”。 終止后續節點執行計劃:停止后續節點的運行,當前作業實例狀態顯示為“失敗”。 |
| 空跑 | 否 | 如果勾選了空跑,該節點不會實際執行,將直接返回成功。 |