產品描述

數(shu)(shu)(shu)據(ju)集成服務提供在線設置(zhi)ETL作業、轉換任務的定時(shi)(shi)運行策略，監控任務的執(zhi)(zhi)行情況，查(cha)看任務執(zhi)(zhi)行日志(zhi)的功能。保障(zhang)多種數(shu)(shu)(shu)據(ju)格式、源頭(tou)的數(shu)(shu)(shu)據(ju)經(jing)過清洗轉換后(hou)及時(shi)(shi)有效地送達(da)組織(zhi)的數(shu)(shu)(shu)據(ju)倉庫，強有力地支撐后(hou)續的數(shu)(shu)(shu)據(ju)開發(fa)、數(shu)(shu)(shu)據(ju)挖掘

針對人群

• 數據維護人員

• 數據開發人員

• 項目經理

• 產品經理

• 技術經理

業務架構圖

架構描述：

• 根據(ju)業(ye)務需求開發作業(ye)任務、轉換(huan)任務

• 上傳轉換任務(wu)、作業任務(wu)并設置定(ding)時(shi)調度(du)策略(lve)

• 數(shu)據(ju)(ju)集成服(fu)務定時(shi)運(yun)行任務，從來(lai)源數(shu)據(ju)(ju)庫(ku)抽(chou)取數(shu)據(ju)(ju)并導入數(shu)據(ju)(ju)倉庫(ku)

產品優勢

在線管理ETL任務

提供(gong)(gong)B/S模式(shi)的web界面，使有瀏(liu)覽器的地方即(ji)可管(guan)理、監控數(shu)據集成任(ren)務(wu)的需求(qiu)成為并(bing)提供(gong)(gong)了統一管(guan)理ETL作業任(ren)務(wu)、轉(zhuan)換(huan)的入口

在線調度ETL任務

提供在線(xian)設置任(ren)(ren)務定時(shi)運行的(de)(de)功能(neng)，降(jiang)低了調度ETL任(ren)(ren)務的(de)(de)難度，是(shi)調度ETL任(ren)(ren)務的(de)(de)好幫手

日志級別

通(tong)過設置(zhi)任務的日(ri)志(zhi)(zhi)級別(最小日(ri)志(zhi)(zhi)、行級日(ri)志(zhi)(zhi)、基本日(ri)志(zhi)(zhi)、詳細日(ri)志(zhi)(zhi)、調試(shi)日(ri)志(zhi)(zhi))，開發者和維護者可(ke)從日(ri)志(zhi)(zhi)中捕獲(huo)有用信息，進行錯誤定位及任務優化(hua)

任務監控

通過列表呈現任務的運(yun)行狀態、下次調度時間，讓系統(tong)管理員一目(mu)了然地掌(zhang)控集成任務

任務統計

從多種維度統計任務(wu)的運行(xing)情況，保障(zhang)數(shu)據集(ji)成任務(wu)穩(wen)定、有效地運行(xing)，提高數(shu)據集(ji)成的質量

任務失敗通知

利用(yong)平臺提供的通知管理(li)服務(wu)，用(yong)戶可(ke)定制(zhi)通過短信(xin)、郵件(jian)、釘(ding)釘(ding)、微信(xin)、騰訊短信(xin)，阿里(li)(li)云短信(xin)，阿里(li)(li)云電話，華為短信(xin)等渠道接(jie)收告警信(xin)息的功能

任務存儲

利用平(ping)臺提(ti)供的存儲(chu)管(guan)理服務，用戶可將任(ren)務上(shang)(shang)傳到多個存儲(chu)渠(qu)道(dao)進(jin)行備災存儲(chu)及享受到優質的上(shang)(shang)傳、下載功(gong)能(neng)

功能列表

• 儀(yi)表盤(pan)：呈現作業(ye)、轉換的運行信息。如(ru)總作業(ye)數(shu)(shu)、成功次數(shu)(shu)、失敗次數(shu)(shu)等(deng)

• 定時(shi)策(ce)略：管理(li)定時(shi)任務策(ce)略配置。用于系統自動掃描定時(shi)任務，按(an)時(shi)、周期(qi)性(xing)的執行(xing)任務

• 任(ren)務分類：管理作業(ye)、轉換(huan)的維度

• 作業管(guan)理(li)：管(guan)理(li)作業任務清單及執(zhi)行的(de)定(ding)時策(ce)略

• 轉換(huan)管理：管理轉換(huan)任務清單及(ji)執行的(de)定時策略

• 作業日志(zhi)：呈現作業任務的執(zhi)行開始、結束時間、時長、運行結果及(ji)日志(zhi)詳情

• 轉換(huan)日(ri)志(zhi)：呈現轉換(huan)任務的執行(xing)(xing)開(kai)始(shi)、結束(shu)時間、時長、運(yun)行(xing)(xing)結果及日(ri)志(zhi)詳情(qing)

• 作業監控：統計作業任務執行的成功(gong)次數(shu)(shu)、失(shi)敗次數(shu)(shu)、運(yun)行狀態、最近調度及完成時(shi)(shi)間、下次調度時(shi)(shi)間

• 轉(zhuan)換監控(kong)：統計轉(zhuan)換任務(wu)執行的成(cheng)功次數、失敗次數、運(yun)行狀態、最近調(diao)度(du)(du)及完(wan)成(cheng)時(shi)間、下次調(diao)度(du)(du)時(shi)間