GetInsight組件技術及功能(七):任務調(diào)度平臺
GetInsight是慧都自主研發(fā)、應用最靈活的大數(shù)據(jù)平臺。能夠幫助您隨時找到您想要的數(shù)據(jù),使數(shù)據(jù)得到安全、穩(wěn)定和高效的管理與應用。GetInsight是企業(yè)大數(shù)據(jù)解決方案的重要組成部分,除了提供完整的大數(shù)據(jù)功能組件,我們還提供組件自定義搭配,為企業(yè)選擇滿足方案需要的大數(shù)據(jù)功能組件,使您的大數(shù)據(jù)解決方案成本降到最低,從而高品質(zhì)的解決您的大數(shù)據(jù)需求問題。
了解什么是GetInsight,請點擊這里查看GetInsight的基礎介紹>>
本文主要跟大家介紹GetInsight的任務調(diào)度平臺。
任務調(diào)度平臺
任務調(diào)度平臺用于在一個工作流內(nèi)以一個特定的順序運行一組工作和流程,可以實現(xiàn)自動調(diào)度預先設定的任務。支持調(diào)度各種類型任務,包括linux command,shell腳本,hadoop任務,spark任務,hive任務等。并且提供可視化界面對任務的執(zhí)行情況進行監(jiān)控??梢暬缑婵梢圆榭凑趫?zhí)行的任務,任務的執(zhí)行日志,歷史執(zhí)行任務及日志等。而且具有權限管理,不同角色類型的用戶權限不一致。例如:普通用戶只能執(zhí)行自己創(chuàng)建的任務,管理員用戶可以查看執(zhí)行所有用戶創(chuàng)建的任務。
GetInsight任務調(diào)度平臺的特性
- 提供界面監(jiān)控任務情況,而且界面友好。
- 通過簡單的設置即可創(chuàng)建任務的依賴。
- 創(chuàng)建好的任務上傳時自動識別是否有閉環(huán),存在則給出提示,避免任務死鎖。
- 可查看已經(jīng)運行、正在運行、還未運行等狀態(tài)的任務及其日志信息。
- 可支持多種任務類型,包括linux command,shell腳本,hadoop等。
- 具有用戶權限管理。
GetInsight任務調(diào)度平臺的界面和功能
訪問web界面
主要界面說明
登陸成功后進入主界面
左邊導航欄的Personal為查看當前用戶創(chuàng)建的project,Group為查看所屬用戶組用戶創(chuàng)建的project,All為查看所有用戶創(chuàng)建的project。當然,查看project是一回事,查看project里面的內(nèi)容和執(zhí)行project就需要相應的權限了。
右上角可以搜索和創(chuàng)建project。
上方的導航欄提供了各種選項查看相應的任務狀態(tài)。包括創(chuàng)建好的調(diào)度計劃,正在執(zhí)行的任務,執(zhí)行歷史等。
Scheduling界面
Executing界面
History界面
GetInsight任務調(diào)度平臺的應用場景
任務調(diào)度平臺不僅可以用來定時執(zhí)行一些腳本,程序等。它還用于對一系列任務在指定時間按照指定順序運行,并且任務具有前后依賴的場景,尤其是對比較多的任務進行按計劃調(diào)度。比如一個ETL流程,包括數(shù)據(jù)的抽取,轉(zhuǎn)換,加載過程。這些過程是具有先后依賴的,所以任務調(diào)度平臺可以實現(xiàn)對ETL流程的順序調(diào)度執(zhí)行及監(jiān)控。
慧都工業(yè)大數(shù)據(jù)分析方案即將精益生產(chǎn)理論體系進行了完美的融合和應用,并對大數(shù)據(jù)總體架構進行了更細致明確的解讀,提供自主研發(fā)的大數(shù)據(jù)平臺,實現(xiàn)ETL、數(shù)據(jù)管理及存儲、數(shù)據(jù)建模。如下圖所示:
關于慧都大數(shù)據(jù)分析平臺
慧都大數(shù)據(jù)分析平臺「GetInsight®」升級發(fā)布,將基于企業(yè)管理駕駛艙、產(chǎn)品質(zhì)量分析及預測、設備分析及預測等大數(shù)據(jù)模型的構建,助力企業(yè)由傳統(tǒng)運營模式向數(shù)字化、智能化的新模式轉(zhuǎn)型升級,抓住數(shù)據(jù)經(jīng)濟的發(fā)展勢頭,提供管理效能,精準布局未來。了解更多,請聯(lián)系在線客服。
慧都大數(shù)據(jù)專業(yè)團隊為企業(yè)提供商業(yè)智能大數(shù)據(jù)平臺搭建,免費業(yè)務咨詢,定制開發(fā)等完整服務,快速、輕松、低成本將任何Hadoop集群從試用階段轉(zhuǎn)移到生產(chǎn)階段。
歡迎撥打慧都熱線023-68661681或咨詢慧都在線客服,我們有專業(yè)的大數(shù)據(jù)團隊,為您提供免費大數(shù)據(jù)相關業(yè)務咨詢!