0 引言
數(shù)據(jù)倉庫目前在銀行、證券、電信和保險等行業(yè)得到廣泛的應(yīng)用。由于數(shù)據(jù)倉庫涉及到的技能非常龐雜,且與整個企業(yè)的各個業(yè)務(wù)系統(tǒng)及各部門、各層面的員工都可能發(fā)生廣泛而深刻的聯(lián)系,這些大型企業(yè)的數(shù)據(jù)倉庫項目組織團隊也常常是非常復(fù)雜的。
如何構(gòu)建高效的數(shù)據(jù)倉庫項目組織團隊,對數(shù)據(jù)倉庫項目建設(shè)的成功及后期系統(tǒng)的運營應(yīng)用有至關(guān)重要的意義。數(shù)據(jù)倉庫在建設(shè)和運營的兩個階段目標不同,參與方也往往不同,對團隊人員的技能要求有很大差別,項目的組織團隊也會發(fā)生很大變化。
如何調(diào)整組織團隊適應(yīng)項目生命周期進展的需要,既順利銜接,又適應(yīng)變化是許多企業(yè)在實施數(shù)據(jù)倉庫項目時面臨的難題。一些企業(yè)由于疏忽了這個問題的處理,雖然在數(shù)據(jù)倉庫建設(shè)階段取得了很好的成果,順利構(gòu)建起了符合最初項目目標的數(shù)據(jù)倉庫系統(tǒng),
但在后期的運營應(yīng)用中卻遇到了困難,不能使花費了大量成本構(gòu)建的系統(tǒng)很好地發(fā)揮出應(yīng)有的價值。另外,有些數(shù)據(jù)倉庫項目在建設(shè)期間將數(shù)據(jù)集中作為自己的主要目標,在構(gòu)建項目團隊時甚至將應(yīng)用開發(fā)人員劃入外圍團隊,重數(shù)據(jù)采集與平臺搭建,卻忽視了應(yīng)用的及時切入,從而使項目不能盡快產(chǎn)生效益導(dǎo)致失敗。
本文總結(jié)了某省級電信企業(yè)在大型數(shù)據(jù)倉庫項目組織團隊建設(shè)中探索的成果,借簽了Teredata公司的國際經(jīng)驗,為構(gòu)建高效的數(shù)據(jù)倉庫項目組織團隊提供了可供參考的解決方案。
1 數(shù)據(jù)倉庫建設(shè)階段項目團隊組織構(gòu)建
項目團隊包括為完成項目而分派有角色和職責的人員。“團隊、角色、人員”是用來描述項目組織的三個概念,不同的角色代表不同的分工即職責,同一角色可由多個人員承擔,同一人員也可同時兼任多個不同角色。下面描述中團隊、組屬于“團隊”層面概念,用“角色”來描述團隊的具體組織架構(gòu),一個角色可能包含多名成員。
下面是某省級電信企業(yè)在數(shù)據(jù)倉庫建設(shè)期間的項目團隊組織架構(gòu),包括項目核心團隊和項目外圍團隊。項目核心團隊由數(shù)據(jù)倉庫產(chǎn)品廠商、數(shù)據(jù)倉庫集成商、數(shù)據(jù)倉庫建設(shè)單位的人員混編而成。核心團隊中建設(shè)單位參與人員主要是IT部門人員,建設(shè)單位項目經(jīng)理也一般由IT部門派人承擔。
項目外圍團隊主要包括數(shù)據(jù)倉庫最終用戶(省公司級及分公司級業(yè)務(wù)部門人員)、系統(tǒng)維護工程師和源系統(tǒng)技術(shù)專家。項目核心團隊成員都專職參與項目,項目外圍團隊一般采取虛擬團隊模式,成員兼職參與。由于示例中,項目所建數(shù)據(jù)倉庫后續(xù)由集成商負責平臺維護和應(yīng)用開發(fā),
建設(shè)單位只在每個小組中派駐了項目管理人員,在系統(tǒng)建設(shè)期間這些人員通過深入?yún)⑴c項目得到很好的培養(yǎng)和鍛煉,后期不只負責技術(shù)管理,還都成長為技術(shù)專家。項目建設(shè)期間的每個角色分工,都由數(shù)據(jù)倉庫廠商和集成商的人員共同承擔,使集成商得到很好的知識轉(zhuǎn)移,為后續(xù)獨立承擔運營應(yīng)用任務(wù)打下堅實基礎(chǔ)。
由于該系統(tǒng)的硬件平臺后續(xù)采取外包維護的形式,因此將系統(tǒng)維護(數(shù)據(jù)硬件平臺維護)角色也納入外圍團隊。項目核心團隊由三個小組構(gòu)成,數(shù)據(jù)模型組負責源系統(tǒng)的信息分析,概念模型、邏輯模型及物理模型設(shè)計,模型的解釋培訓(xùn),
編碼映射及元數(shù)據(jù)的管理,也負責模型的調(diào)整和維護。平臺維護組負責數(shù)據(jù)庫管理,包括數(shù)據(jù)庫性能、空間、訪問權(quán)限及安全管理,表及視圖創(chuàng)建;與源系統(tǒng)數(shù)據(jù)文件接口的實現(xiàn)及維護,保證數(shù)據(jù)文件及時、完整、正確傳送,并對接口機進行維護;
ETL程序開發(fā)、測試、維護及調(diào)度管理;數(shù)據(jù)質(zhì)量管理與數(shù)據(jù)問題跟蹤處理等。應(yīng)用開發(fā)維護組又下分報表多維分析開發(fā)、專題應(yīng)用數(shù)據(jù)挖掘開發(fā)及即席查詢開發(fā)三個小組。應(yīng)用開發(fā)維護組負責應(yīng)用需求分析管理,應(yīng)用開發(fā)、測試、維護,應(yīng)用推廣培訓(xùn),應(yīng)用門戶網(wǎng)站(Portal)的開發(fā)維護,應(yīng)用服務(wù)器的維護等。
這種組織模式,結(jié)合數(shù)據(jù)倉庫各項工作不同的技能要求,分工非常明確,從系統(tǒng)建設(shè)階段就考慮到了后期運營的承接,并從一開始就特別重視數(shù)據(jù)倉庫的應(yīng)用。在實施數(shù)據(jù)倉庫應(yīng)用時,也常將某個應(yīng)用獨立成一個項目進行運作,
數(shù)據(jù)倉庫核心團隊中應(yīng)用開發(fā)人員與外圍團隊中業(yè)務(wù)部門的業(yè)務(wù)專家密切配合,甚至階段性地全職參與該項應(yīng)用的開發(fā)工作,并對分析成果投入應(yīng)用的全程進行跟蹤和管控,從而使應(yīng)用能切實發(fā)揮效用,產(chǎn)生價值。外圍團隊不像核心團隊一樣是個嚴格按項目管理來運作的項目組,而是一個虛擬團隊。
團隊成員的主要職責往往不是參與數(shù)據(jù)倉庫建設(shè),只是在需要的時候聽從召喚,階段性參與到相關(guān)工作中來,或?qū)⑵渲械哪承┕ぷ骷{入到已有工作職責中成為自己工作的一部分。系統(tǒng)維護角色主要負責數(shù)據(jù)倉庫硬件平臺,包括主機、磁帶庫等的維護及數(shù)據(jù)備份與恢復(fù),他們常還兼任其他系統(tǒng)硬件平臺的維護。
源系統(tǒng)專家配合數(shù)據(jù)倉庫接口文件的抽取和數(shù)據(jù)模型的信息調(diào)研等工作。分公司IT部門負責在分公司層面對數(shù)據(jù)倉庫應(yīng)用的承接,包括分公司業(yè)務(wù)系統(tǒng)與數(shù)據(jù)倉庫接口的維護,與分公司業(yè)務(wù)系統(tǒng)相關(guān)的數(shù)據(jù)質(zhì)量管理及數(shù)據(jù)問題處理,分公司數(shù)據(jù)集市維護,應(yīng)用需求分析與應(yīng)用開發(fā)、維護等。各類業(yè)務(wù)部門(本示例中主要是市場部)是數(shù)據(jù)倉庫的最終用戶,
他們負責應(yīng)用需求的發(fā)起與分析成果的應(yīng)用,使之產(chǎn)生價值,并對應(yīng)用效果進行評估。
2 數(shù)據(jù)倉庫建設(shè)團隊向運營團隊的演進
數(shù)據(jù)倉庫項目區(qū)別于傳統(tǒng)的事務(wù)型IT系統(tǒng)建設(shè)項目。傳統(tǒng)IT項目系統(tǒng)建設(shè)完成后,項目團隊就解散了,留下少量人員做系統(tǒng)的日常運維。而數(shù)據(jù)倉庫系統(tǒng)平臺建設(shè)完成后,更大量的報表及分析應(yīng)用開發(fā)工作也需要以項目的形式進行運作,項目團隊可能會隨著應(yīng)用需求的拓展而不斷膨脹,這也給團隊組織架構(gòu)帶來挑戰(zhàn)。
數(shù)據(jù)倉庫系統(tǒng)平臺建設(shè)驗收后就轉(zhuǎn)入運營階段,這時項目團隊會發(fā)生一系列顯著變化,主要是核心團隊會發(fā)生變化。數(shù)據(jù)倉庫廠商的人員會撤離項目組,小型項目由建設(shè)單位,大型項目由集成商和建設(shè)單位承擔起數(shù)據(jù)倉庫平臺的日常運營應(yīng)用工作。
工作內(nèi)容也會有很大變化,模型設(shè)計、ETL開發(fā)的工作量會大為減少,相反應(yīng)用由星星之火漸成燎原之勢,應(yīng)用需求會應(yīng)接不暇;且隨著應(yīng)用的拓展和深化,各類數(shù)據(jù)問題也會充分暴露,接踵而至。數(shù)據(jù)倉庫項目團隊必須及時調(diào)整以適應(yīng)這些變化。
如何明確人員職責分工,打造核心團隊,建立起適合長期運營,并以項目的形式開展應(yīng)用開發(fā)工作的高效穩(wěn)定的團隊組織架構(gòu)?本文的解決辦法是根據(jù)關(guān)鍵工作流程梳理出關(guān)鍵環(huán)節(jié),根據(jù)關(guān)鍵環(huán)節(jié)明確關(guān)鍵功能點,對應(yīng)設(shè)置關(guān)鍵角色和組織架構(gòu)。
如某省級電信企業(yè),梳理出了3個關(guān)鍵流程和7類關(guān)鍵角色。三個關(guān)鍵流程分別是:數(shù)據(jù)流、任務(wù)流(應(yīng)用需求)和問題流。數(shù)據(jù)流保障數(shù)據(jù)的完整、及時、準確,貫穿數(shù)據(jù)從源系統(tǒng)到應(yīng)用展現(xiàn)的整個流程,在流程的各個環(huán)節(jié)中,
模型管理、運維支撐、應(yīng)用支撐、體系管理和質(zhì)量管理等幾類關(guān)鍵角色分別承擔了相應(yīng)職責。任務(wù)流保障應(yīng)用需求(任務(wù))的合理產(chǎn)生和合格落實,使應(yīng)用開發(fā)符合范圍、進度、質(zhì)量和優(yōu)化(持續(xù)生效)的要求,任務(wù)流貫穿于應(yīng)用開發(fā)的整個生命周期。
在流程的各個環(huán)節(jié)中,需求管理、模型管理、應(yīng)用支撐、專題支撐、運維支撐、體系管理和質(zhì)量管理等幾類關(guān)鍵角色分別承擔了相應(yīng)職責。問題流保障問題及時、準確、全面地解決,它可以是和數(shù)據(jù)倉庫工作相關(guān)的任何問題,包括數(shù)據(jù)質(zhì)量問題。
問題流貫穿于問題由產(chǎn)生到解決的整個生命周期。在流程的各個環(huán)節(jié)中,質(zhì)量管理、模型管理、應(yīng)用支撐、專題支撐、運維支撐和體系管理等幾類關(guān)鍵角色分別承擔了相應(yīng)職責。根據(jù)以上關(guān)鍵流程抽象出的關(guān)鍵角色,形成了以下適應(yīng)數(shù)據(jù)倉庫長期運營的矩陣式項目核心團隊組織架構(gòu)。
在數(shù)據(jù)倉庫運營階段,數(shù)據(jù)倉庫所屬企業(yè)的IT部門專門有一個分支機構(gòu)負責數(shù)據(jù)倉庫的運營,由如表1所示的角色構(gòu)成。以上成員分別滲透到集成商的各項工作中,對應(yīng)各關(guān)鍵角色,發(fā)揮專家顧問和項目管理的作用。
該企業(yè)數(shù)據(jù)倉庫的容量達到83TB,由以上建設(shè)單位及集成商構(gòu)成的44人團隊負責日常運營和應(yīng)用,其中技術(shù)支撐團隊38人,核心成員8人分別占據(jù)7類關(guān)鍵角色,支撐起整個團隊穩(wěn)定高效的運轉(zhuǎn)。團隊組織中7類關(guān)鍵角色的職責分工、技能要求及職業(yè)發(fā)展規(guī)劃。
項目團隊組織架構(gòu)在團隊內(nèi)明確了關(guān)鍵角色,利于打造一支穩(wěn)定稱職的核心數(shù)據(jù)倉庫運營支撐隊伍,并通過這些關(guān)鍵角色保證數(shù)據(jù)倉庫的關(guān)鍵工作流程得到高效落實。通過需求管理,加強與客戶的溝通和需求的統(tǒng)籌把控,保證團隊人力資源發(fā)揮最大價值;
通過需求管理、模型管理對應(yīng)用及中間層數(shù)據(jù)模型進行統(tǒng)一規(guī)劃,提升應(yīng)用開發(fā)成果的可重用性;通過質(zhì)量管理,加強對問題的跟蹤解決和客戶申告的及時處理,提升客戶滿意度,并讓各環(huán)節(jié)、各崗位協(xié)同解決數(shù)據(jù)質(zhì)量問題,全員對數(shù)據(jù)質(zhì)量問題負責,更適合數(shù)據(jù)質(zhì)量問題的解決特點。
應(yīng)用開發(fā)與ETL開發(fā)需要的技能相同,應(yīng)用人員可參與ETL開發(fā),應(yīng)用開發(fā)從ETL開發(fā)開始,貫通各環(huán)節(jié),便于開發(fā)的項目管理及應(yīng)用的維護管理,并可根據(jù)需要動態(tài)調(diào)節(jié)ETL開發(fā)資源。運維與開發(fā)的工作性質(zhì)有很大區(qū)別,將ETL運維與開發(fā)分開,運維只需要較低的技能,ETL運維人員可同時兼接口運維等工作,便于工作管理、提升效率、保證質(zhì)量。
將應(yīng)用門戶維護、Web類應(yīng)用開發(fā)等需要專門技能的工作納入應(yīng)用支撐組統(tǒng)一管理,相關(guān)資源共享,并保證各類應(yīng)用的統(tǒng)籌規(guī)劃部署。應(yīng)用及專題支撐開發(fā)采用項目經(jīng)理制,各成員都有機會成為負責具體應(yīng)用項目的項目經(jīng)理,充分挖掘人員的潛力,
且隨著應(yīng)用項目的拓展不會導(dǎo)致組織機構(gòu)膨脹。通過以上調(diào)整,數(shù)據(jù)倉庫運營團隊面貌煥然一新,成員的工作積極性被極大激發(fā),潛能被充分挖掘,團隊更加穩(wěn)定,流程更加順暢,工作更為高效,數(shù)據(jù)倉庫價值得到更好發(fā)揮。
3 結(jié)語
本文為大型企業(yè)數(shù)據(jù)倉庫建設(shè)及運營階段項目團隊的構(gòu)建提供了可參考的解決方案。其特點是,建設(shè)階段的項目團隊由項目發(fā)起方、數(shù)據(jù)倉庫廠商、集成商混編而成,明確各自定位,注重知識轉(zhuǎn)移,從系統(tǒng)建設(shè)階段就考慮到了后期運營的承接,并從一開始就特別重視數(shù)據(jù)倉庫的應(yīng)用;
在運營階段,適時進行團隊組織的調(diào)整,以適應(yīng)形勢變化,經(jīng)歷了應(yīng)用急劇膨脹的考驗,通過摸索演進,最終找到了一種高效的、穩(wěn)定的適應(yīng)長期運營的數(shù)據(jù)倉庫項目團隊組織構(gòu)建模式。該模式根據(jù)關(guān)鍵工作流程梳理出關(guān)鍵環(huán)節(jié),根據(jù)關(guān)鍵環(huán)節(jié)明確關(guān)鍵功能點,對應(yīng)設(shè)置關(guān)鍵角色和組織架構(gòu)。
通過組織架構(gòu)調(diào)整后,團隊面貌煥然一新,工作效率極大提高,客戶滿意度顯著提升,使數(shù)據(jù)倉庫系統(tǒng)價值得到更好發(fā)揮。
溫馨提示:因考試政策、內(nèi)容不斷變化與調(diào)整,信管網(wǎng)網(wǎng)站提供的以上信息僅供參考,如有異議,請以權(quán)威部門公布的內(nèi)容為準!
信管網(wǎng)致力于為廣大信管從業(yè)人員、愛好者、大學(xué)生提供專業(yè)、高質(zhì)量的課程和服務(wù),解決其考試證書、技能提升和就業(yè)的需求。
信管網(wǎng)軟考課程由信管網(wǎng)依托10年專業(yè)軟考教研傾力打造,官方教材參編作者和資深講師坐鎮(zhèn),通過深研歷年考試出題規(guī)律與考試大綱,深挖核心知識與高頻考點,為學(xué)員考試保駕護航。面授、直播&錄播,多種班型靈活學(xué)習(xí),滿足不同學(xué)員考證需求,降低課程學(xué)習(xí)難度,使學(xué)習(xí)效果事半功倍。
發(fā)表評論 查看完整評論 | |