
01、什么是企業架構
企業架構并不是一個新的概念,那企業架構是做什么的呢?企業架構是對真實世界企業的業務流程和IT設施的抽象描述,包括企業戰略、組織、職能、業務流程、IT系統等。對于數據領域來講企業抽象是流程和信息流。在做模型化時要分離出哪些部分呢?比如流程描述把企業看成價值鏈,所謂價值鏈就是把原材料開始經過一系列的加工,最終實現為客戶提供有價值的產品。
我們做個類比,一個城市需要做整體規劃,也會做功能區規劃,最終是建筑物和工程局部設計。同理,企業做IT也需要一個架構,企業架構是由很多模塊組成,比如財務、供應鏈、生產系統等,不同模塊下也有很多功能,也需要細致的設計。
肯定了企業要做架構,我們來看一下企業架構的歷史,信息化架構發展歷史是非常久遠的,上世紀80年代末開始,直到2011年左右,企業架構被廣泛接受。
02、Togaf的 ADM方法論
下面重點介紹下Togaf 的ADM方法論,即所謂的“一備一中心和八個階段”,主要表現在以下四個方面:
1.預備階段:達成要建設企業架構的共識,建立架構的保障機制,比如企業架構委員會。
2.設計階段:包含業務架構、信息系統架構、技術架構,其中信息系統架構包含數據和應用。不同的業務形態,對架構的要求是不同的。比如非智能制造的生產型企業的數據應用需求主要是經營業績分析,采用傳統數倉架構即可;而智能客戶運營階段的服務型企業,數據應用需求主要是基于行為數據為基礎的數據驅動的操作層面的業務決策,采用Hadoop架構更節約成本。
3.遷移規劃階段。架構設計完后,制定實施計劃,進行架構的執行和遷移規劃。
4.架構治理階段。PMO對項目實施過程進行治理,并對業務或技術變更進行控制。
下面我們來細化一下架構設計方面的內容。
業務架構:主要由業務分析師來完成,包括靜態的企業戰略方位圖、企業組織結構圖和企業職能分解圖,以及動態的企業業務軌跡圖和業務流程圖。根據業務流程圖可以知道應用系統如何建設,這里面需要的數據是數據架構所需要涉及的。
應用架構:表示的是應用系統與業務系統的映射關系。
數據架構:主要包括數據模型、數據實體-業務功能矩陣、數據實體-應用系統矩陣。企業的數據模型有利于更深入地了解企業數據,便于梳理企業數據資產,便于企業貫徹數據標準。數據實體-業務功能矩陣中可以確認數據由哪些部門負責和使用,有利于權限分配。數據實體-應用系統矩陣,梳理某一數據在不同系統中分布情況。
技術架構:主要包括環境與位置圖、網絡計算圖、平臺分解圖等。
03、TOGAF構架
主要分為6個部分,靜態內容方法論,提供功能模板、參考模型、在架構開發時在不同的階段進行架構開發指引和技術、企業連續系列參考和架構能力框架。
01、成為智慧企業的必經之路
在我國的大部分人的概念中,BI最大的特點就是對經營業績、經營成果進行分析。BI宏觀業務分析,基于報表和可視化的分析。AI是微觀業務分析,建立起對微觀個體的洞察以及未來行為的預測。面向BI的數據應用要求數據在數據倉庫匯總和標準化即可,因此源系統可以是“豎井”,即數據模型和數據標準在源系統可以不統一。AI最終服務的不是業務報表,而是建模完成后最終返回到業務系統,在一些流程節點當中需要用到算法模型的輸出,在業務系統中落地。業務系統中的標準和分析系統中的標準是一體化打通的,因此對IT系統是更為嚴格的要求。既然要做轉變,我們需要做什么事情呢?我們可以從四個方面考慮,分為數據戰略、數據架構、算法架構、數據平臺。
1. 數據戰略:將數據素養納入組織愿景、戰略和核心流程,制定企業級的數據應用規劃。
2. 數據架構:根據數據應用的需求,以領域驅動設計為方法論,構建企業級的數據模型及其他組件。企業的數據模型視應用的方向不同,不限于傳統的主題模型和維度模型,還有可能是復雜網絡模型等等。其中數據模型會分層,面向應用的上層數據主要服務于經營分析、客戶洞察、風險識別等;底層的數據更貼近源系統。
3. 算法架構:根據數據應用的需求,使用數據挖掘的方法論,構建企業級的算法模型及其組件。企業的算法模型是應用的方向不同,分為統計模型、機器學習模型、自優化模型等。一般分為兩層結構,上層是算法實現層,下層是特征工程層。我們主要講一下服務行業的算法架構,主要包括決策類預測、識別類模型和業務優化分析。算法模型需要從視角、觀點、層次三個方面進行劃分,即主體-客體視角、成本-收益觀點、微觀-宏觀層次。對于決策類模型,屬于客體視角、成本-收益可比的微觀層次模型。識別類模型,屬于主體視角、成本-收益不可比的微觀層次模型。業務優化分析,屬于宏觀層次模型。
4. 數據和算法平臺:為了支持不同的數據架構和算法架構,則需要建立不同的數據和算法平臺。比如傳統服務于經營分析的報表是小數據量的,使用單機關系型數據庫架構即可,不需要算法平臺;而服務于違規交易識別的復雜網絡的數據模型,需要進行深度的特征學習,因此數據平臺中需要圖數據庫模塊,而算法平臺中需要支持并行深度學習。
02、如何能做到持續智能
傳統企業由于組織隔離,導致交付時間長、難以支持創新。如果希望提高創新速度、敏捷開發、縮短交付時間,則需要組建數據科學家、開發人員和運營人員攜手合作的混合團隊。
03、持續智能的能力建設
這是ThoughtWorks所倡導的持續智能能力,主要分為:
1. 識別變化,采用程式化的方式自動識別外部環境的改變,比如在信貸風控中,實時監控數據漂移和數據異常,評估準入規則和風控模型的適用性。
2. 敏捷研究,提供建模人員敏捷工作環境,縮短建模中占時80%的低效特征構建和價值驗證工作。
3. 智能建模,在算法模型需要調整時,基于既有的標簽和畫像特征,快速迭代算法模型。
4. 智能評估,模型上線后,配置好回流數據,可以對模型進行實時評估。
5. 敏捷測試,對模型的穩健性進行快速的全方位測試,縮短算法模型開發和算法模型上線的時間,避免算法模型崩潰導致的業務中斷。
舉個例子,疫情期間很多傳統模型無法使用,針對風險變化快速建模的能力顯得尤為重要。因為客群發生很大的漂移,需要公司快速建模的能力,尤其是針對敏捷研究,可以在短時間內快速上線。
DataPipline實現標簽提取,特征工程,樣本選取。打通生產環境和分析環境的數據標準,實現企業級的數據標準版本管理和算法模型版本管理。對于分析建模人員而言,實現入模特征的所用即所得,避免模型上線時重新編輯特征。
DataOps敏捷研究智能建模,可以實現數據與算法的融合和管理。建立起端到端的數據算法模型開發團隊,避免開發語言轉換、數據轉換等無效率環節。
04、ThoughtWorks數字化愿景
為了實現構建智慧、敏捷、場景驅動的美好愿望,需要實現深入客戶洞察、縮短產品上市時間、創造數字化收益等戰略子目標。數據資產和算法能力是支持各個戰略子目標的基礎。而ThoughtWorks認為支持能力建設的五個數字化基礎組件是必不可少的,分別是低摩擦運營模式、企業級平臺戰略、用戶體驗設計和數字化產品能力、智能驅動的決策機制、工程師文化和持續交付的思維。
數據資管出品
作者:研究猿
數據分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
CDA數據分析師證書考試體系(更新于2025年05月22日)
2025-05-26解碼數據基因:從數字敏感度到邏輯思維 每當看到超市貨架上商品的排列變化,你是否會聯想到背后的銷售數據波動?三年前在零售行 ...
2025-05-23在本文中,我們將探討 AI 為何能夠加速數據分析、如何在每個步驟中實現數據分析自動化以及使用哪些工具。 數據分析中的AI是什么 ...
2025-05-20當數據遇見人生:我的第一個分析項目 記得三年前接手第一個數據分析項目時,我面對Excel里密密麻麻的銷售數據手足無措。那些跳動 ...
2025-05-20在數字化運營的時代,企業每天都在產生海量數據:用戶點擊行為、商品銷售記錄、廣告投放反饋…… 這些數據就像散落的拼圖,而相 ...
2025-05-19在當今數字化營銷時代,小紅書作為國內領先的社交電商平臺,其銷售數據蘊含著巨大的商業價值。通過對小紅書銷售數據的深入分析, ...
2025-05-16Excel作為最常用的數據分析工具,有沒有什么工具可以幫助我們快速地使用excel表格,只要輕松幾步甚至輸入幾項指令就能搞定呢? ...
2025-05-15數據,如同無形的燃料,驅動著現代社會的運轉。從全球互聯網用戶每天產生的2.5億TB數據,到制造業的傳感器、金融交易 ...
2025-05-15大數據是什么_數據分析師培訓 其實,現在的大數據指的并不僅僅是海量數據,更準確而言是對大數據分析的方法。傳統的數 ...
2025-05-14CDA持證人簡介: 萬木,CDA L1持證人,某電商中廠BI工程師 ,5年數據經驗1年BI內訓師,高級數據分析師,擁有豐富的行業經驗。 ...
2025-05-13CDA持證人簡介: 王明月 ,CDA 數據分析師二級持證人,2年數據產品工作經驗,管理學博士在讀。 學習入口:https://edu.cda.cn/g ...
2025-05-12CDA持證人簡介: 楊貞璽 ,CDA一級持證人,鄭州大學情報學碩士研究生,某上市公司數據分析師。 學習入口:https://edu.cda.cn/g ...
2025-05-09CDA持證人簡介 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度、美團、阿里等 ...
2025-05-07相信很多做數據分析的小伙伴,都接到過一些高階的數據分析需求,實現的過程需要用到一些數據獲取,數據清洗轉換,建模方法等,這 ...
2025-05-06以下的文章內容來源于劉靜老師的專欄,如果您想閱讀專欄《10大業務分析模型突破業務瓶頸》,點擊下方鏈接 https://edu.cda.cn/g ...
2025-04-30CDA持證人簡介: 邱立峰 CDA 數據分析師二級持證人,數字化轉型專家,數據治理專家,高級數據分析師,擁有豐富的行業經驗。 ...
2025-04-29CDA持證人簡介: 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度,美團,阿里等 ...
2025-04-28CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-27數據分析在當今信息時代發揮著重要作用。單因素方差分析(One-Way ANOVA)是一種關鍵的統計方法,用于比較三個或更多獨立樣本組 ...
2025-04-25CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-25