
在軟件開發、信息安全和數據分析的長期職業生涯中,我觀察到,除非得到非常好的管理,否則大型、復雜和壓倒性的項目可能無法滿足風險承擔者的需求。相比之下,我參與的大多數成功的數據分析項目在范圍、規模、團隊規模和時間表上都很小。它們通常需要幾天、幾周或幾個月的時間來完成,而不是需要幾年的時間,并且通常滿足最終用戶的需求。
健全的管理、敏捷實踐、熟練的實踐者、強大的工具、標準和指導方針可以結合起來創建一個數據分析生態系統,從而導致短的項目生命周期和有用的解決方案。以下各節描述了我的團隊開發并成功利用的一些組織、項目和數據分析屬性和技術。當我們在大型企業的風險管理和內部審計功能中構建數據分析程序時,您也可以將這些技術應用到您的工作環境中。
在我從事軟件開發和數據分析的34年中,我觀察到了許多管理和領導風格,有好的也有壞的。我最近在與一位經理一起工作時茁壯成長,這位經理創建了一個框架,并指導我們的團隊在一家大型企業中建立了一個成功的部門數據分析程序。根據經驗和觀察,以下是他和其他模范領導者為幫助個人、團隊和項目取得成功而發揮的一些屬性和行動:
幾年前,我參加了一個數據分析會議,會上一位演講者描述了她作為數據科學家所需的一些技能。她說,要有效地完成工作,需要200多項技能。事實上,創建成功的數據分析解決方案需要分析師具備許多才能。要雇用和培養具備所需技能和知識的分析師,您和您的管理層可以考慮以下步驟:
大型團隊的復雜項目可能會陷入困境,除非經過專業的管理。試圖保持每個項目的規模和范圍較小,并將團隊的規模限制在一到三個最終用戶和一個首席數據分析師,這可能有助于項目的成功。團隊可以將數據分析師添加到復雜的項目中,這將從分工或互補技能中受益。對于大型或復雜的項目,您可能希望指派一名項目經理與團隊一起工作,以確定和管理任務、時間表、風險和問題。最后,在需要的時候,在項目的業務領域中尋找主題專家。
項目團隊,尤其是在軟件開發中,經常將敏捷開發方法,如Scrum或看板,應用到他們的項目中,以組織任務并快速移動。我的團隊有效地使用了在Microsoft OneNote中開發的看板板,以便在頻繁的即席會議上在團隊和經理之間跟蹤和交流任務。它由一頁上的三欄組成。每個任務在開始時從準備工作轉移到工作中,在完成時從工作中轉移到完成。
在整個項目生命周期中與最終用戶、隊友和經理的對話對于建立和堅持其商定的和簡明的范圍、目標和時間表至關重要。通過保持項目緊湊,我成功地完成了一周到三個月的項目。
如果一個項目很大很復雜,可以考慮把它分成一些較小的子項目,每個子項目都有有限的范圍、目標和時間表。
一些研究人員發現,當多任務處理時,人類的表現會受到影響。給個人分配大量的項目或任務可能會適得其反。此外,雖然技能和任務多樣性是可以提高個人滿意度和績效的工作組成部分(見工作特征理論),但分配給員工的項目或任務的數量應該合理,以允許員工成功并完成所有這些項目或任務。
在一個運作良好的團隊中工作可以提供許多好處,例如:
有效的團隊合作的好處是毫無疑問的。另一方面,某些類型的工作,如數據分析、編程和寫作,通常最好由半自主工作的個人完成,通常由團隊成員提供輸入。他們的工作需要專注和有限的干擾。
數據分析員應該為自己配備強大的、多功能的數據分析工具,以滿足他們的需求。通過這種方法,分析人員可以利用每個工具的特性并開發能力和最佳實踐。以下各節描述了我的當前團隊在其數據分析項目中使用的每個軟件包。
AlteryX Designer-根據AlteryX的網站,設計器可以用來“自動化分析的每一步,包括數據準備、混合、報告、預測分析和數據科學?!彪m然單用戶許可成本數千美元,但它是一個強大的數據分析和數據科學工具。我的團隊使用它來創建和運行輸入數據、轉換和準備數據以及以多種格式輸出數據的工作流。分析人員使用它快速、輕松地創建功能強大、運行迅速的工作流。
Tableau-Tableau軟件創建了一個強大的,也許是最流行的商業智能和數據可視化平臺。我的團隊使用Tableau Desktop連接到數據源并開發可視化工作表和儀表板。然后,我們將可視化發布到Tableau服務器,終端用戶在那里查看并與它們交互。
Python-Python是一種用戶友好且功能強大的編程語言,深受數據分析師和數據科學家的歡迎。與數據科學家中流行的以統計數據為中心的R語言不同,Python是一種通用語言。它是自由和容易學習。分析人員可以使用免費的庫來擴展Python的功能,比如NumPyandTensorFlow。
SQL-結構化查詢語言(SQL)是用于實現、操作和查詢存儲在關系數據庫管理系統(RDBMS)中的結構化數據的標準語言。它包括多個子語言。通過其數據查詢語言(DQL),分析人員可以從數據庫表中查詢和檢索數據。RDMS數據庫存儲了世界各地企業的大量數據集。
Microsoft SQL Server Management Studio(SSMS)-SSMS是Microsoft的集成開發環境(IDE),用于管理和查詢在其SQL Server RDBMS中實現的數據庫。我使用SSMS創建和運行SQL代碼來查詢包含所需數據的數據庫。
Rapid SQL-Rapid SQL是一種類似SSMS的IDE,用于開發SQL查詢以訪問存儲在Oracle、SQL Server、DB2和SAP Sybase數據庫中的數據。我使用快速SQL從DB2或Oracle數據庫中獲取數據。
Microsoft Visual Studio-Visual Studio是Microsoft的旗艦集成開發環境(IDE)。我使用Visual Studio Professional創建用Python和其他編程語言編寫的應用程序。它的編輯器功能強大,帶有顏色編碼的語法。Visual Studio Community 2019是IDE的免費版本,可以滿足您的需求。來自Microsoft的Visual Studio代碼(VS Code)是另一種受程序員和數據分析師歡迎的免費IDE。
Microsoft Excel-Excel當然是一個無處不在、有用、功能強大、有時是不可或缺的工具。我使用Excel工作簿作為項目數據源和輸出來創建小型數據集,執行必要的數據清理和計算,等等。像Excel這樣的電子表格應用程序是任何數據分析或數據科學商店中的重要工具。
在數據分析項目中應用簡明的標準和指導方針可以提高工作產品的生產率、維護和共享。以下是指導我工作的標準和指導方針。
命名標準-如何將文件夾、文件、數據庫表、列和字段等項標準化,以便于一致地命名它們,并在許多產品的集合中查找工作產品。
文件夾結構標準和模板-對所有項目使用標準文件夾結構可以輕松設置新項目和查找文件夾和文件。我的團隊使用以下文件夾結構模板來組織和存儲所有數據分析項目的工作產品:
文件夾結構根據每個項目的需要展開和收縮。
編碼標準-編碼標準適用于編程,就像語法適用于英語散文一樣。它們幫助我們清晰一致地組織和傳達思想。我工作過的數據分析和軟件開發團隊從文檔化的編碼約定中受益。在項目中應用這些標準可以使每個代碼模塊的原始編碼器更容易編寫,任何團隊成員也更容易閱讀、理解、增強和維護。下面是我的團隊用來指導其工作的一些編碼標準的描述。
可視化樣式指南-雖然編碼標準可以幫助程序員理解、編寫和維護代碼,但可視化樣式指南可以幫助數據分析師開發一致、有用和有意義的可視化。它們還可以通過提供一致的、設計良好的、易于理解的和用戶友好的可視化,使數據分析項目的最終用戶受益。以下是我的團隊采用的一些視覺風格指南。
建立一個有效的數據分析團隊并不容易,它定期構建和交付數據分析解決方案,為最終用戶提供洞察力并幫助他們做出決策。但是,應用我在軟件開發和數據分析的長期職業生涯中所學到、采用和開發的一些經驗教訓和有效實踐可能會幫助您取得成功。
數據分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
解碼數據基因:從數字敏感度到邏輯思維 每當看到超市貨架上商品的排列變化,你是否會聯想到背后的銷售數據波動?三年前在零售行 ...
2025-05-23在本文中,我們將探討 AI 為何能夠加速數據分析、如何在每個步驟中實現數據分析自動化以及使用哪些工具。 數據分析中的AI是什么 ...
2025-05-20當數據遇見人生:我的第一個分析項目 記得三年前接手第一個數據分析項目時,我面對Excel里密密麻麻的銷售數據手足無措。那些跳動 ...
2025-05-20在數字化運營的時代,企業每天都在產生海量數據:用戶點擊行為、商品銷售記錄、廣告投放反饋…… 這些數據就像散落的拼圖,而相 ...
2025-05-19在當今數字化營銷時代,小紅書作為國內領先的社交電商平臺,其銷售數據蘊含著巨大的商業價值。通過對小紅書銷售數據的深入分析, ...
2025-05-16Excel作為最常用的數據分析工具,有沒有什么工具可以幫助我們快速地使用excel表格,只要輕松幾步甚至輸入幾項指令就能搞定呢? ...
2025-05-15數據,如同無形的燃料,驅動著現代社會的運轉。從全球互聯網用戶每天產生的2.5億TB數據,到制造業的傳感器、金融交易 ...
2025-05-15大數據是什么_數據分析師培訓 其實,現在的大數據指的并不僅僅是海量數據,更準確而言是對大數據分析的方法。傳統的數 ...
2025-05-14CDA持證人簡介: 萬木,CDA L1持證人,某電商中廠BI工程師 ,5年數據經驗1年BI內訓師,高級數據分析師,擁有豐富的行業經驗。 ...
2025-05-13CDA持證人簡介: 王明月 ,CDA 數據分析師二級持證人,2年數據產品工作經驗,管理學博士在讀。 學習入口:https://edu.cda.cn/g ...
2025-05-12CDA持證人簡介: 楊貞璽 ,CDA一級持證人,鄭州大學情報學碩士研究生,某上市公司數據分析師。 學習入口:https://edu.cda.cn/g ...
2025-05-09CDA持證人簡介 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度、美團、阿里等 ...
2025-05-07相信很多做數據分析的小伙伴,都接到過一些高階的數據分析需求,實現的過程需要用到一些數據獲取,數據清洗轉換,建模方法等,這 ...
2025-05-06以下的文章內容來源于劉靜老師的專欄,如果您想閱讀專欄《10大業務分析模型突破業務瓶頸》,點擊下方鏈接 https://edu.cda.cn/g ...
2025-04-30CDA持證人簡介: 邱立峰 CDA 數據分析師二級持證人,數字化轉型專家,數據治理專家,高級數據分析師,擁有豐富的行業經驗。 ...
2025-04-29CDA持證人簡介: 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度,美團,阿里等 ...
2025-04-28CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-27數據分析在當今信息時代發揮著重要作用。單因素方差分析(One-Way ANOVA)是一種關鍵的統計方法,用于比較三個或更多獨立樣本組 ...
2025-04-25CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-25在當今數字化時代,數據分析師的重要性與日俱增。但許多人在踏上這條職業道路時,往往充滿疑惑: 如何成為一名數據分析師?成為 ...
2025-04-24