
數據庫與大數據領域回顧與展望
2012注定是不平凡的一年,瑪雅人將世界末日定在這一年的12月21日,然而這一天也許并不意味著結束,而是重生。正如2012對于大數據的意義一樣,經過一年的歷練,IT業界將在2013年迎來大數據元年。
一、2012年度回顧:大數據蓄勢待發迎接元年
(一)2012年大數據呈現新特征
大數據不是剛剛出現的概念,大數據最早可以追溯到Apache的開源項目Nutch,當時大數據用來描述更新網絡搜索索引所需批量處理或分析的大量數據集。隨著谷歌MapReduce和GoogleFile System(GFS)的發布,大數據不僅僅用來描述大量的數據,還涵蓋了處理數據的速度。
業界對大數據最普遍的認知是它的4V特征,即海量的數據規模(volume)、快速的數據流轉和動態的數據體系(velocity)、多樣的數據類型(variety)和巨大的數據價值(value)。2012年作為大數據產業蓄勢待發的一年,大數據呈現以下新特征:
1.數據量增長更加迅速。隨著社交網絡和移動互聯網的發展,數據呈現爆炸式增長,甚至過去三年里產生的數據量超越了以往四萬年的數據量。國內最大的微博新浪微博在今年第三季度宣布注冊用戶已超過4億,用戶平均每天發布超過10億條微博內容,活躍用戶中有60%通過移動終端登錄,所有來自移動終端的原創內容中,有40%的微博分享照片。根據IDC今年一項研究顯示,未來10年全球數據量將以40%的速度增長,到2020年將達到35ZB(Zettabyte),大數據將迎來ZB時代。然而這僅僅是個開始,未來數據量將達到什么級別,我們無法想象。
2.數據在企業中的地位日益突出。數據是企業最寶貴的資源。當前,企業最迫切的就是希望能從大數據中挖掘商業價值,以保持其在市場中的競爭力。隨著數據挖掘、數據分析和商業智能技術的不斷深入,企業決策越來越依賴于數據。大數據將會創造一個新的經濟領域,該領域的全部任務就是將信息或數據轉化為經濟利益。分析的數據越全面,分析結果就越接近于真實,才能更好的指導企業運營。.企業中的數據既包括結構化數據,也包括非結構化數據,且非結構化數據的比例越來越高。IDC在報告中指出,利用大數據的商業價值:領軍企業與其他企業之間最大的顯著差別在于新數據類型的引入,那些沒有引入新的分析技術和新的數據類型的企業,不太可能成為其行業的領軍者。
3.大數據人才缺口巨大。大數據時代更需要復合型人才,能夠幫助組織在大量信息中挖掘有價值的數據,并將數據轉化為深入的認知和精準預測的模型。大數據人才須具備綜合性素質:他們通常是統計學家并且精通數據建模,同時知道如何在可用數據中使用最佳的算法,這極具技術含量。據Gartner預測,到2015年,全球將新增440萬個與大數據相關的工作崗位,且會有25%的組織設立首席數據官職位。今年7月,阿里巴巴集團成為國內第一家任命首席數據官的企業,業內也普遍看好數據人才的未來。
4.企業對大數據的投入增加。2012年大數據市場的增長速度明顯快于整個IT市場,據Gartner的最新統計,大數據市場銷售額將在2012年增長21.4%,達到340億美元。在今年大數據總開支中,只有43億美元或12.6%的資金是直接由新的大數據功能產生的,而大部分的開支仍流向比較傳統的解決方案,以滿足企業對速度、多樣性和數據容量的需求。目前企業對大數據的投入還停留在基礎設施建設階段,想要真正將數據轉化為價值,還需繼續在數據分析和展現等環節加大投入。
(二)IT巨頭進軍大數據 新興企業不斷涌現
大數據帶來的商業機遇被越來越多的廠商看重,傳統IT廠商陸續推出大數據產品及解決方案,引入多年技術積累和客戶資源;同時大數據新興企業不斷涌現,大有超越前者之勢。
1.IT巨頭進軍大數據。以IBM、Oracle、SAP、Intel、微軟為代表的老牌IT廠商將業務觸角伸向大數據產業,推出軟件、硬件及軟硬件一體化的行業解決方案。這其中既包括對Hadoop等開源大數據技術的集成,也包括各大廠商獨有的創新技術。
收購也是IT巨頭進入大數據市場的敲門磚。今年4月,虛擬化巨頭VMware收購大數據分析的初創企業Cetas,提供Hadoop平臺上的分析服務,從而開啟VMware大數據之旅。另外,大數據收購案例還包括Teradata收購高級分析和管理各種非結構化數據領域的市場領導者和開拓者Aster Data,IBM收購商業分析公司Netezza等。
這些老牌IT廠商技術實力不俗,產品線豐富,在各個領域發揮重要作用。進軍大數據市場,既增加了雄厚的技術底蘊,也能夠讓客戶更容易的接受他們的產品或解決方案,逐漸成為大數據產業發展的主力軍。
2.新興企業不斷涌現。與那些老牌IT廠商不同,大數據市場還吸引了許多新興企業的加盟。面對大數據帶來的無限商機,初創公司開始挖掘大數據的商業價值,推出別具一格的產品或解決方案。
在這些新興企業中,有業內比較熟悉的基于Apache Hadoop的大數據分析解決方案的提供商Datameer、大數據分析公司Connotate、大數據技術初創公司ClearStory Data等,其中大數據公司Splunk于今年4月在納斯達克成功上市。
新興企業擁有獨特的技術優勢,是傳統IT企業所不具有的。相對于IT巨頭,新興企業更能夠從細化的角度服務企業,向企業提供更專業的大數據服務。因此,在充滿機遇的大數據市場,新興企業完全有可能超越IT巨頭,在短時間內獲得市場的認可。
數據分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
CDA數據分析師證書考試體系(更新于2025年05月22日)
2025-05-26解碼數據基因:從數字敏感度到邏輯思維 每當看到超市貨架上商品的排列變化,你是否會聯想到背后的銷售數據波動?三年前在零售行 ...
2025-05-23在本文中,我們將探討 AI 為何能夠加速數據分析、如何在每個步驟中實現數據分析自動化以及使用哪些工具。 數據分析中的AI是什么 ...
2025-05-20當數據遇見人生:我的第一個分析項目 記得三年前接手第一個數據分析項目時,我面對Excel里密密麻麻的銷售數據手足無措。那些跳動 ...
2025-05-20在數字化運營的時代,企業每天都在產生海量數據:用戶點擊行為、商品銷售記錄、廣告投放反饋…… 這些數據就像散落的拼圖,而相 ...
2025-05-19在當今數字化營銷時代,小紅書作為國內領先的社交電商平臺,其銷售數據蘊含著巨大的商業價值。通過對小紅書銷售數據的深入分析, ...
2025-05-16Excel作為最常用的數據分析工具,有沒有什么工具可以幫助我們快速地使用excel表格,只要輕松幾步甚至輸入幾項指令就能搞定呢? ...
2025-05-15數據,如同無形的燃料,驅動著現代社會的運轉。從全球互聯網用戶每天產生的2.5億TB數據,到制造業的傳感器、金融交易 ...
2025-05-15大數據是什么_數據分析師培訓 其實,現在的大數據指的并不僅僅是海量數據,更準確而言是對大數據分析的方法。傳統的數 ...
2025-05-14CDA持證人簡介: 萬木,CDA L1持證人,某電商中廠BI工程師 ,5年數據經驗1年BI內訓師,高級數據分析師,擁有豐富的行業經驗。 ...
2025-05-13CDA持證人簡介: 王明月 ,CDA 數據分析師二級持證人,2年數據產品工作經驗,管理學博士在讀。 學習入口:https://edu.cda.cn/g ...
2025-05-12CDA持證人簡介: 楊貞璽 ,CDA一級持證人,鄭州大學情報學碩士研究生,某上市公司數據分析師。 學習入口:https://edu.cda.cn/g ...
2025-05-09CDA持證人簡介 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度、美團、阿里等 ...
2025-05-07相信很多做數據分析的小伙伴,都接到過一些高階的數據分析需求,實現的過程需要用到一些數據獲取,數據清洗轉換,建模方法等,這 ...
2025-05-06以下的文章內容來源于劉靜老師的專欄,如果您想閱讀專欄《10大業務分析模型突破業務瓶頸》,點擊下方鏈接 https://edu.cda.cn/g ...
2025-04-30CDA持證人簡介: 邱立峰 CDA 數據分析師二級持證人,數字化轉型專家,數據治理專家,高級數據分析師,擁有豐富的行業經驗。 ...
2025-04-29CDA持證人簡介: 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度,美團,阿里等 ...
2025-04-28CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-27數據分析在當今信息時代發揮著重要作用。單因素方差分析(One-Way ANOVA)是一種關鍵的統計方法,用于比較三個或更多獨立樣本組 ...
2025-04-25CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-25