
全球數據每兩年翻番 催生大數據機遇和IT新職位
EMC公司今天宣布,由EMC贊助的題為“從混亂中挖掘價值”的IDC最新“數字宇宙”研究結果,全世界的信息量每兩年以超過翻番的速度增長,2011年將產生和復制1.8ZB的海量數據,其增長速度超過摩爾定律。
今年是IDC第五次進行每年一次的“數字宇宙”研究,該研究衡量和預測每年產生及復制的數字信息量,并分析這些數字信息對個人、企業以及IT專業人士的意義。今年的IDC“數字宇宙”研究對大數據而言有著巨大的經濟、社會和技術意義,而且揭示了其他一些商機。
僅就數據量而言,1.8ZB數據相當于:
中國每個人每分鐘發送3條微博且連續6217年不間斷。
全世界每個人每天進行逾2.15億次高分辨率核磁共振成像(MRI)掃描。
超過2000億個高清電影(每個長度為兩小時),一個人24小時不間斷地看這些電影,全部看完需要4700萬年。
這些信息將填滿575億個32GB的蘋果iPad。如果有這么多iPad,我們可以:
建起一堵長4005英里、高61英尺、從美國阿拉斯加安克雷奇一直延伸到佛羅里達邁阿密的iPad墻。
在中國建起一堵iPad長城,平均高度是真實長城的兩倍。
圍著南美建起一堵高20英尺的墻。
覆蓋86%的墨西哥城。
建起一座比富士山高25倍的山峰。
這種數據持續增長背后的驅動力是技術和金錢。新的“掌控與利用信息”的技術正在促使信息產生、獲取、管理和存儲成本的下降,現在該成本是2005年的1/6。此外,自2005年以來,企業在數字宇宙領域的年度投資已經增加了50%,達到了4萬億美元。這些投資指云計算、硬件、軟件、服務和人員的投資,以產生、管理和存儲信息并從信息產生收入。
研究結果要點:
服務器、數據管理和文件的海量增長與人員配備不匹配:IDC特別提到,管理海量數據所需的技能、經驗和資源根本跟不上所有領域的增長。在下一個10年(到2020年),全世界的IT部門都將看到:
服務器數量增加10倍(虛擬的和物理的)。
有待管理的信息量增加50倍。
文件或在數字宇宙中封裝信息的器件的數量增加75倍,文件或容器甚至比信息本身增加得還快,因為出現了越來越多的嵌入式系統,如衣服、橋梁或醫療設備中的傳感器。
能夠管理這一切的IT專業人員的數量增加1.5倍。
云計算的成本和運營效率:盡管在今天的IT支出中,云計算占不到2%,但是IDC估計,到2015年,將近20%的信息要通過云計算服務提供商才能接觸到,這意味著,字節在從產生到廢棄的過程中,將經過在云中存儲或處理這一環。也許多達10%將存儲在云中。
數字影子有自己的頭腦:個人產生的信息量(寫文件、拍照片、下載音樂等的信息量)遠遠少于在數字宇宙中產生的有關這些人的信息量。
企業負有大部分責任和義務:盡管數字宇宙中75%的信息由個人產生,但是在信息數字生命的某個點上,企業對數字宇宙中80%的信息負有某種責任。
EMC公司首席市場官Jeremy Burton表示:“大量雜亂無章的信息無休止地增加,帶來了無窮無盡的機會,將促使社會、技術、科學和經濟發生根本性改變。信息是企業最重要的資產,大數據正在促使企業改變信息管理方式,并從信息中挖掘出更大的價值。EMC正處于云計算與大數據的理想交匯點,從全世界最大的企業、政府機構到成長型企業,所有客戶在云計算之旅中,都可以在EMC的幫助下,利用數字宇宙中隱藏的價值?!?/span>
其他重要結果
新的獲取、搜索、發現和分析工具可以幫助企業獲得有關非結構化數據的深入信息,非結構化數據在數字宇宙中所占比超過90%。與標記Facebook照片的面部識別程序類似,這些工具可以自動產生有關數據的資料。有關數據的資料或稱元數據的增長率是數字宇宙總體增長率的兩倍。
商務智能工具越來越多地用來處理實時數據,無論是基于駕車目的地收取汽車保險費、通過智能電網送電,還是基于社交網絡的反應實時更改市場信息,都可以使用商務智能工具。
新的存儲管理工具,如重復數據消除、自動分層和虛擬化,可用來降低我們在數字宇宙存儲內容方面的成本,并幫助我們準確地決定存儲什么,就像采用內容管理解決方案一樣。
新的信息安全實踐和工具可幫助企業確定,哪些信息需要保證安全性,需要保證什么級別的安全性,并利用特定預防安全威脅的設備和軟件、欺詐管理系統、聲譽保護服務等來保護信息安全。
云計算解決方案:與傳統IT環境相比,公有云、私有云及混合云為企業提供了更高的規模經濟性、敏捷性和靈活性。長遠來看,云計算將成為應對數字宇宙復雜性的關鍵方法。
云計算使IT即服務成為可能,再加上與大數據交匯,企業將越來越多地將IT作為外部服務而非內部基礎設施投資。
數字宇宙的增速將繼續超過存儲容量的增速。不過請記住,1GB的存儲內容可能產生1PB或更多的瞬態數據,我們一般不會存儲這種瞬態數據(例如:我們觀看數字電視但不會錄制;在主干網絡中數字化的語音僅在通話期間存在)。
數字宇宙中有不到1/3的信息,其安全性或保護至少是最低限度的;應該得到保護的信息僅約一半得到了保護。
數據分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
CDA數據分析師證書考試體系(更新于2025年05月22日)
2025-05-26解碼數據基因:從數字敏感度到邏輯思維 每當看到超市貨架上商品的排列變化,你是否會聯想到背后的銷售數據波動?三年前在零售行 ...
2025-05-23在本文中,我們將探討 AI 為何能夠加速數據分析、如何在每個步驟中實現數據分析自動化以及使用哪些工具。 數據分析中的AI是什么 ...
2025-05-20當數據遇見人生:我的第一個分析項目 記得三年前接手第一個數據分析項目時,我面對Excel里密密麻麻的銷售數據手足無措。那些跳動 ...
2025-05-20在數字化運營的時代,企業每天都在產生海量數據:用戶點擊行為、商品銷售記錄、廣告投放反饋…… 這些數據就像散落的拼圖,而相 ...
2025-05-19在當今數字化營銷時代,小紅書作為國內領先的社交電商平臺,其銷售數據蘊含著巨大的商業價值。通過對小紅書銷售數據的深入分析, ...
2025-05-16Excel作為最常用的數據分析工具,有沒有什么工具可以幫助我們快速地使用excel表格,只要輕松幾步甚至輸入幾項指令就能搞定呢? ...
2025-05-15數據,如同無形的燃料,驅動著現代社會的運轉。從全球互聯網用戶每天產生的2.5億TB數據,到制造業的傳感器、金融交易 ...
2025-05-15大數據是什么_數據分析師培訓 其實,現在的大數據指的并不僅僅是海量數據,更準確而言是對大數據分析的方法。傳統的數 ...
2025-05-14CDA持證人簡介: 萬木,CDA L1持證人,某電商中廠BI工程師 ,5年數據經驗1年BI內訓師,高級數據分析師,擁有豐富的行業經驗。 ...
2025-05-13CDA持證人簡介: 王明月 ,CDA 數據分析師二級持證人,2年數據產品工作經驗,管理學博士在讀。 學習入口:https://edu.cda.cn/g ...
2025-05-12CDA持證人簡介: 楊貞璽 ,CDA一級持證人,鄭州大學情報學碩士研究生,某上市公司數據分析師。 學習入口:https://edu.cda.cn/g ...
2025-05-09CDA持證人簡介 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度、美團、阿里等 ...
2025-05-07相信很多做數據分析的小伙伴,都接到過一些高階的數據分析需求,實現的過程需要用到一些數據獲取,數據清洗轉換,建模方法等,這 ...
2025-05-06以下的文章內容來源于劉靜老師的專欄,如果您想閱讀專欄《10大業務分析模型突破業務瓶頸》,點擊下方鏈接 https://edu.cda.cn/g ...
2025-04-30CDA持證人簡介: 邱立峰 CDA 數據分析師二級持證人,數字化轉型專家,數據治理專家,高級數據分析師,擁有豐富的行業經驗。 ...
2025-04-29CDA持證人簡介: 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度,美團,阿里等 ...
2025-04-28CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-27數據分析在當今信息時代發揮著重要作用。單因素方差分析(One-Way ANOVA)是一種關鍵的統計方法,用于比較三個或更多獨立樣本組 ...
2025-04-25CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-25