
“互聯網+”熱的冷思考:大數據的“孤島困境”
隨著社交網絡、移動互聯網和物聯網的興起,大數據越變越大,也帶來無限想象力和商業應用價值,被認為是驅動第四次工業革命的“新電力”。然而,在投資熱火朝天的同時,“新電力”也暗藏“觸電”的危險和“斷電”的無奈。
應用火——大數據的商業應用帶動一系列產業發展
大數據從哪里來?社交媒體的發展,包含可穿戴設備、傳感器、二維碼以及各種手機應用在內的移動互聯網、物聯網和車聯網等新技術的發展,互聯網支付、位置服務等的出現,都導致各種海量數據的生成,這就是大數據。
借助云計算、云存儲等高性能計算和存儲技術,加上人工智能和機器學習算法,人們可以越來越方便地從數據中挖掘出有價值的信息。
大數據目前的應用領域已非常廣泛。線上的大數據,正越來越多地與工業、農業、醫療、智慧城市等線下領域相結合,進行實踐應用。
大數據可為企業帶來良好效益。國內一家可再生能源企業通過與微軟合作建設大數據系統,應用到全國各地1000余臺風力發電機組和5000余臺光伏逆變器和匯流箱。通過大數據分析和機器學習,這個系統將能夠實現“防患于未然”的預防性維護,將可再生能源生產效率提高1%—5%。一個50兆瓦的風電場年發電量大約是1億千瓦時,如果能有2%的提升,僅電費每年就能多增加100多萬元。
小到個體健康,大數據也在發揮積極作用。糖尿病患者可穿戴血糖監測儀,通過手機應用將血糖與患者飲食、運動、藥物攝入等生活規律數據上傳到云計算中心,再用人工智能算法對患者的血糖變化規律進行“診斷”,可以準確告訴糖尿病患者何時可以 “一飽口?!庇植挥绊懮眢w健康。
中國傳媒大學新聞學院教授、騰云智庫專家沈浩博士認為,大數據的商業應用影響廣泛而深遠,會帶動一系列產業發展,加速技術創新,進一步推進智能人機交互、自動駕駛、智能醫療診斷、互聯網金融、智能無人機、機器人技術等相關領域和產業的快速推廣和普及。
聯通難——數據孤島亟待聯通,同時需避免新一輪重復建設
大數據正越來越大。以物聯網為例,據預測到2020年,各種傳感器、新型物聯網設備,再加上傳統桌面電腦、智能手機、平板電腦、網絡電視,以及各類可穿戴智能設備,將交織成一個由300億到500億臺設備組成的龐大網絡。
然而,尋找隱藏在大數據中的有效信息,對其加以統一管理、高效分析,并將其轉化為指導決策和行動的智能,進而實現市場價值,卻面臨諸多挑戰。
從技術層面看,大數據的采集和分析是主要挑戰。微軟大中華區董事長兼CEO柯睿杰認為,數據智能并非那么觸手可及。大數據來源眾多、數量巨大、形式各異,要從中獲得一目了然的信息,就需要真正高效、可靠的數據管理和分析平臺。
以基因測序領域為例,我國每年新增的基因組測序原始數據超過20PB(1PB相當于100萬G),面臨著數據量大、數據處理流程長等技術挑戰。
從產業發展看,數據孤島是首要障礙。百度公司的大數據專家認為,目前在大數據的采集、分析和應用過程中,存在著行業鴻溝、數據孤島乃至數據丟失等問題。
比如傳統行業和新興行業有著完全不同的技術語言,而多樣的設備、各式各樣的應用場景,造就了一個個企業和政府專業管理部門的數據孤島,難以看到企業運行的全貌、行業發展的趨勢,因此,這些片面的數據往往難以說服企業邁開轉型創新的步伐。
容易出現重復建設也是“大數據”熱下的現象。隨著大數據應用的巨大潛力被廣泛認知,各地紛紛出臺發展大數據產業的規劃,并相繼啟動數以億元計的投資。內蒙古、貴州、陜西、吉林等地都在發力打造大數據中心和平臺,互聯網和電信行業巨頭公司也都加緊布局大型數據中心。
有專家指出,如今大數據應用呈現出發展初級階段特征,處于“盲人摸象”階段。大數據中心的投建要根據應用需求,做好頂層設計,積極謀劃并審慎推進,避免“一窩蜂”,從而造成重復投資與惡性競爭。
“大數據是一種社會公共資源,也應該成為國家戰略?!鄙蚝普J為,大數據中心的建設應滿足和考慮網絡資源、自然環境、天然降溫和水電消耗、災害備份、土地稅收等建設條件,以貴州、內蒙古等為代表的省份,在一定程度上確實具有自然條件的先天優勢。但在產業化、規?;?、集約化和市場化等方面,需要國家戰略層面的統一布局和支持,避免各地各自為政,形成新的數據孤島。
此外,大量的數據仍然掌握在個別企業和政府機構中,如何既共享,又保證信息安全,更是挑戰。專家認為,大數據產業的發展離不開法律的護航,特別要明確數據開放共享的規則與底線。
比如,在出行領域,某些出行軟件每天有上千萬單的出行記錄,數百萬車輛的實時地理位置信息。某些電商有數萬個送貨員,每天有大量的貨物在流轉,掌握著許多人的家庭住址。還有許多O2O領域擁有數百萬家商戶、送餐服務的地理位置信息等。這些大數據涉及千家萬戶的財產甚至是人身安全,一旦違背商業道德就可能觸及法律高壓線。
“整個大數據產業存在的問題,一個是數據交換問題,一個是商業規則問題?!鄙裰輸荡a控股有限公司董事局主席郭為說,數據的屬性只有和它的應用結合在一起才有價值,否則這個數據就沒有任何價值,所以未來數據交易和商業化運作的規則很重要。
突破口——打通企業間信息孤島,建立大數據安全保障機制
“互聯網+”創造了以技術創新推動傳統產業創新轉型的新機遇,大數據、云計算、人工智能等技術趨勢,將成為創新驅動發展的核心技術力量。
郭為認為,大數據同一般互聯網的本質差別,就在于它是和行業緊密結合在一起的。從某種意義上講,大數據是把互聯網從淺網向深網的一次推進,運用數據以及數據本身的技術,演化成各種新的服務,來促進經濟社會的發展。
如果說云計算打通的是數據孤島,在云計算之上的大數據打通的則是企業間的信息孤島。沈浩認為,大數據已成為互聯網重要的資產和基本要素,加快大數據挖掘和網絡智能技術的發展、開放大數據將成為趨勢。
未來發展的“無限的計算能力”、“無限的數據”和人工智能相關技術突破將助推大數據在“互聯網+”上大顯身手, 幫助企業在“互聯網+”時代發掘數據智能,在數字化轉型中贏得先機。
在柯睿杰看來,實現每個家庭都有一臺電腦后,未來很可能每個企業都會擁有自己的大數據智能平臺。
中國的大數據才剛開始起步,盡管某些領域處于世界領先地位,但整體上和發達國家還存在較大差距,迫切需要建立大數據安全保障和開發利用機制,迎接大數據時代。
例如,我國無論是網民數量及其增速,還是網絡規模和應用方式,都已經進入了信息化大國和網絡大國的行列。但是,長期以來,存在對數據的重視和應用不足、信息化法律缺失、數據安全保障薄弱等問題,成為制約大數據發展的障礙和威脅信息安全的隱患。
郭為認為,一方面要為大數據產業發展提供良好的法律環境,進一步明確數據信息主體、客體的權責邊界;另一方面也要形成良好的數據開發和使用氛圍,處理好安全和發展的關系,政府帶頭進行數據開放和數據利用。
數據分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
CDA數據分析師證書考試體系(更新于2025年05月22日)
2025-05-26解碼數據基因:從數字敏感度到邏輯思維 每當看到超市貨架上商品的排列變化,你是否會聯想到背后的銷售數據波動?三年前在零售行 ...
2025-05-23在本文中,我們將探討 AI 為何能夠加速數據分析、如何在每個步驟中實現數據分析自動化以及使用哪些工具。 數據分析中的AI是什么 ...
2025-05-20當數據遇見人生:我的第一個分析項目 記得三年前接手第一個數據分析項目時,我面對Excel里密密麻麻的銷售數據手足無措。那些跳動 ...
2025-05-20在數字化運營的時代,企業每天都在產生海量數據:用戶點擊行為、商品銷售記錄、廣告投放反饋…… 這些數據就像散落的拼圖,而相 ...
2025-05-19在當今數字化營銷時代,小紅書作為國內領先的社交電商平臺,其銷售數據蘊含著巨大的商業價值。通過對小紅書銷售數據的深入分析, ...
2025-05-16Excel作為最常用的數據分析工具,有沒有什么工具可以幫助我們快速地使用excel表格,只要輕松幾步甚至輸入幾項指令就能搞定呢? ...
2025-05-15數據,如同無形的燃料,驅動著現代社會的運轉。從全球互聯網用戶每天產生的2.5億TB數據,到制造業的傳感器、金融交易 ...
2025-05-15大數據是什么_數據分析師培訓 其實,現在的大數據指的并不僅僅是海量數據,更準確而言是對大數據分析的方法。傳統的數 ...
2025-05-14CDA持證人簡介: 萬木,CDA L1持證人,某電商中廠BI工程師 ,5年數據經驗1年BI內訓師,高級數據分析師,擁有豐富的行業經驗。 ...
2025-05-13CDA持證人簡介: 王明月 ,CDA 數據分析師二級持證人,2年數據產品工作經驗,管理學博士在讀。 學習入口:https://edu.cda.cn/g ...
2025-05-12CDA持證人簡介: 楊貞璽 ,CDA一級持證人,鄭州大學情報學碩士研究生,某上市公司數據分析師。 學習入口:https://edu.cda.cn/g ...
2025-05-09CDA持證人簡介 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度、美團、阿里等 ...
2025-05-07相信很多做數據分析的小伙伴,都接到過一些高階的數據分析需求,實現的過程需要用到一些數據獲取,數據清洗轉換,建模方法等,這 ...
2025-05-06以下的文章內容來源于劉靜老師的專欄,如果您想閱讀專欄《10大業務分析模型突破業務瓶頸》,點擊下方鏈接 https://edu.cda.cn/g ...
2025-04-30CDA持證人簡介: 邱立峰 CDA 數據分析師二級持證人,數字化轉型專家,數據治理專家,高級數據分析師,擁有豐富的行業經驗。 ...
2025-04-29CDA持證人簡介: 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度,美團,阿里等 ...
2025-04-28CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-27數據分析在當今信息時代發揮著重要作用。單因素方差分析(One-Way ANOVA)是一種關鍵的統計方法,用于比較三個或更多獨立樣本組 ...
2025-04-25CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-25