
解讀《大數據時代》:大數據時代的神話
地球人都知道我們處在大數據時代,或許地球人也都知道關于大數據時代最著名的一本書就是邁爾-舍恩伯格所著的《大數據時代》。
我本以為大數據這么高深的學問絕不是我們這樣的屌絲能夠理解或者使用的,所以一直對此書敬而遠之,不敢閱讀。不料周邊談論大數據的人越來越多,談論《大數據時代》這本書的人也越來越多,似乎不讀《大數據時代》,估計連屌絲都做不成了。所以斗膽請來《大數據時代》。一讀,果然不懂,許多疑問。
何為大數據?
這是一個很令人困惑并且絕對屌絲的問題,平時都不好意思開口問別人,希望從書中得到答案。遺憾的是,邁爾大叔在書中就根本沒有告訴我們什么是大數據,這對像我這樣習慣在課堂里死記硬背的學生來說,就產生了輕微的智障:怎么似乎什么都是大數據??梢矣涀∧囊粋€卻十分困難。
看完此書,我只能回答說大數據就是數據多數據大??墒沁@個回答似乎有明顯的問題。邁爾大叔在書中就舉了一個大數據的例子,這個大數據只有“4000”和“兩小時”。
在解釋大數據時代不需要精準性時,邁爾大叔這樣寫道:
“互聯網上最火的網址都表明,它們欣賞不精確而不會假裝精確。當一個人在網站上見到一個Facebook的“喜歡”按鈕時,可以看到有多少其他人也在點擊。當數量不多時,會顯示像“63”這種精確的數字。當數量很大時,則只會顯示近似值,比方說“4000”。這并不代表系統不知道正確的數據是多少,只是當數量規模變大的時候,確切的數量已經不那么重要了。另外,數據更新得非???,甚至在剛剛顯示出來的時候可能就已經過時了。所以,同樣的原理適用于時間的顯示。谷歌的Gmail郵箱會確切標注在很短時間內收到的信件,比方說“11分鐘之前”。但是,對于已經收到一段時間的信件,則會標注如“兩個小時之前”這種不太確切的時間信息?!?/span>
4000個“贊”或者兩小時(120分鐘)也是大數據?我開始崩潰了!
我想是不是邁爾大叔可能考慮到我們對過萬的數字數不過來所以有意簡化,挑選我們能夠理解的“大數據”來說明他的論斷。
指鹿為馬是謂荒唐??墒?,如果對馬沒有定義,那指鹿為馬就無所謂了。
呵呵,邁爾大叔還真幽默。
何為大數據時代?
我讀西洋人寫的書,總是覺得讀書時很爽,讀完后基本記不住。讀《大數據時代》也有同感。很多很多的大數據例子,讀完合上書后基本上一個都記不住。不過邁爾大叔可能知道我的這個毛病,所以提綱挈領,總結了大數據時代的三大特征。這就是地球人都知道的大數據時代的三大特征:1)不是隨機樣本,而是全體數據;2)不是精準性,而是混雜性;3)不是因果關系,而是相關關系。
一本書,三句話,一個時代的特征!楚漢河界,涇渭分明,一目了然。
小數據時代是隨機樣本、精準性和因果關系,大數據時代是全體數據、混雜性和相關關系。
可是我的腦子就是轉不過來,沒法從邁爾大叔的三個簡單扼要的特征總結中悟出大數據時代來。這個看上去忒簡單的總結,其實真的很深奧。簡直可謂深不可測!
一大堆的問題等著邁爾大叔來回答。
比如說,是不是大數據時代就不要隨機取樣分析了?小數據時代是否也有所謂的全體數據?比如說30年前互聯網未流行前美國銀行或保險公司擁有的數據是不是全體數據?怎樣定義全體數據?谷歌、百度、FACEBOOK或者騰訊,哪個公司擁有所謂的全體數據?為什么有了全體數據分析就要完全拋棄隨機樣本分析?如果考慮到隨機樣本分析會影響到分析結果的精度,不是大數據時代不追求精度嗎?
關于大數據時代不要精準性,我怎么也拐不過彎來。你說,大數據時代的老師教學生“2+2或許等于3.9”,公司會計記賬錯了也可以對老板理直氣壯地說“現在是大數據時代了”,甚至到飯店吃飯付賬也不要精準了....。.呵呵,這日子還讓不讓人活???!
還有有關因果關系和相關性的問題,這也要命!我一直認為人與猴子的根本區別在于人喜歡問個“為什么?”。原本兩個猴子,一個不斷好奇地問“為什么日落就要睡覺”,結果大腦不斷進化變成了人;另一個只是看到日落就上樹睡覺,結果至今還是猴子?,F在好了,大數據時代不需要問“為什么”了,豈不苦了我們從猴子變人過程中長期培育起來的好奇心了。
因果關系與相關關系的區別,就是因果關系在相關關系上問了個”為什么“。
流傳甚廣的有關超市將啤酒與尿布一起賣的大數據例子。說是通過大數據分析發現,人們在買尿布時通常也會買啤酒,于是就將啤酒與尿布陳列在一起賣。
如果你生活在大數據時代,故事到此結束了。
如果你還好奇地想知道為什么人們買尿布時要買啤酒。呵呵,對不起,你和我一樣還生活在小數據時代。
我們無疑生活在一個互聯網的時代,這是一個充滿海量數據的世界。數據的多種形式、數據的多種來源、數據之間的多種復雜的聯系,都使我們這個世界變得更加神秘但也更加激動人心。這就是大數據時代。
對大數據時代的探索,猶如當年美國對西部的探險,充滿許多傳說和神話?!洞髷祿r代》或許可能就是這樣一本充滿神話與傳說的探險記。我們為之心動,但依舊要活在現實的生活中,現實生活中的那些規律依舊適用。
即使是大數據時代,我們依舊需要問”為什么“,我們依舊需要教會孩子“2+2=4”,我們甚至依舊要做隨機樣本分析。
大數據并沒有改變我們現有社會的基本生活邏輯。
大數據時代,平常人,平常心。
數據分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
CDA數據分析師證書考試體系(更新于2025年05月22日)
2025-05-26解碼數據基因:從數字敏感度到邏輯思維 每當看到超市貨架上商品的排列變化,你是否會聯想到背后的銷售數據波動?三年前在零售行 ...
2025-05-23在本文中,我們將探討 AI 為何能夠加速數據分析、如何在每個步驟中實現數據分析自動化以及使用哪些工具。 數據分析中的AI是什么 ...
2025-05-20當數據遇見人生:我的第一個分析項目 記得三年前接手第一個數據分析項目時,我面對Excel里密密麻麻的銷售數據手足無措。那些跳動 ...
2025-05-20在數字化運營的時代,企業每天都在產生海量數據:用戶點擊行為、商品銷售記錄、廣告投放反饋…… 這些數據就像散落的拼圖,而相 ...
2025-05-19在當今數字化營銷時代,小紅書作為國內領先的社交電商平臺,其銷售數據蘊含著巨大的商業價值。通過對小紅書銷售數據的深入分析, ...
2025-05-16Excel作為最常用的數據分析工具,有沒有什么工具可以幫助我們快速地使用excel表格,只要輕松幾步甚至輸入幾項指令就能搞定呢? ...
2025-05-15數據,如同無形的燃料,驅動著現代社會的運轉。從全球互聯網用戶每天產生的2.5億TB數據,到制造業的傳感器、金融交易 ...
2025-05-15大數據是什么_數據分析師培訓 其實,現在的大數據指的并不僅僅是海量數據,更準確而言是對大數據分析的方法。傳統的數 ...
2025-05-14CDA持證人簡介: 萬木,CDA L1持證人,某電商中廠BI工程師 ,5年數據經驗1年BI內訓師,高級數據分析師,擁有豐富的行業經驗。 ...
2025-05-13CDA持證人簡介: 王明月 ,CDA 數據分析師二級持證人,2年數據產品工作經驗,管理學博士在讀。 學習入口:https://edu.cda.cn/g ...
2025-05-12CDA持證人簡介: 楊貞璽 ,CDA一級持證人,鄭州大學情報學碩士研究生,某上市公司數據分析師。 學習入口:https://edu.cda.cn/g ...
2025-05-09CDA持證人簡介 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度、美團、阿里等 ...
2025-05-07相信很多做數據分析的小伙伴,都接到過一些高階的數據分析需求,實現的過程需要用到一些數據獲取,數據清洗轉換,建模方法等,這 ...
2025-05-06以下的文章內容來源于劉靜老師的專欄,如果您想閱讀專欄《10大業務分析模型突破業務瓶頸》,點擊下方鏈接 https://edu.cda.cn/g ...
2025-04-30CDA持證人簡介: 邱立峰 CDA 數據分析師二級持證人,數字化轉型專家,數據治理專家,高級數據分析師,擁有豐富的行業經驗。 ...
2025-04-29CDA持證人簡介: 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度,美團,阿里等 ...
2025-04-28CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-27數據分析在當今信息時代發揮著重要作用。單因素方差分析(One-Way ANOVA)是一種關鍵的統計方法,用于比較三個或更多獨立樣本組 ...
2025-04-25CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-25