
大數據是領域相關的,如今大數據在各個領域都有著卓越的表現。比如,政府、企業與醫療等機構的數據涉及到安全、利益與隱私問題,要開放與共享是有難度的。但是如果研究大數據的處理技術,而不是去挖掘具有商業價值的大數據,不妨換個思路,用不涉及安全、利益與隱私問題的大數據作為數據源。
被譽為“大數據時代的預言家”維克托?邁爾?舍恩伯格的國外大數據系統研究的先河之作《大數據時代:生活、工作與思維的大變革》書里“大數據先鋒”一節中寫到:“天文學,信息爆炸的起源“。
只有考慮到社會各個方面的變化趨勢,我們才能真正意識到信息爆炸已經到來。我們的數字世界一直在擴張。以天文學為例,2000年斯隆數字巡天(Sloan Digital Sky Survey)項目啟動的時候,位于新墨西哥州的望遠鏡在短短幾周內收集到的數據,已經比天文學歷史上總共收集的數據還要多。到了2010年,信息檔案已經高達1.4×242字節。不過,預計2016年在智利投入使用的大型視場全景巡天望遠鏡(Large SynopticSurvey Telescope,LSST)能在五天之內就獲得同樣多的信息。天文學領域的變化在各個領域都在發生?!?
從上可知,天文學是最早迎接大數據挑戰的領域。隨著天文觀測技術的發展,天文學已經進入了一個信息豐富的大數據時代,天文數據正在以TB級甚至PB量級的速度不斷增長。目前國際上已有多個國家進行了大規模的巡天項目,除SDSS(Sloan Digital Sky Survey)外,還有Pan-STARRS1(The Panoramic Survey Telescope and Rapid Response System)、WISE (Wide-field Infrared Survey Explorer)、 2MASS (Two Micron All Sky Survey)、Gaia 、UKIDSS (UKIRT Infrared Deep Sky Survey)、NVSS(The NRAO VLA Sky Survey)、FIRST(Faint Images of the Radio Sky at Twenty-cm)、 2df (Two-degree-Field Galaxy Redshift Survey)、LAMOST(The Large Sky Area Multi-ObjectFiber Spectroscopic Telescope –郭守敬望遠鏡)等等,這些巡天項目每天都在產生著海量的天文數據。目前,業界對大數據的看法不盡相同,但大數據應具備的4V特征已達成共識,即:Volume(大量)、Velocity(高速)、Variety(多樣)、Veracity(精確)或 Value (價值)。天文數據具備4V特征,因此天文數據是大數據。在難以獲取其他大數據時,不妨考慮根據天文學領域的需求,結合計算機科學、模式識別、系統科學等相關學科領域的理論與方法,研究與發展天文大數據的處理技術。
不同于其他具有商業價值的大數據應用領域,研究天文大數據是面向基礎自然科學研究領域的應用。相信可以推動對大數據研究的的發展,在研究技術上形成百花齊放的局面。
數據分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
CDA數據分析師證書考試體系(更新于2025年05月22日)
2025-05-26解碼數據基因:從數字敏感度到邏輯思維 每當看到超市貨架上商品的排列變化,你是否會聯想到背后的銷售數據波動?三年前在零售行 ...
2025-05-23在本文中,我們將探討 AI 為何能夠加速數據分析、如何在每個步驟中實現數據分析自動化以及使用哪些工具。 數據分析中的AI是什么 ...
2025-05-20當數據遇見人生:我的第一個分析項目 記得三年前接手第一個數據分析項目時,我面對Excel里密密麻麻的銷售數據手足無措。那些跳動 ...
2025-05-20在數字化運營的時代,企業每天都在產生海量數據:用戶點擊行為、商品銷售記錄、廣告投放反饋…… 這些數據就像散落的拼圖,而相 ...
2025-05-19在當今數字化營銷時代,小紅書作為國內領先的社交電商平臺,其銷售數據蘊含著巨大的商業價值。通過對小紅書銷售數據的深入分析, ...
2025-05-16Excel作為最常用的數據分析工具,有沒有什么工具可以幫助我們快速地使用excel表格,只要輕松幾步甚至輸入幾項指令就能搞定呢? ...
2025-05-15數據,如同無形的燃料,驅動著現代社會的運轉。從全球互聯網用戶每天產生的2.5億TB數據,到制造業的傳感器、金融交易 ...
2025-05-15大數據是什么_數據分析師培訓 其實,現在的大數據指的并不僅僅是海量數據,更準確而言是對大數據分析的方法。傳統的數 ...
2025-05-14CDA持證人簡介: 萬木,CDA L1持證人,某電商中廠BI工程師 ,5年數據經驗1年BI內訓師,高級數據分析師,擁有豐富的行業經驗。 ...
2025-05-13CDA持證人簡介: 王明月 ,CDA 數據分析師二級持證人,2年數據產品工作經驗,管理學博士在讀。 學習入口:https://edu.cda.cn/g ...
2025-05-12CDA持證人簡介: 楊貞璽 ,CDA一級持證人,鄭州大學情報學碩士研究生,某上市公司數據分析師。 學習入口:https://edu.cda.cn/g ...
2025-05-09CDA持證人簡介 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度、美團、阿里等 ...
2025-05-07相信很多做數據分析的小伙伴,都接到過一些高階的數據分析需求,實現的過程需要用到一些數據獲取,數據清洗轉換,建模方法等,這 ...
2025-05-06以下的文章內容來源于劉靜老師的專欄,如果您想閱讀專欄《10大業務分析模型突破業務瓶頸》,點擊下方鏈接 https://edu.cda.cn/g ...
2025-04-30CDA持證人簡介: 邱立峰 CDA 數據分析師二級持證人,數字化轉型專家,數據治理專家,高級數據分析師,擁有豐富的行業經驗。 ...
2025-04-29CDA持證人簡介: 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度,美團,阿里等 ...
2025-04-28CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-27數據分析在當今信息時代發揮著重要作用。單因素方差分析(One-Way ANOVA)是一種關鍵的統計方法,用于比較三個或更多獨立樣本組 ...
2025-04-25CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-25