
大數據安全分析是什么
在《為什么需要大數據安全分析》一文中,我們已經闡述了一個重要觀點,即:安全要素信息呈現出大數據的特征,而傳統的安全分析方法面臨重大挑戰,信息與網絡安全需要基于大數據的安全分析。那么,到底什么是大數據安全分析,他與我們一般意義上的大數據分析有何異同之處?讓我們先從大數據自身的定義開始。
1大數據的定義
如何定義大數據?《大數據的沖擊》一書將大數據通俗定義為“用現有的一般技術難以管理的大量數據的集合”,并廣義地定義為“一個綜合性概念,它包括因具備3V(海量/高速/多樣,Volume / Variety/Velocity)特征而難以進行管理的數據,對這些數據進行存儲、處理、分析的技術,以及能夠通過分析這些數據獲得實用意義和觀點的人才和組織?!?
Gartner將大數據定義為“海量、高速、多變的信息資產,需要對它進行經濟的、創新性的信息處理從而獲得超越以往的洞察力、決策支持能力和處理的自動化”(high volume, velocity and/or variety information assets that demand cost-effective, innovative forms of information processing that enable enhanced insight, decision making, and process automation)。
2大數據的基本特征
大數據的三個公認的基本特點是3V,即海量、高速和多變。海量是指數據容量越來越大;高速表示需要處理的速度和響應的時間越來越快,對系統的延時要求相當高;多變就要處理各種各樣類型的數據,包括結構化的、半結構化的、甚至是非結構化的數據。
IBM在上述三個特點基礎之上增加了一個V(Veracity),即“真實性”、“準確性”。IBM認為只有真實而準確的數據才能讓對數據的管控和治理真正有意義。
此外,業界還有人總結出其它的大數據特點,例如低價值密度(Value)、存活性(Viability),等等。低價值密度是指大數據中真正有意義的信息含量比重低;存活性是指特定情況下的大數據具有很強的時效性。
3大數據分析的定義
大數據技術的核心就是大數據分析(Big Data Analysis / Analytics)。一般地,人們將大數據分析定義為一組能夠高效存儲和處理海量數據、并有效達成多種分析目標的工具及技術的集合。
Gartner將大數據分析定義為追求顯露模式檢測和發散模式檢測,以及強化對過去未連接資產的使用的實踐和方法(the practices and technology used to pursue emerging and divergent pattern detection as well as enhance the use of previously disconnected information assets),意即一套針對大數據進行知識發現的方法。
通俗地講,大數據分析技術就是大數據的收集、存儲、分析和可視化的技術,是一套能夠解決大數據的4V(海量、高速、多變、低密度)問題,分析出高價值(Value)的信息的工具集合。
4大數據安全分析
當前網絡與信息安全領域,正在面臨著多種挑戰。一方面,企業和組織安全體系架構的日趨復雜,各種類型的安全數據越來越多,傳統的分析能力明顯力不從心;另一方面,新型威脅的興起,內控與合規的深入,傳統的分析方法存在諸多缺陷,越來越需要分析更多的安全信息、并且要更加快速的做出判定和響應。信息安全也面臨大數據帶來的挑戰。
于是,業界出現了將大數據分析技術應用于信息安全的技術——大數據安全分析(Big Data Security Analysis / Analytics,簡稱BDSA),也有人稱做針對安全的大數據分析(Big Data Analysis for Security)。
必須特別指出的是,大數據安全分析是指利用大數據技術來進行安全分析,而非我們一般所言的大數據安全(Big Data Security)。大數據安全,通常是指研究如何保護大數據自身的安全,包括針對大數據計算和大數據存儲的安全性。
以上,也闡釋了大數據和安全的兩個連接關系,即基于大數據技術的安全和大數據自身的安全。這兩者是兩個不同的領域,本文探討的是前者,即基于大數據技術的安全,本質上就是大數據技術的一種在安全領域的應用。
借助大數據安全分析技術,能夠更好地解決天量安全要素信息的采集、存儲的問題,借助基于大數據分析技術的機器學習和數據挖據算法,能夠更加智能地洞悉信息與網絡安全的態勢,更加主動、彈性地去應對新型復雜的威脅和未知多變的風險。
必須強調的是,對于大數據安全分析而言,最關鍵的不在于大數據本身,而在于對這些數據的分析方法。大數據安全分析可以用到大數據分析的所有普適性的方法和技術,但當應用到網絡安全領域的時候,還必須考慮到安全數據自身的特點和安全分析的目標,這樣大數據安全分析的應用才更有價值。例如,在進行異常行為分析,或者惡意代碼分析和APT攻擊分析的時候,分析模型才是最重要的。其次,才是考慮如何利用大數據分析技術(例如并行計算、實時計算、分布式計算)來實現這個分析模型。
此外,大數據安全分析要產生實際價值還離不開安全分析師。
5大數據安全分析平臺
大數據安全分析不是一個產品分類,而代表一種技術,一種安全分析的理念和方法。各種安全產品都能夠運用大數據安全分析技術去重塑自身。
在一個較為完備的基于大數據安全分析的解決方案中,往往會有一個大數據安全分析平臺作為整個方案的核心部件,承載大數據分析的核心功能,將分散的安全要素信息進行集中、存儲、分析、可視化,對分析的結果進行分發,對分析的任務進行調度,將各個分散的安全分析技術整合到一起,實現各種技術間的互動。
6啟明星辰大數據安全分析平臺
作為國內信息安全領導廠商的啟明星辰依托十幾年在信息安全分析領域積累的豐富經驗和領先技術在國內率先推出了具有自主知識產權的啟明星辰泰合大數據安全分析平臺(TSOC Big Data Security Analysis Platform,簡稱TSOC-BDSAP)。該平臺幫助客戶實現在規模不斷擴大的異構海量數據如事件、流、網絡原始流量、文件等信息中,結合流行的關聯分析、機器學習、數理統計、實時分析、歷史分析和人機交互等多種分析方法和技術,發現傳統的安全產品無法檢測的安全攻擊和威脅。
啟明星辰專門成立了泰合產品本部負責大數據安全分析領域及泰合系列管控類和審計類系統的研發、咨詢、項目實施與運維。泰合產品本部分別在北京、上海、廣州設有研發中心。
作為中國最早研發和最領先的安全管理平臺之一,啟明星辰泰合(TSOC)系列安管平臺經過10多年的持續積累,獲得了十多項發明專利,得到了國家多項專項基金的支持,并擁有目前國內最多的客戶群,從2008年到2013年連續六年位居中國安全管理平臺市場占有率第一,已經成為了安全管理平臺領域的引領者,位居國內大數據安全分析領域的領導者陣營,也是國內流安全領域的積極倡導者和踐行者。
數據分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
CDA數據分析師證書考試體系(更新于2025年05月22日)
2025-05-26解碼數據基因:從數字敏感度到邏輯思維 每當看到超市貨架上商品的排列變化,你是否會聯想到背后的銷售數據波動?三年前在零售行 ...
2025-05-23在本文中,我們將探討 AI 為何能夠加速數據分析、如何在每個步驟中實現數據分析自動化以及使用哪些工具。 數據分析中的AI是什么 ...
2025-05-20當數據遇見人生:我的第一個分析項目 記得三年前接手第一個數據分析項目時,我面對Excel里密密麻麻的銷售數據手足無措。那些跳動 ...
2025-05-20在數字化運營的時代,企業每天都在產生海量數據:用戶點擊行為、商品銷售記錄、廣告投放反饋…… 這些數據就像散落的拼圖,而相 ...
2025-05-19在當今數字化營銷時代,小紅書作為國內領先的社交電商平臺,其銷售數據蘊含著巨大的商業價值。通過對小紅書銷售數據的深入分析, ...
2025-05-16Excel作為最常用的數據分析工具,有沒有什么工具可以幫助我們快速地使用excel表格,只要輕松幾步甚至輸入幾項指令就能搞定呢? ...
2025-05-15數據,如同無形的燃料,驅動著現代社會的運轉。從全球互聯網用戶每天產生的2.5億TB數據,到制造業的傳感器、金融交易 ...
2025-05-15大數據是什么_數據分析師培訓 其實,現在的大數據指的并不僅僅是海量數據,更準確而言是對大數據分析的方法。傳統的數 ...
2025-05-14CDA持證人簡介: 萬木,CDA L1持證人,某電商中廠BI工程師 ,5年數據經驗1年BI內訓師,高級數據分析師,擁有豐富的行業經驗。 ...
2025-05-13CDA持證人簡介: 王明月 ,CDA 數據分析師二級持證人,2年數據產品工作經驗,管理學博士在讀。 學習入口:https://edu.cda.cn/g ...
2025-05-12CDA持證人簡介: 楊貞璽 ,CDA一級持證人,鄭州大學情報學碩士研究生,某上市公司數據分析師。 學習入口:https://edu.cda.cn/g ...
2025-05-09CDA持證人簡介 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度、美團、阿里等 ...
2025-05-07相信很多做數據分析的小伙伴,都接到過一些高階的數據分析需求,實現的過程需要用到一些數據獲取,數據清洗轉換,建模方法等,這 ...
2025-05-06以下的文章內容來源于劉靜老師的專欄,如果您想閱讀專欄《10大業務分析模型突破業務瓶頸》,點擊下方鏈接 https://edu.cda.cn/g ...
2025-04-30CDA持證人簡介: 邱立峰 CDA 數據分析師二級持證人,數字化轉型專家,數據治理專家,高級數據分析師,擁有豐富的行業經驗。 ...
2025-04-29CDA持證人簡介: 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度,美團,阿里等 ...
2025-04-28CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-27數據分析在當今信息時代發揮著重要作用。單因素方差分析(One-Way ANOVA)是一種關鍵的統計方法,用于比較三個或更多獨立樣本組 ...
2025-04-25CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-25