熱線電話:13121318867

登錄
首頁精彩閱讀數據挖掘:挖掘九律
數據挖掘:挖掘九律
2016-02-15
收藏

數據挖掘:挖掘九律

數據挖掘又譯為數據采礦,它是數據庫知識發現中的一個步驟。數據挖掘一般是指從大量的數據中自動搜索隱藏于其中的有著特殊關系性的信息的過程。如今,“數據挖掘”被到處亂用,從業務人員用一個現代的模式識別方法到數據庫分析員用SQL做查詢。


最近,我看到不少關于挖掘九律的帖子和討論,但他們并沒有提到其創始人,那個將數據挖掘簡潔地描述出來并在整個社區流傳開來的人。這令人遺憾,因為我們可以從挖掘九律中受益良多,并且Khabaza本身就是個你該知道的創造者。他是最早的數據挖掘專家,任職于克萊門汀數據挖掘工作組的開發者之一。當你聽說數據挖掘已廣泛應用于電信和執法之中時,你該知道其奠基人就是是Khabaza。
下面是Tom Khabaza的“挖掘九律”介紹
挖掘九律之一,“業務目標律”:業務目標是所有數據挖掘解決方案的本源
我們探索數據,發掘信息,來幫助我們更好的處理業務。 這難道不是所有業務分析的圣歌嗎?很明確,這就該是第一律。每個人都該理解數據挖掘是一個有目標的流程。真的挖掘人員不會在泥沼里打滾,他們有條不紊的按照流程來將有價值的東西暴露出來。數據挖掘人員也是要有條不紊地尋找對他們有價值的信息。
引用Tom Khabaza的話:“數據挖掘,首先它不是技術,而是流程,其中有著一個或多個業務目標。沒有業務目標的話……就沒有數據挖掘?!?br /> 挖掘九律之二,“業務知識律”:業務知識是數據挖掘每一步的核心
我們周圍有著一個普遍且嚴重的誤解——數據挖掘
不需要 研究人員了解任何事。這是對真正的數據挖掘理論的誤讀,即從數據中發掘有用的模式,能夠也應該交由沒有經過正規統計學訓練的業務人員。數據挖掘是要讓人 ——應用業務知識、經驗和洞察力,并依靠數據挖掘方法的業務人員——變得強大,來找到隱含于數據中的意義。
挖掘九律之三,“數據準備律”:數據準備能讓數據挖掘流程事半功倍
這一點對于那些和數據打過交道的人來說毫無意外,無論你是數據挖掘專家,分析人員或者其他職位。然而,還有其他的神話圍繞著數據挖掘,說數據挖掘會克服數據質量和完整性的問題。這一神話被那些長期被遺忘的數據挖掘產品供應商所傳播,但數據挖掘社區依然努力讓數據記錄更加正常,數據挖掘需要良好的數據。
當然,僅僅有良好的數據是不夠的。對數據的操作是挖掘過程的重要環節,Tom Khabaza解釋道:
“原理要比數據的狀態更深入:隨著數據的準備,數據挖掘人員要定義問題空間。有兩個關于“問題空間”的觀點。第一個是數據挖掘人員將數據轉換成適合于算法應用的形式就夠了——對于絕大多數算法來說,這意味著一個樣本一行記錄。第二個是數據挖掘人員要通過利用有用的信息來優化數據或者將信息轉化為更有效的形式,從而易于讓算法找到解決方案。如樣本包含了計算項,分級,和計算日期時間差?!?br /> 挖掘 九律之四,“天下沒有免費的午餐”:只有通過實驗才能發現給定應用的正確模型
(NFL-DM = “There is No Free Lunch for the Data Miner”)
現在我們可以開始些有趣的討論。在本文的最后,我將指導你到那些可以讀到、參與到的相關討論中?,F在,最重要的是,你要認識到實驗是數據挖掘理論和實踐的核心。
挖掘九律之五,“沃特金斯定律”:總會有模式存在
數據挖掘人員的實踐經驗就是,當探索數據的時候,總能發現有用的模式。
(沃特金斯,Watkins,即David Watkins,也是克萊門汀的知名數據挖掘開發者。)
挖掘九律之六: 數據挖掘將業務領域的感知放大
這一條的意思是,得益于數據挖掘算法和流程——是它們照亮了數據中的那些可能會被埋沒的模式。
挖掘九律之七,“預測定律”:預測將信息從局部擴散到整體
這是我最難在腦海中理清的一條,但它意味著:
數據挖掘提供給我們一種途徑,來看到那些未知的結果,并找到那些已知的相似情況(原文:Data mining offers us ways to look at a case whose outcome is unknown, and find similarities to past cases where the outcome is known)。通過理解這些相似性,我們獲得了推測未來的信息。
挖掘九律之八,“價值定律”:數據挖掘的結果的價值并不取決于預測模型的精度和穩定性
流程的真正價值在于滿足了業務需要,當然,模型的精度和穩定是好的,但較之于業務預測的價值,有意義的洞察力之價值,或者應用預測于實際的價值來講要小得多。
挖掘九律之九,“變化律” :所有的模式都會受到變化
今天還能帶來業務價值的模型,可能明天就過時了。

數據分析咨詢請掃描二維碼

若不方便掃碼,搜微信號:CDAshujufenxi

數據分析師資訊
更多

OK
客服在線
立即咨詢
日韩人妻系列无码专区视频,先锋高清无码,无码免费视欧非,国精产品一区一区三区无码
客服在線
立即咨詢