
數據挖掘案例—藥物選擇決策支持
針對病人的病情和體質情況,醫生往往需要采用不同的用藥。本案例通過數據挖掘,對醫院積累的歷史數據進行分析,確定病人選擇何種藥物對治療疾病最為有效,并開發了相應的藥物選擇決策支持系統的應用系統
【案例名稱】藥物選擇決策支持
【案例類型】數據挖掘
【所屬行業】醫藥衛生
【案例版本】1.0
【完成日期】2003年7月2日
【應用軟件】Clementine 7.2英文版
【遵循標準】CRISP-DM
【案例數據來源】Clementine 7.2 Demo自帶數據
【案例應用模型】神經網絡、C5.0、Logistic回歸
【案例用途】通過案例實現以下目的:
1、 CRISP-DM的標準流程及在解決具體業務問題過程中的應用;
2、 理解如何提高數據挖掘模型的效果;
3、 理解結果發布的幾種方式。
【案例簡要描述】
針對病人的病情和體質情況,醫生往往需要采用不同的用藥。本案例通過數據挖掘,對醫院積累的歷史數據進行分析,確定病人選擇何種藥物對治療疾病最為有效。并開發了相應的藥物選擇決策支持系統的應用系統。
案例正文
【背景介紹】
XX病是一種常見的疾病,目前有5種藥物可以對其治療,分別是——A、B、C、X、Y。不同的藥物對病人有不同的療效。歷史上,醫院往往根據醫生的經驗去判斷針對特定的病人應該選擇何種藥物。但是由于新醫生的加入,這種僅僅靠經驗判斷的做法造成了很多誤診。
該醫院有比較完善的病例留存,為了改變以上局面,也為了更好的利用歷史數據和專家經驗,該醫院決定通過數據挖掘技術對歷史數據進行分析研究,并期望能夠建立一套有效的藥物選擇決策支持系統。
【數據說明】
目前有歷史病例數據1200條,咨詢專家意見,我們提取了其中影響選擇藥物的若干個變量記入數據庫,它們是年齡、性別、血壓、膽固醇含量、鈉含量、鉀含量,最后一個變量是我們需要確定的選擇藥物,數據存貯在Microsoft Access數據庫中。
【數據挖掘過程】
1、 商業理解
在這個階段我們主要需要描述清楚業務問題,并對我們手頭擁有的資源有一個非常清晰的認識。在這個案例中,我們需要根據病人的個人情況和身體特征來確定何種藥物對它最為合適。由于問題比較簡單,我們的商業理解也比較簡單。
2、 數據理解
數據理解階段用來完成對數據質量、數據之間的基本關系進行探索性分析等項工作。在這個階段,我們對歷史數據中的1200條數據進行圖形觀察,初步觀察病人的情況和身體特征是否與選擇藥物關系明顯。數據流圖見圖1。
圖1:數據理解
下面是產生的一些典型圖形,圖形解釋略。
圖2:對數據的初步探索性分析
3、 數據準備
數據準備主要完成對不同的數據源的整合,并且對數據進行適當的變換,使之適合數據挖掘的需要,對于特定的模型,需要把原始數據集合拆分成訓練數據集和檢驗數據集也在這個步驟中完成。
對于本案例來說,由于數據源只有一個,并且數據格式也相對單一簡單,我們在數據準備中主要完成對原始數據集的拆分,從而用訓練數據集建立模型,用檢驗數據集對模型的效果進行評估。
在Clementine中,對數據集的拆分,是通過引入一個中間變量來完成的。在本案例中,我們把全部1200條數據中的2/3左右(800左右)作為訓練數據集,把1/3左右(400左右)作為檢驗數據集。我們引入了一個二分變量——拆分變量,這個二分變量對應1200條原始數據有2/3左右為“真”(T),1/3左右為“假”(F)。我們挑出那些拆分變量值取“真”(T)的記錄作為訓練數據集,那些拆分變量值取“假”(F)的記錄作為檢驗數據集。實現該過程的數據流見圖3。
圖3:數據準備
4、 模型建立和評估
在模型建立階段,我們將逐步建立和調整模型,并對如何提高模型的預測效果進行嘗試。
(1) 建立最簡單的模型。對于訓練數據集,我們首先把病人的年齡、性別、血壓、膽固醇含量、鈉含量、鉀含量等不經過任何處理,全部作為預測選擇藥物的輸入變量,而把選擇藥物作為待預測變量(輸出變量)。數據流圖見圖4,我們建立了神經網絡、C5.0和Logistic回歸三個模型。
圖4:藥物選擇決策支持模型1
接下來我們用檢驗數據集對模型進行檢驗,數據流圖見圖5。模型檢驗結果見圖6。從檢驗結果我們可以看出,Logistic模型的評估效果最好,達到了96.21%。
圖5:藥物選擇決策支持模型1檢驗
圖6:藥物選擇決策支持模型1檢驗結果
討論——如何提高模型的效果:從模型檢驗中我們可以看出,三個模型中可能有不一致的情況,這就使得我們有一種思路,即我們在發布模型的時候,可以考慮把那些三個模型預測一致的才作為預測,而把三者預測不一致的作為待判記錄隨后進行深入的分析,這樣我們就使得模型的精度提高到了98.29%,但是作為犧牲,我們也會約有12%左右的病人是無法判斷的,需要我們對記錄做進一步的研究。
(2) 為了更好的建立和調整模型,我們對業務進行深入了解,引入醫生的業務經驗。根據醫生對醫學理論的討論和過去實踐經驗的積累,他們認為人體中的鈉含量和鉀含量對病人選擇何種藥物的作用并不是特別明顯,但是他們的比例卻是影響選擇何種藥物的一個關鍵因素,所以在我們下面建立的模型中,我們生成新變量——鈉鉀比例,而剔除鈉含量和鉀含量兩個變量。數據流圖見圖7,模型我們仍舊采用神經網絡,C5.0和Logistic回歸三種模型。
圖7:藥物選擇決策支持模型2
類似(1),我們對模型效果進行檢驗,檢驗數據流和檢驗結果分別如圖8和圖9所示。
圖8:藥物選擇決策支持模型2檢驗
圖9:藥物選擇決策支持模型2檢驗結果
從結果中,我們可以看出,隨著我們業務經驗的引入,我們的模型效果有了顯著的提高,并且我們選擇模型也發生了變化。精度由原來的Logistic回歸最優96.21%提高到了C5.0最優99.75%。
5、 模型發布
模型建立是為了應用,我們前面的全部工作都在于我們建立的模型能夠被最終的業務人員所使用,假設我們由以下10個病人的資料數據,需要根據他們的情況判斷使用什么藥物最好。
表1:病人資料
該病人資料也被我們存放在Access數據庫中。我們可以考慮以下三種方式對我們的模型進行發布供業務人員(醫生)使用。
(1) 直接寫報告的方式,通過HTML展示。數據流圖10,結果展示實際效果如圖11。
圖10:模型發布數據流1
圖11:報告方式發布結果示例
(2) 把選擇藥物直接寫回數據庫。數據流如圖12,結果大致情形如圖13。
圖12:模型發布數據流2
圖13:模型發布—把結果寫回數據庫
(3) 通過Clementine Solution Publisher結合Visual C++開發應用系統界面,業務人員(醫生)可以直接輸入病人資料,實時的得到藥物推薦。發布數據流見圖14,系統界面如圖15。
圖14:模型發布數據流3
圖15:模型發布——開發應用系統
數據分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
CDA數據分析師證書考試體系(更新于2025年05月22日)
2025-05-26解碼數據基因:從數字敏感度到邏輯思維 每當看到超市貨架上商品的排列變化,你是否會聯想到背后的銷售數據波動?三年前在零售行 ...
2025-05-23在本文中,我們將探討 AI 為何能夠加速數據分析、如何在每個步驟中實現數據分析自動化以及使用哪些工具。 數據分析中的AI是什么 ...
2025-05-20當數據遇見人生:我的第一個分析項目 記得三年前接手第一個數據分析項目時,我面對Excel里密密麻麻的銷售數據手足無措。那些跳動 ...
2025-05-20在數字化運營的時代,企業每天都在產生海量數據:用戶點擊行為、商品銷售記錄、廣告投放反饋…… 這些數據就像散落的拼圖,而相 ...
2025-05-19在當今數字化營銷時代,小紅書作為國內領先的社交電商平臺,其銷售數據蘊含著巨大的商業價值。通過對小紅書銷售數據的深入分析, ...
2025-05-16Excel作為最常用的數據分析工具,有沒有什么工具可以幫助我們快速地使用excel表格,只要輕松幾步甚至輸入幾項指令就能搞定呢? ...
2025-05-15數據,如同無形的燃料,驅動著現代社會的運轉。從全球互聯網用戶每天產生的2.5億TB數據,到制造業的傳感器、金融交易 ...
2025-05-15大數據是什么_數據分析師培訓 其實,現在的大數據指的并不僅僅是海量數據,更準確而言是對大數據分析的方法。傳統的數 ...
2025-05-14CDA持證人簡介: 萬木,CDA L1持證人,某電商中廠BI工程師 ,5年數據經驗1年BI內訓師,高級數據分析師,擁有豐富的行業經驗。 ...
2025-05-13CDA持證人簡介: 王明月 ,CDA 數據分析師二級持證人,2年數據產品工作經驗,管理學博士在讀。 學習入口:https://edu.cda.cn/g ...
2025-05-12CDA持證人簡介: 楊貞璽 ,CDA一級持證人,鄭州大學情報學碩士研究生,某上市公司數據分析師。 學習入口:https://edu.cda.cn/g ...
2025-05-09CDA持證人簡介 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度、美團、阿里等 ...
2025-05-07相信很多做數據分析的小伙伴,都接到過一些高階的數據分析需求,實現的過程需要用到一些數據獲取,數據清洗轉換,建模方法等,這 ...
2025-05-06以下的文章內容來源于劉靜老師的專欄,如果您想閱讀專欄《10大業務分析模型突破業務瓶頸》,點擊下方鏈接 https://edu.cda.cn/g ...
2025-04-30CDA持證人簡介: 邱立峰 CDA 數據分析師二級持證人,數字化轉型專家,數據治理專家,高級數據分析師,擁有豐富的行業經驗。 ...
2025-04-29CDA持證人簡介: 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度,美團,阿里等 ...
2025-04-28CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-27數據分析在當今信息時代發揮著重要作用。單因素方差分析(One-Way ANOVA)是一種關鍵的統計方法,用于比較三個或更多獨立樣本組 ...
2025-04-25CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-25