
大數據與生命科學
2014年6月13日,《科學》雜志刊載了一篇由美國科學促進會(AAAS)科技出版顧問Mike May撰寫的一篇題為“Big Biological Impacts from Big Data”的文章。鑒于大數據作為目前的一個熱點概念,本文對該文進行了編譯。本文首先梳理了大數據所包含的三層含義,然后就這三層含義進行了分析和解讀?;诨蚪M數據量越來越多的情況下,很多機構都意識到利用大數據的前景。
本文列舉了一些機構已開發或正在研發的、用以分析大數據的方法或工具。例如,美國BioDatomics公司開發了比傳統軟件分析速度快100倍的BioDT軟件;加拿大多倫多的ACD/Labs公司開發的計算系統在處理大數據時能夠整合各種數據格式;加利福尼亞州的IBM Almaden研究中心開發的文本挖掘工具;湯森路透NuMedii公司基于大數據的藥物再利用。大數據除了以上三個含義,本文還提及大數據還應包含“復雜性”,并列舉了馬薩諸塞州的GNS Healthcare公司基于數據的復雜性而開發的REFS分析平臺。最終,本文認為所有致力于研發大數據的努力都應該落在使大數據能夠促進未來生物學和醫學發展的方向上來。
大數據與生命科學
大數據是目前最熱的概念之一,也是容易被曲解的概念。顧名思義,大數據意味著大量的數據,然而這只是從字面理解的含義。概括來看,大數據包括三層含義(3V):數據量大(volume of data),處理數據的速度快(velocity of processing the data),數據源多變(variability of data sources)。這是那些依賴大數據工具進行分析的信息的重要特征。
美國喬治華盛頓大學的計算生物學研究所主任Keith Crandall表示,盡管生物學家花費大量精力收集數據,實際上,現在生物學面臨的瓶頸在于大數據。例如,2002年8月,對第一個人完整基因組測序工作,集中了20個研究所的專家,利用這些研究所所配置的基礎設施,經歷13年,投入30億美元獲得了約30億核苷酸序列。而目前,為某個人測序僅需要1000美元,每周產生320多個基因組。隨著研究人員不斷開發方法,處理大數據的量、速度和可變性方面的問題,研究人員開始研發分析信息的新方法。
生命科學的數據來源和形式多樣,包括基因測序、分子通道、不同的人群等。如果研究人員能解決這一問題,這些數據將轉變成潛在的財富,即問題在于如何處理這些復雜的信息。當下,相關領域期待那些能分析大數據,并將這些數據轉換成更好理解基礎生命科學機制和將分析成果應用到人口健康上去的工具和技術的面市。
(1)“量”的持續增加
數十年前,制藥公司就開始存儲數據。位于美國波士頓默克公司研究實驗室(Merck Research Labs)的副董事Keith
Crandall表示,默克公司在組織成千上萬病患參加的臨床試驗方面已經進展了好些年,并具有從數百萬病患的相關記錄中查出所需信息的能力。目前,該公司已經擁有新一代測序技術,每個樣本就能產生兆兆位的數據。面對如此大數量級的數據,即使是大型制藥公司也需要幫助。例如,來自瑞士羅氏公司的Bryn
Roberts表示,羅氏公司一個世紀的研發數據量相比2011~2012年在測定成千上百個癌細胞株的單個大規模試驗過程中產生的數據,前者只是后者兩倍多一些而已。Roberts領銜的研究團隊期望能從這些存儲的數據中挖掘到更有價值的信息。因而,該團隊與來自加利福尼亞州的PointCross公司進行合作,以構建一個可以靈活查找羅氏公司25年間相關數據的平臺。這些數據,包括那些成千上萬個復合物的信息,將利用當下以獲得的知識來挖掘進而開發新藥物。
為了處理大量的數據,一個生物學研究人員并不需要像公司一樣需要一個專門的設備來處理產生的數據。例如,Life
Technologies公司(目前是Thermo Fisher Scientific公司的一部分)的Ion個人化操作基因組測序儀(Ion
Personal Genome Machine)。這一新設備能夠在8個小時以內測序多達2
gigabases.因而可在研究人員的實驗室操作。Life Technologies公司還有更大型的儀器,4小時以內測序可高達10
gigabases.
然而,對學術領域和產業領域的生命科學研究人員,新一代測序既提供了好處也帶來了問題。正如Crandall所抱怨的那樣,他們并不能有效研究如此多的基因組,除非開發的計算機系統能夠滿足分析大量數據的需求?;谶@種現狀,其領銜的團隊與波士頓大學的醫學助理教授W.
Evan Johnson進行了合作,以開發分析新一代測序(next generation
sequencing,NGS)平臺產生的數據,進而能夠將DNA的gigabases信息轉化為計算機的千兆字節。該軟件將DNA樣本與參考基因組比較,以便確定病原體。Crandall表示,其每個樣本存儲的數據達20千兆字節,而這樣的樣本就有成千上萬個,這樣每個樣本分析所產生的數據就相當多。
實際上,如此大數量的數據其實對于衛生保健來說其實十分有用,因為研究人員必須在設計其試驗時充分考慮人群的多樣性。來自劍橋大學的轉化醫學教授Chas Bountra表示,畢竟從50萬人獲得的結論比從10個人獲得的結論要可靠有說服力得多。
也有研究人員期望看到在衛生保健方面基因組數據能產生越來越多的影響。例如,遺傳信息可揭示生物標志物,或某些疾病的指示物(某些分子只出現在某些類型的癌癥中)。英國牛津大學維康信托基金會人類遺傳學中心(Wellcome
Trust Centre for Human Genetics)的基因組統計學教授Gil
McVean教授表示,基因組學為人來了解疾病提供了強有力的依據?;蚪M學可以為人類找到與某類疾病相關的生物標志物,并基于這一標志物進行靶向治療。例如,正因為某個分子驅動某種癌癥的進展,那么可以靶向這一分子進而治療癌癥。為了應用這一理念,McVean領銜的研究團隊通過李嘉誠(Li
Ka Shing)捐獻的3 300萬美元正在劍橋大學創建Li Ka Shing健康信息和探索中心(Li Ka Shing Centre for
Health Information and Discovery)。該中心將成立一個大數據研究機構。McVean總結道,該中心將將分析數據過程和基因組研究結合在一起,這樣他們將能夠克服在收集大數據和分析大數據方面的一些難題。
(2)分析的高速性
第二個V,也就是velocity,意指處理數據和分析數據的速度要高要快。研究人員需要高速處理以便分析大量增加的數據。
過去,分析基因相關數據存在瓶頸。馬里蘭州的BioDatomics董事Alan
Taffel認為,傳統的分析平臺實際上約束了研究人員的產出(產能),因為這些平臺使用起來困難且需要依賴生物信息學人員,因而相關工作執行效率低下,往往需要幾天甚至幾周來分析一個大型DNA.
鑒于此,BioDatomics公司開發了BioDT軟件,其為分析基因組數據提供400多種工具。將這些工具整合成一個軟件包,使得研究人員很容易使用,且適用任何臺式電腦,且該軟件還可以通過云存期。該軟件相比傳統系統處理信息流的速度快100倍以上,以前需要一天或一周的,現在只需要幾分鐘或幾個小時。
有專家認為需要測序新工具。新澤西州羅格斯大學電子計算工程系的副教授Jaroslaw
Zola表示,根據數據存儲方式、數據轉換方式和數據分析方式,新一代測序技術需要新計算策略來處理來自各種渠道的數據。這意味著需要生物研究人員必須學習使用前沿計算機技術。然而,Zola認為應該對信息技術人員施加壓力,促使他們開發出讓領域專家很容易掌握的方法,在保證效率的前提下,隱藏掉算法、軟件和硬件體系結構的復雜性。目前,Zola領銜的團隊正致力于此,研發新型算法。
(3)多變性
其一,生物學實驗室往往有多種設備,這些設備產生的數據是以某種文檔形式存在。所以,加拿大多倫多的ACD/Labs公司開發的計算系統在處理大數據時能夠整合各種數據格式。ACD/Labs的全球戰略主管(director
of global
strategy)表示,該系統能夠支持各種設備產生的150多種文檔格式,這就有利于把多種數據匯集到同一個環境中,例如匯聚到其開發的Spectrus數據庫中。該數據庫可以通過客戶端或網頁訪問。
生物學大數據還體現新型可變性,
.例如,德國Definiens的研究人員分析的組織表型組學(tissue
phenomics),也就是一個組織或器官樣本構造相關的信息,包括細胞大小、形狀,吸收的染色劑,細胞相互聯系的物質等。這些數據可以在多個研究中應用,例如追蹤細胞在發育過程中的特征變化的研究,測定環境因素對機體的影響,或測量藥物對某些器官/組織的細胞的影響等。
結構化數據,例如數據表格,并不能揭示所有信息,比方藥物處理過程或生物學過程。實際上,生活著的有機體是以一種非結構化的形式存在,有成千上萬種方式去描述生物過程。默克的Johnson認為有點像期刊文本文檔,很難從文獻中挖掘數據。
加利福尼亞州的IBM Almaden研究中心(IBM's Almaden Research Center)的分析專家和研究人員Ying
Chen領銜的團隊數年來都致力于開發文本挖掘工具,目前他們正在使用的是“加速藥物發現的解決方案”(accelerated drug
discovery solution)。這一平臺集合了專利、科學文獻、基礎化學和生物學知識(如化學物質和分子之間相互作用的機制等),有1
600多萬中化合物結構,近乎7 000種疾病的相關信息。利用這一系統,研究人員從中能夠尋找可能對治療某種疾病有用的化合物。
其他一些公司致力于挖掘現有資源,以發現疾病的生物學機制,基于此來研究治療疾病的方法。湯森路透位于硅谷的NuMedii公司,致力于尋找現有藥物的新用途,又稱之為藥物再利用(drug
repurposing)。NuMedii的首席科學家Craig
Webb表示,使用基因組數據庫,整合各種知識來源和生物信息學方法,快速發現藥物的新用途。之后,該公司根據該藥物的原有用途中的安全性來設計臨床試驗,這樣研發藥物的速度快而且成本低。Webb描述了該公司的一個項目:研究人員從2
500多種卵巢癌樣本中搜集基因表達數據,再結合數種計算機算法來預測現有藥物是否具有治療卵巢癌或治療某種分子亞型卵巢癌的潛力。
(4)復雜性
諾華公司的生物醫學研究所(Novartis Institutes for BioMedical
Research,NIBR)的信息系統的執行主任Stephen
Cleaver在三V的基礎上還加了個復雜性(complexity)。他認為制藥公司的科研人員通過某些病患個體,到某些病患群再到整合所掌握的各種數據分析數據,這一過程很復雜。在衛生保健領域,大數據分析的復雜性進一步增加,因為要聯合各種類型的信息,例如基因組數據、蛋白組數據、細胞信號傳導、臨床研究,甚至需要結合環境科學的研究數據。
數據分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
解碼數據基因:從數字敏感度到邏輯思維 每當看到超市貨架上商品的排列變化,你是否會聯想到背后的銷售數據波動?三年前在零售行 ...
2025-05-23在本文中,我們將探討 AI 為何能夠加速數據分析、如何在每個步驟中實現數據分析自動化以及使用哪些工具。 數據分析中的AI是什么 ...
2025-05-20當數據遇見人生:我的第一個分析項目 記得三年前接手第一個數據分析項目時,我面對Excel里密密麻麻的銷售數據手足無措。那些跳動 ...
2025-05-20在數字化運營的時代,企業每天都在產生海量數據:用戶點擊行為、商品銷售記錄、廣告投放反饋…… 這些數據就像散落的拼圖,而相 ...
2025-05-19在當今數字化營銷時代,小紅書作為國內領先的社交電商平臺,其銷售數據蘊含著巨大的商業價值。通過對小紅書銷售數據的深入分析, ...
2025-05-16Excel作為最常用的數據分析工具,有沒有什么工具可以幫助我們快速地使用excel表格,只要輕松幾步甚至輸入幾項指令就能搞定呢? ...
2025-05-15數據,如同無形的燃料,驅動著現代社會的運轉。從全球互聯網用戶每天產生的2.5億TB數據,到制造業的傳感器、金融交易 ...
2025-05-15大數據是什么_數據分析師培訓 其實,現在的大數據指的并不僅僅是海量數據,更準確而言是對大數據分析的方法。傳統的數 ...
2025-05-14CDA持證人簡介: 萬木,CDA L1持證人,某電商中廠BI工程師 ,5年數據經驗1年BI內訓師,高級數據分析師,擁有豐富的行業經驗。 ...
2025-05-13CDA持證人簡介: 王明月 ,CDA 數據分析師二級持證人,2年數據產品工作經驗,管理學博士在讀。 學習入口:https://edu.cda.cn/g ...
2025-05-12CDA持證人簡介: 楊貞璽 ,CDA一級持證人,鄭州大學情報學碩士研究生,某上市公司數據分析師。 學習入口:https://edu.cda.cn/g ...
2025-05-09CDA持證人簡介 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度、美團、阿里等 ...
2025-05-07相信很多做數據分析的小伙伴,都接到過一些高階的數據分析需求,實現的過程需要用到一些數據獲取,數據清洗轉換,建模方法等,這 ...
2025-05-06以下的文章內容來源于劉靜老師的專欄,如果您想閱讀專欄《10大業務分析模型突破業務瓶頸》,點擊下方鏈接 https://edu.cda.cn/g ...
2025-04-30CDA持證人簡介: 邱立峰 CDA 數據分析師二級持證人,數字化轉型專家,數據治理專家,高級數據分析師,擁有豐富的行業經驗。 ...
2025-04-29CDA持證人簡介: 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度,美團,阿里等 ...
2025-04-28CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-27數據分析在當今信息時代發揮著重要作用。單因素方差分析(One-Way ANOVA)是一種關鍵的統計方法,用于比較三個或更多獨立樣本組 ...
2025-04-25CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-25在當今數字化時代,數據分析師的重要性與日俱增。但許多人在踏上這條職業道路時,往往充滿疑惑: 如何成為一名數據分析師?成為 ...
2025-04-24