
汽車大數據應用的6個前提
最近博鰲的論壇上,各路大神在神侃人工智能是否會消滅人類的倫理問題,最討厭一幫文科二貨在臺上扯淡人類技術末日,因為無論這個倫理問題多么嚴重,最終解決問題還得靠理工男女的技術頭腦。制造AI的恐慌是沒有意義的,了解AI是什么比想象它的恐怖有趣得多。
在當前這幫文科二貨們的蠱惑下,大數據和人工智能越來越熱,汽車這個垂直應用領域更是熱得一塌糊涂。從大數據技術的基本應用場景看,汽車和車險的銷售廣告顯然是典型的應用場景,近年來,汽車金融的應用場景也漸漸豐富起來,至于自動駕駛,那已經是資本寵兒。我認為汽車大數據最可能率先發揮價值的一是汽車和車險廣告,二是金融和車險的風險控制,三是自動駕駛,其他領域的應用即使有,也商業價值有限。
但目前來看,絕大多數自稱汽車大數據的公司本質上都是賣數據的公司,我們耳熟能詳的那些大數據公司,干的基本上就是倒賣官方還沒有合法公開的個人數據,未經用戶同意倒賣用戶隱私數據的勾當。倒賣數據是當前到處吹牛的汽車大數據公司典型業務。真正運用算法和模型解決行業問題的公司都還在埋頭苦干,都在積累應用案例,短期恐怕難以盈利。對投資人和創業者而言,我認為看清楚汽車大數據的應用方向非常重要。
要應用汽車大數據,首先得解決數據處理的問題。從汽車數據處理技術的角度看,大約有6個層次。我認為這是實現汽車大數據應用的6個前提。
一是數據接口化,這個層次的問題不解決,大數據技術根本就沒有用武之地。搞不定接口,只是拿個移動硬盤拷死數據的,就別湊大數據的熱鬧了。比如汽車違章數據對于用戶個人征信有價值,弄個爬蟲去偷數據的就別琢磨大數據應用了,數據源都不穩定,相當于工廠的原材料都不穩定,你還怎么搞生產,怎么考慮產品質量呢?
二是結構化,數據采集的接口問題解決了,需要解決數據存儲問題。傳統的數據庫采用SQL存儲結構化數據,但如果要用大數據技術,圖片、甚至視頻等非結構化數據也需要存儲,雖然有NoSQL產品解決這類數據寸純問題,但最終應用仍然需要把非結構化數據結構化。
三是標準化,結構化存儲的數據來源廣泛,比如同樣是車輛的保單數據,不同保險公司的保單數據標準不同,在應用前必須把不同保險公司的保單數據標準化。同樣,汽車違章查詢的數據、汽車貸款的數據,都需要按照統一的標準進行規范,這樣可以用一把尺子度量不同來源的汽車數據。通常,絕大多數吹牛自己是大數據公司的,基本工作就是做到了這一步,也就是把來自各種途徑的數據進行了標準化,能夠用Excel表格輸出數據,可以賣了!
四是因子化,完成了標準化,這時的數據庫才能采用大數據技術進行有目的的挖掘。要開展數據挖掘,首先第一步得解決標準化數據的因子化。比如車主性別,有男,有女,有不確定。計算機因子化處理這個問題的時候就會把男定義為1,女定義為0,不確定性別定義為2。性別的因子化相對簡單,再比如違章數據,究竟違章多少次,何種違章才應該被判定為高風險呢?要因子化處理,我們就得定義規則,比如非扣分的違章0-3次風險因子是1,4-6次風險因子是2,7次以上風險因子是3……諸如此類的數據因子化處理,才能進入數據建模。
五是模型化,很多吹牛搞汽車大數據的,動輒就吹牛要搞數據模型,其實絕大多數人連前面四個數據處理過程都干不了。極少數搞定前四個步驟的公司會雇傭數據建模師,圍繞特定的問題,建立數據模型。這個過程一定程度上并不是科學,更多的像是藝術工作。因為不存在絕對的解,建模師的工作就是要用想象力,盡可能建立一個能夠模擬現實世界運行的數據模型。先有一個假設,然后用現實世界的數據去測試這個假設,如果錯了,反饋參數去修訂這個模型,再用真實數據測試,直到結果能夠很好的模擬真實世界……這個過程就是機器學習的數據訓練。由于每個行業、每個行業的細分領域、每個細分領域的不同公司都在經營不同的生意,同樣是車險保單,不同保險公司的用戶偏好是不同的,同一個模型是不可能適應所有保險公司,每一家保險公司如果要應用大數據和人工智能技術,都必須個性化訓練,一旦某一家率先建立自己的機器人,其在行業里的效率提升將大幅領先于沒有人工智能機器人的公司——對汽車保險、金融、二手車、后市場等領域來說,誰先用人工智能武裝自己,誰將與競爭對手真正拉開差距。
六是產品化,有了模型并不是萬事大吉,模型必須應用于某個生產場景才能創造價值。比如在汽車廣告領域,區分潛在用戶銷售線索優劣的模型就非常有用。目前每年車企投放大量廣告獲得幾十倍上百倍實際銷售量的銷售線索,目前不加區分進行電話轟炸的方式效率非常低,成本也非常高。建立銷售線索魚成交結果的數據模型之后,必須為車企提供一個應用生產環境,幫助4S店銷售人員準確把握每一個銷售線索的價值,把有限的時間和資源,放在最可能成交的那些潛在用戶身上。也就是說,必須把模型封裝在一個Saas系統里,大數據技術才能真正落地應用。
我知道這篇文章對大多數人而言過于專業,但真要應用大數據、機器學習和人工智能解決汽車行業的問題,這篇只能算是掃盲。寫出這些掃盲文章的目的無他,我只是想治愈那些AI恐懼癥患者。美國人可能有必要擔心這些問題,因為在發達國家,數據的接口化和標準化工作已經在幾十年前完成,而我們中國遠遠沒有恐懼AI的必要,各種數據連接口化的工作都無法完成,你想訓練一個AI出來,談何容易——各位吹大數據牛的公司,賣數據的生意前景不錯,6月1日網絡安全法出臺前可以繼續得瑟,之后就自求多福吧!
數據分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
CDA數據分析師證書考試體系(更新于2025年05月22日)
2025-05-26解碼數據基因:從數字敏感度到邏輯思維 每當看到超市貨架上商品的排列變化,你是否會聯想到背后的銷售數據波動?三年前在零售行 ...
2025-05-23在本文中,我們將探討 AI 為何能夠加速數據分析、如何在每個步驟中實現數據分析自動化以及使用哪些工具。 數據分析中的AI是什么 ...
2025-05-20當數據遇見人生:我的第一個分析項目 記得三年前接手第一個數據分析項目時,我面對Excel里密密麻麻的銷售數據手足無措。那些跳動 ...
2025-05-20在數字化運營的時代,企業每天都在產生海量數據:用戶點擊行為、商品銷售記錄、廣告投放反饋…… 這些數據就像散落的拼圖,而相 ...
2025-05-19在當今數字化營銷時代,小紅書作為國內領先的社交電商平臺,其銷售數據蘊含著巨大的商業價值。通過對小紅書銷售數據的深入分析, ...
2025-05-16Excel作為最常用的數據分析工具,有沒有什么工具可以幫助我們快速地使用excel表格,只要輕松幾步甚至輸入幾項指令就能搞定呢? ...
2025-05-15數據,如同無形的燃料,驅動著現代社會的運轉。從全球互聯網用戶每天產生的2.5億TB數據,到制造業的傳感器、金融交易 ...
2025-05-15大數據是什么_數據分析師培訓 其實,現在的大數據指的并不僅僅是海量數據,更準確而言是對大數據分析的方法。傳統的數 ...
2025-05-14CDA持證人簡介: 萬木,CDA L1持證人,某電商中廠BI工程師 ,5年數據經驗1年BI內訓師,高級數據分析師,擁有豐富的行業經驗。 ...
2025-05-13CDA持證人簡介: 王明月 ,CDA 數據分析師二級持證人,2年數據產品工作經驗,管理學博士在讀。 學習入口:https://edu.cda.cn/g ...
2025-05-12CDA持證人簡介: 楊貞璽 ,CDA一級持證人,鄭州大學情報學碩士研究生,某上市公司數據分析師。 學習入口:https://edu.cda.cn/g ...
2025-05-09CDA持證人簡介 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度、美團、阿里等 ...
2025-05-07相信很多做數據分析的小伙伴,都接到過一些高階的數據分析需求,實現的過程需要用到一些數據獲取,數據清洗轉換,建模方法等,這 ...
2025-05-06以下的文章內容來源于劉靜老師的專欄,如果您想閱讀專欄《10大業務分析模型突破業務瓶頸》,點擊下方鏈接 https://edu.cda.cn/g ...
2025-04-30CDA持證人簡介: 邱立峰 CDA 數據分析師二級持證人,數字化轉型專家,數據治理專家,高級數據分析師,擁有豐富的行業經驗。 ...
2025-04-29CDA持證人簡介: 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度,美團,阿里等 ...
2025-04-28CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-27數據分析在當今信息時代發揮著重要作用。單因素方差分析(One-Way ANOVA)是一種關鍵的統計方法,用于比較三個或更多獨立樣本組 ...
2025-04-25CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-25