《電子技術(shù)應(yīng)用》
您所在的位置:首頁 > 可編程邏輯 > 解決方案 > 數(shù)據(jù)科學(xué)的下一個「超能力」:模型可解釋性

數(shù)據(jù)科學(xué)的下一個「超能力」:模型可解釋性

2019-03-29

很多人重視重視模型的預(yù)測能力,卻忽略了模型可解釋性的重要性,只知其然而不知其所以然。為什么說模型的可解釋性這么重要呢?作者就 5 個方面對此進行了闡述。

微信圖片_20190329143348.jpg

模型的可解釋性能夠展示你的模型在學(xué)什么,并且觀察模型內(nèi)部比大多數(shù)人想的更有用。


在過去的 10 年間,我采訪了許多數(shù)據(jù)科學(xué)家,模型的可解釋性是我最喜歡的主題,我用它來區(qū)分最好的數(shù)據(jù)科學(xué)家和一般的數(shù)據(jù)科學(xué)家。


有些人認為機器學(xué)習(xí)模型是黑箱,能做出預(yù)測但無法理解;可是最好的數(shù)據(jù)科學(xué)家可以通過任何模型洞察真實世界。給出任何模型,這些數(shù)據(jù)科學(xué)家都可以輕松地回答下面的問題:


模型認為數(shù)據(jù)中最重要的特征是什么

就模型的任何單個預(yù)測結(jié)果而言,數(shù)據(jù)中的每個特征是如何影響這一預(yù)測結(jié)果的

特征之間什么樣的相互作用對模型預(yù)測產(chǎn)生的影響最大


這些問題的答案比大多數(shù)人認為的要有意義。受此啟發(fā),我在 Kaggle 上開設(shè)了模型可解釋性的微課程。無論你是通過 Kaggle 還是其他的綜合性資源(比如《統(tǒng)計學(xué)習(xí)基礎(chǔ)(Elements of Statistical Learning)》)進行學(xué)習(xí),這些技術(shù)都將徹底地改變你構(gòu)建、驗證和部署機器學(xué)習(xí)模型的方式。


為什么這些洞察結(jié)果很有價值?


模型洞察結(jié)果的五個最重要應(yīng)用是:


調(diào)試

指導(dǎo)特征工程

指導(dǎo)未來數(shù)據(jù)的收集方向

指導(dǎo)人類做出決策

建立信任


調(diào)試


這個世界中存在很多不可靠的、雜亂無章且具有大量噪聲的數(shù)據(jù)。當你寫下預(yù)處理代碼時,你就添加了潛在的錯誤源頭。加上目標泄漏的可能性,在真實的數(shù)據(jù)科學(xué)項目中,在某個點出現(xiàn)錯誤是正常的,而非例外。


鑒于錯誤的頻率以及潛在的災(zāi)難性后果,調(diào)試成為了數(shù)據(jù)科學(xué)中最有價值的技能之一。理解模型正在尋找的模式有助于你確定模型何時與你對現(xiàn)實世界的了解不一致,這一般都是追蹤錯誤的第一步。


指導(dǎo)特征工程


特征工程一般是提高模型準確率的最有效方法。特征工程通常包括轉(zhuǎn)換原始數(shù)據(jù)或之前創(chuàng)建的特征來反復(fù)創(chuàng)建新特征。


有時候你可以僅憑對基本主題的直覺來完成這個過程。但是當原始特征有 100 多個或者你缺乏手頭項目的背景知識時,你就需要更多指導(dǎo)了。


Kaggle 競賽中有道題是關(guān)于預(yù)測貸款違約的,這就是一個極端的例子。這道題中有 100 多個原始特征。出于隱私原因,這些特征沒用常見的英文名字,而是用 f1、f2、f3 這樣的代號命名的。這就模擬了一個你不怎么了解原始數(shù)據(jù)的場景。


一名參賽者發(fā)現(xiàn)了 f527~f528 這兩個特征之間的差異,從而創(chuàng)建了強大的新特征。將這一差異作為特征的模型比沒有這個特征的模型要好得多。但是當變量有數(shù)百個時,你怎么能想到創(chuàng)建這個變量呢?


你在這門課程中學(xué)到的技巧能讓你輕易分辨出 f527 和 f528 是重要特征,而且它們是有緊密關(guān)聯(lián)的。這會指導(dǎo)你考慮轉(zhuǎn)換這兩個變量,從而找到 f527-f528 的「黃金特征」。


現(xiàn)在的數(shù)據(jù)集動輒就有成百上千個原始特征,因此這個方法的重要性與日俱增。


指導(dǎo)未來數(shù)據(jù)的收集方向


你無法控制在線下載的數(shù)據(jù)集。但許多使用數(shù)據(jù)科學(xué)的企業(yè)和組織都有機會擴大他們收集數(shù)據(jù)的類型。收集新類型的數(shù)據(jù)又貴又不方便,所以他們只會收集值得費力氣的數(shù)據(jù)。基于模型的洞察結(jié)果可以讓你更好地理解當前特征的價值,這將幫助你推斷出哪些新價值是最有用的。


指導(dǎo)人類做出決策


有些決策是由模型自動做出的——當你登錄亞馬遜時,網(wǎng)站沒有人在倉促間決定給你展示什么內(nèi)容。但是有很多重要的決定必須要由人類來做。就這些決策而言,模型的洞察能力比預(yù)測能力更有價值。


建立信任


在沒有驗證基本事實的情況下,人們不會相信你的模型,也就不會根據(jù)你的模型做出重要的決策。就數(shù)據(jù)出錯的頻率而言,這是明智的預(yù)防措施。在實踐中,展示符合他們一般認知的洞察結(jié)果有助于建立用戶對模型的信任,即便這些用戶對數(shù)據(jù)科學(xué)知之甚少也沒關(guān)系。


本站內(nèi)容除特別聲明的原創(chuàng)文章之外,轉(zhuǎn)載內(nèi)容只為傳遞更多信息,并不代表本網(wǎng)站贊同其觀點。轉(zhuǎn)載的所有的文章、圖片、音/視頻文件等資料的版權(quán)歸版權(quán)所有權(quán)人所有。本站采用的非本站原創(chuàng)文章及圖片等內(nèi)容無法一一聯(lián)系確認版權(quán)者。如涉及作品內(nèi)容、版權(quán)和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當措施,避免給雙方造成不必要的經(jīng)濟損失。聯(lián)系電話:010-82306118;郵箱:aet@chinaaet.com。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
亚洲综合日韩中文字幕v在线| 欧美在线视频一区二区三区| 国产欧美二区| 欧美电影在线观看完整版| 久久精品论坛| 欧美亚洲网站| 午夜视频久久久久久| 一区二区欧美精品| 一本不卡影院| 日韩一区二区福利| 亚洲精品之草原avav久久| 欧美精品在线一区| 国产午夜精品一区二区三区视频| 欧美日本一道本| 欧美日本不卡| 欧美人在线视频| 欧美日韩另类在线| 欧美三级第一页| 欧美日韩一区二区视频在线| 欧美日韩免费在线| 欧美日韩性生活视频| 欧美三级午夜理伦三级中文幕| 欧美日韩视频专区在线播放 | 在线电影国产精品| 狠狠色综合网| 亚洲电影视频在线| 亚洲黄色性网站| 亚洲精选91| 一本大道久久a久久综合婷婷 | 久久激情中文| 亚洲高清色综合| 亚洲日本欧美日韩高观看| 亚洲精品激情| 亚洲无人区一区| 性做久久久久久| 久久精品国产第一区二区三区最新章节 | 久久嫩草精品久久久久| 麻豆乱码国产一区二区三区| 欧美第十八页| 欧美日韩亚洲一区二区三区四区| 国产精品va在线播放| 国产精品v日韩精品| 国产麻豆午夜三级精品| 国产综合婷婷| 亚洲欧洲日产国产网站| 一区二区电影免费观看| 午夜久久99| 亚洲国产小视频| 亚洲小说欧美另类婷婷| 欧美诱惑福利视频| 美女日韩欧美| 午夜在线a亚洲v天堂网2018| 欧美中文字幕第一页| 欧美成人一区二区三区在线观看| 欧美三级电影精品| 狠狠干狠狠久久| 日韩亚洲不卡在线| 欧美在线观看你懂的| 亚洲美女黄网| 欧美自拍偷拍午夜视频| 欧美freesex交免费视频| 国产精品国产三级国产a| 精品1区2区3区4区| 日韩一级精品视频在线观看| 新67194成人永久网站| 日韩一本二本av| 久久国产直播| 欧美日韩免费观看一区| 国产日韩欧美综合| 亚洲九九精品| 亚洲国产mv| 亚洲综合色视频| 你懂的网址国产 欧美| 国产精品美女久久久久久2018 | 午夜精品久久久久久久99水蜜桃 | 欧美日韩中文另类| 黑丝一区二区三区| 亚洲午夜女主播在线直播| 亚洲片在线观看| 久久久国产成人精品| 国产精品久久久久高潮| 亚洲福利在线看| 欧美亚洲视频在线观看| 亚洲午夜电影网| 欧美大尺度在线| 国产自产精品| 亚洲永久视频| 亚洲午夜在线观看| 欧美国产专区| 伊大人香蕉综合8在线视| 亚洲欧洲av一区二区| 国产精品99久久久久久有的能看| 蜜桃精品一区二区三区| 国产一区二区三区的电影| 一区二区三区四区五区视频| 亚洲免费av观看| 蜜桃av综合| 很黄很黄激情成人| 性色av一区二区三区| 亚洲综合日本| 欧美三级视频在线播放| 亚洲电影第三页| 亚洲国产美女| 另类酷文…触手系列精品集v1小说| 国产欧美日韩一区二区三区在线| 亚洲午夜黄色| 亚洲欧美日韩国产中文在线| 欧美视频中文在线看| 91久久精品美女| 亚洲黄色有码视频| 久久亚洲国产精品一区二区| 国产日韩在线不卡| 亚洲一区二区三区高清| 亚洲一区二区三区中文字幕| 欧美精品在线观看| 亚洲欧洲综合另类| 亚洲精品欧美日韩专区| 欧美风情在线| 亚洲区国产区| 日韩视频在线观看免费| 欧美激情性爽国产精品17p| 亚洲第一黄网| 日韩午夜激情av| 欧美激情精品久久久久久久变态| 亚洲国产成人不卡| 亚洲美女中文字幕| 欧美日韩国产精品成人| 亚洲免费福利视频| 亚洲一区二区三区中文字幕在线 | 国产精品毛片| 亚洲男人天堂2024| 欧美一区二区三区精品电影| 国产精品自拍一区| 欧美一级网站| 久热精品在线| 亚洲人成免费| 一区二区三区国产在线| 亚洲精品护士| 国内揄拍国内精品少妇国语| 久久精品成人| 欧美成人一区二区在线| 亚洲片国产一区一级在线观看| 99国内精品久久久久久久软件| 欧美激情综合网| 一区二区三区视频在线| 欧美亚洲自偷自偷| 国产专区精品视频| 亚洲精品一区二区三区不| 欧美日韩不卡在线| 亚洲一区二区三| 久久久久九九九| 亚洲国产精品专区久久 | 99视频精品免费观看| 欧美午夜精品久久久久久久 | 午夜亚洲视频| 欧美va天堂在线| 99在线精品视频在线观看| 午夜久久资源| 精品动漫3d一区二区三区| 妖精成人www高清在线观看| 国产精品久久久久久影视| 欧美影院午夜播放| 欧美激情一区二区三级高清视频| 夜夜嗨av一区二区三区| 久久成人精品无人区| 亚洲福利视频二区| 亚洲婷婷在线| 国产综合色产| 中日韩视频在线观看| 国产一区二区欧美日韩| 99ri日韩精品视频| 国产日韩精品一区| 亚洲人成久久| 国产精品一级在线| 亚洲精品日韩久久| 国产精品丝袜白浆摸在线| 亚洲国产精品日韩| 国产精品麻豆欧美日韩ww| 亚洲国产精品va在看黑人| 欧美午夜无遮挡| 久久精品三级| 国产精品第一页第二页第三页| 亚洲电影下载| 国产精品爽爽ⅴa在线观看| 亚洲人www| 国产偷自视频区视频一区二区 | 亚洲视屏一区| 韩日视频一区| 亚洲综合视频在线| 在线电影欧美日韩一区二区私密| 亚洲一区二区三区欧美| 精品99一区二区| 香蕉久久精品日日躁夜夜躁| 亚洲黄色三级| 久久久久久久综合色一本| 夜夜夜精品看看| 欧美国产精品v| 欧美在线免费观看| 国产精品久久久久影院亚瑟| 亚洲精品国精品久久99热一|