研究人員正確理解人工智能決策的三種方法

時間:2022-08-24

來源:千家網(wǎng)

導(dǎo)語:為了更好地理解他們構(gòu)建的模型,人工智能研究人員開發(fā)了三種主要的解釋方法。

  這些是局部解釋方法,只解釋一個具體的決定,而不是整個模型的決定,考慮到規(guī)模,這可能具有挑戰(zhàn)性。

  理解人工智能決策對研究人員、決策者和廣大人民來說非常重要。幸運的是,有一些方法可以確保我們了解更多。前沿人工智能公司和學術(shù)屆使用的深度學習模型已經(jīng)變得如此復(fù)雜,以至于即使是構(gòu)建模型的研究人員也難以理解正在做出的決策。

  這一點在某錦標賽上得到了最明顯的體現(xiàn)。在這場比賽中,數(shù)據(jù)科學家和職業(yè)圍棋選手經(jīng)常被人工智能在比賽中的決策所迷惑,因為它做出了非正式的游戲,而這并不被認為是最強的一步。

  為了更好地理解他們構(gòu)建的模型,人工智能研究人員開發(fā)了三種主要的解釋方法。這些是局部解釋方法,只解釋一個具體的決定,而不是整個模型的決定,考慮到規(guī)模,這可能具有挑戰(zhàn)性。

  特征歸因

  通過特征歸因,人工智能模型將識別輸入的哪些部分對特定決策是重要的。對于X射線,研究人員可以看到熱圖或模型認為對其決策最重要的單個像素。

  使用這種特征歸因解釋,可以檢查是否存在虛假相關(guān)性。例如,它會顯示水印中的像素是否被突出顯示,或者實際腫瘤中的像素是否被突出顯示。

  反事實解釋

  當做出決定時,我們可能會感到困惑,不知道為什么人工智能會做出這樣或那樣的決定。由于人工智能被部署在高風險的環(huán)境中,如保險、抵押貸款等,了解人工智能拒絕因素或上訴的原因應(yīng)該有助于他們在下次申請時獲得批準。

  反事實解釋方法的好處是,它確切地告訴你需要如何更改輸入來翻轉(zhuǎn)決策,這可能具有實際用途。對于那些申請抵押貸款卻沒有得到的人來說,這個解釋會告訴他們需要做些什么來達到他們想要的結(jié)果。

  樣本重要性

  樣本重要性解釋需要訪問模型背后的基礎(chǔ)數(shù)據(jù)。如果研究人員注意到他們認為是錯誤的,他們可以運行一個樣本重要性解釋,以查看人工智能是否輸入了它無法計算的數(shù)據(jù),從而導(dǎo)致判斷錯誤。


中傳動網(wǎng)版權(quán)與免責聲明:

凡本網(wǎng)注明[來源:中國傳動網(wǎng)]的所有文字、圖片、音視和視頻文件,版權(quán)均為中國傳動網(wǎng)(www.surachana.com)獨家所有。如需轉(zhuǎn)載請與0755-82949061聯(lián)系。任何媒體、網(wǎng)站或個人轉(zhuǎn)載使用時須注明來源“中國傳動網(wǎng)”,違反者本網(wǎng)將追究其法律責任。

本網(wǎng)轉(zhuǎn)載并注明其他來源的稿件,均來自互聯(lián)網(wǎng)或業(yè)內(nèi)投稿人士,版權(quán)屬于原版權(quán)人。轉(zhuǎn)載請保留稿件來源及作者,禁止擅自篡改,違者自負版權(quán)法律責任。

如涉及作品內(nèi)容、版權(quán)等問題,請在作品發(fā)表之日起一周內(nèi)與本網(wǎng)聯(lián)系,否則視為放棄相關(guān)權(quán)利。

關(guān)注伺服與運動控制公眾號獲取更多資訊

關(guān)注直驅(qū)與傳動公眾號獲取更多資訊

關(guān)注中國傳動網(wǎng)公眾號獲取更多資訊

最新新聞
查看更多資訊

熱搜詞
  • 運動控制
  • 伺服系統(tǒng)
  • 機器視覺
  • 機械傳動
  • 編碼器
  • 直驅(qū)系統(tǒng)
  • 工業(yè)電源
  • 電力電子
  • 工業(yè)互聯(lián)
  • 高壓變頻器
  • 中低壓變頻器
  • 傳感器
  • 人機界面
  • PLC
  • 電氣聯(lián)接
  • 工業(yè)機器人
  • 低壓電器
  • 機柜
回頂部
點贊 0
取消 0