Why Explainable AI

我們做calssification問題時,希望機器告訴我們答案的同時,也告訴我們理由(explanation)

Explanation可以分兩種,這邊舉例給一張圖,機器告訴我們這是一隻貓:

Explainable ML ≠ 完全瞭解一個模型,甚至,完全瞭解一個模型未必是必要的

Explainable ML 存在的目的其實是,讓人覺得有道理,讓人滿意而已

Local explanation

$$ \text{Object } x \rightarrow \text{ Components: } \{ x_1 , \dots,x_n,\cdots,x_N \} $$