請問該怎麼選擇以及評估應該要使用什麼指標?
請問該怎麼選擇以及評估應該要使用什麼指標?
或者說平均平方差的數學公式可以達到什麼效果並代表著什麼?
要怎麼樣才能學會這些概念??
回答列表
-
2019/08/26 下午 05:28Jimmy贊同數：1不贊同數：0留言數：0
Hi Ma Chao Ting!
使用指標的準則當然是依據專案的目標而定囉！假設我們有預測房價的問題，訓練好的模型就希望預測出的房價與實際房 價越接近越好，MAE 就是在衡量預測與實際值的差距，若完美預測則 MAE 就是 0，至於 MAE 多大才是不好，則是看專案而定，誤差 1000 可能還能接受，但誤差 100 萬則這個模型應該就表現得不好囉。
這些概念在 Day35 會有更完整的介紹，你可以先預習看看有什麼樣的評估指標可以使用喔
-
2019/08/26 下午 09:59陳立偉贊同數：0不贊同數：0留言數：0
不同的需求或對像，會有不同的評估方式，但是同一個對像或商品，該專業領域本身就會有許多不同的指標，這些都可以用來參考，不過要注意的是這些資訊的公布日不一定會等於資訊日期，例如季結束後的幾週才公佈上一季的資訊，不能用季未最後一天來當資料去分析，要用公佈日去分析，也有人會去綜合多種指標生成新指標資訊，這部份其實 ML 更善長，我是覺得不需要人工處理，給它原始資料，效果可能會更好。
-
2019/08/26 下午 11:20Aibo贊同數：0不贊同數：0留言數：0
1. 就有趣的問題來找可靠或可取得資料來源來評估能有甚麼指標可以做使用.
2. 可以去除受極端值的影響.
3. 不斷的實作與練習.
-
2019/08/27 上午 11:03張維元 (WeiYuan)贊同數：4不贊同數：1留言數：0
以回歸來說，不同指標可能隱含不同意義，實際上會看資料的樣子跟需求下去做選擇。舉個例子， MSE 跟 MAE 主要差別是有沒有平方，此時可以思考平方的差別是什麼？使用平方計算的 MSE 能夠將差距放大，強化預測資料與真實資料的關係。因此如果在數值算出來差距很小的時候就可以考慮用這樣的方式來處理。但是 MSE 的平方，有助於後續的最小值計算（微分比較容易）。
怎麼選擇以及評估應該要使用什麼指標，我蠻推薦這一篇文章：https://www.ycc.idv.tw/confusion-matrix.html