2009 Forecast Evaluations

今天突然心血來潮逛到很久沒看的FB Blog: Last Player Picked, 發現多了很多新文章. LPP的FB文章都很不錯, 理路正確, 邏輯清楚, 而且寫得不難懂. 有時間再來寫一些文章的心得.

不過首先要講的是上面提到的另一個網站Steamer整理的2009各家預測打擊成績比較.

在這篇文章中,Steamer以FB的觀點比較了八個預測成績: Steamer自身, Marcel, PECOTA, Chone, ZiPS, SportingNews, Fantistics和2008年成績.

結論是: Chone和ZiPS在所有比率數據( (R+RBI)/PA, HR/AB, SB/PA, OPS)上都位居前兩名, Chone略勝一點, 但兩者的預測成績極為接近.

Fantistics和SportingNews兩個人工預測差不多在所有比率數據都輸給公式型預測, 當然還是比直接複製2008年成績好一些. 不過Fantistics在PA的預測遙遙領先, 連帶著在SGPs(FB Value)上也取得了顯著的勝利.

當然Fantistics有點勝之不武, 因為Chone, ZiPS和PECOTA沒有真的去預測打者的PA, Marcel的PA預測也很簡單. 而打者的FB Value和打席數又高度相關, 所以Fantistics可靠著打席準確度的大幅領先在FB Value預測稱王.

不過我們從這裡得到的收穫是: 公式預測在比率數據上的表現明顯比專家預測好, 但預測打席數差距太大所以不實用. 我們可以兼取兩家之長, 以專家預測的打席數, 乘上公式預測中最佳的Chone或ZiPS(或兩者平均, 反正兩個數據差不多)的比率數據, 簡單地得到更佳的預測.

Steamer上也有投手的預測成績比較, 不過我覺得比較的方法沒有打者這篇好.

同樣的是, 公式預測在比率數據上的表現仍然比兩個專家預測好, ZiPS在ERA和WHIP上大幅領先, 但是K/9的表現不好. Fantistics仍是在IP上穩居第一, 並靠此奪下SGPs的冠軍. 我們也可以用同樣的方法組合兩種預測來提高準確度.