陕西科技大学学报（自然科学版）
陝西科技大學學報（自然科學版）
협서과기대학학보（자연과학판）
JOURNAL OF SHAANXI UNIVERSITY OF SCIENCE & TECHNOLOGY
2015年
1期
179-183
,共5页
模型选择%组块3×2交叉验证%t检验%测试误差%模型复杂度
模型選擇%組塊3×2交扠驗證%t檢驗%測試誤差%模型複雜度
모형선택%조괴3×2교차험증%t검험%측시오차%모형복잡도
model selection%blocked 3 × 2 cross-validation%t-test%test error%model com-plexity
传统的模型选择问题中，往往以所关心的性能指标的大小来评价模型。然而，许多情形下模型性能指标之间的差异在统计意义下是不显著的，是由随机误差导致的。为此，基于组块3×2交叉验证指标差异的显著性 t检验给出了一种新的模型选择算法。模拟实验结果表明，在统计意义的最小化即平方损失（回归）和0‐1（分类）损失最小化下，该方法常常被选择到较为简单的模型。
傳統的模型選擇問題中，往往以所關心的性能指標的大小來評價模型。然而，許多情形下模型性能指標之間的差異在統計意義下是不顯著的，是由隨機誤差導緻的。為此，基于組塊3×2交扠驗證指標差異的顯著性 t檢驗給齣瞭一種新的模型選擇算法。模擬實驗結果錶明，在統計意義的最小化即平方損失（迴歸）和0‐1（分類）損失最小化下，該方法常常被選擇到較為簡單的模型。
전통적모형선택문제중，왕왕이소관심적성능지표적대소래평개모형。연이，허다정형하모형성능지표지간적차이재통계의의하시불현저적，시유수궤오차도치적。위차，기우조괴3×2교차험증지표차이적현저성 t검험급출료일충신적모형선택산법。모의실험결과표명，재통계의의적최소화즉평방손실（회귀）화0‐1（분류）손실최소화하，해방법상상피선택도교위간단적모형。
In traditional model selection problem ,the evaluation of the model is always based on the performance indexes .However ,in many cases ,the difference of the performance inde‐xes of the models may not be statistically significant ,which may result from random error . Therefore ,a new model selection algorithm is proposed based on blocked 3 × 2 cross‐validated significance t‐test for the difference of the indexes .Experiment results show that the algo‐rithm always select the simple models based on the minimization of square loss (regression) or 0‐1 loss (classification) .
