计算机工程与应用
計算機工程與應用
계산궤공정여응용
COMPUTER ENGINEERING AND APPLICATIONS
2013年
15期
133-135,200
,共4页
距离函数%损失函数%正则化%AdaBoost算法
距離函數%損失函數%正則化%AdaBoost算法
거리함수%손실함수%정칙화%AdaBoost산법
distance function%loss function%regularization%AdaBoost algorithm
基于距离函数和损失函数正则化的权值更新模式,使用相关熵距离函数,Itakura-Saito距离函数,指数一次近似距离和相关熵损失函数结合,实现了三种AdaBoost弱分类器权值更新算法。使用UCI数据库数据对提出的三种算法AdaBoostRE,AdaBoostIE,AdaBoostEE与Real AdaBoost,Gentle AdaBoost和Modest AdaBoost算法作了比较,可以看到提出的AdaBoostRE算法预测效果最好,优于Real AdaBoost,Gentle AdaBoost和Modest AdaBoost算法。
基于距離函數和損失函數正則化的權值更新模式,使用相關熵距離函數,Itakura-Saito距離函數,指數一次近似距離和相關熵損失函數結閤,實現瞭三種AdaBoost弱分類器權值更新算法。使用UCI數據庫數據對提齣的三種算法AdaBoostRE,AdaBoostIE,AdaBoostEE與Real AdaBoost,Gentle AdaBoost和Modest AdaBoost算法作瞭比較,可以看到提齣的AdaBoostRE算法預測效果最好,優于Real AdaBoost,Gentle AdaBoost和Modest AdaBoost算法。
기우거리함수화손실함수정칙화적권치경신모식,사용상관적거리함수,Itakura-Saito거리함수,지수일차근사거리화상관적손실함수결합,실현료삼충AdaBoost약분류기권치경신산법。사용UCI수거고수거대제출적삼충산법AdaBoostRE,AdaBoostIE,AdaBoostEE여Real AdaBoost,Gentle AdaBoost화Modest AdaBoost산법작료비교,가이간도제출적AdaBoostRE산법예측효과최호,우우Real AdaBoost,Gentle AdaBoost화Modest AdaBoost산법。
According to weight update model via distance and lost function regularization, proposed by J.Kivinen and M.K.Warmuth, using relative entropy, Itakura-Saito, first order exponential approximation distance function, combined with relative entropy lost function, this paper devises three sorts of weight update method of weak classifier of AdaBoost. Using the UCI real datasets, the three algorithms AdaBoostRE, AdaBoostIE, AdaBoostEE are compared with three leading assembly classifier:Real AdaBoost, Gentle AdaBoost and Modest AdaBoost. Experimental results show promising performance of the proposed method.