北京交通大学学报
北京交通大學學報
북경교통대학학보
JOURNAL OF NORTHERN JIAOTONG UNIVERSITY
2004年
5期
11-15
,共5页
刘蕴辉%罗四维%李爱军%俞翰斌
劉蘊輝%囉四維%李愛軍%俞翰斌
류온휘%라사유%리애군%유한빈
神经网络%学习机制%凸规划%信息几何
神經網絡%學習機製%凸規劃%信息幾何
신경망락%학습궤제%철규화%신식궤하
人工神经网络最重要的特征就是网络的学习能力,通过对神经网络内部权值的调整,学习外部环境结构的特征和信息的表示.从信息几何的角度,对神经网络的学习过程进行了几何描述,并将神经网络的学习问题转化为,最小化外部环境表示的真实分布与网络模型表示的逼近分布之间的"距离",并证明了对于可编码成指数簇流形的神经网络是凸规划问题.为神经网络学习的研究提出了一个新的思路,也为在高维非线性空间中解决网络学习问题的有效性,从信息几何的角度给出了一种解释.
人工神經網絡最重要的特徵就是網絡的學習能力,通過對神經網絡內部權值的調整,學習外部環境結構的特徵和信息的錶示.從信息幾何的角度,對神經網絡的學習過程進行瞭幾何描述,併將神經網絡的學習問題轉化為,最小化外部環境錶示的真實分佈與網絡模型錶示的逼近分佈之間的"距離",併證明瞭對于可編碼成指數簇流形的神經網絡是凸規劃問題.為神經網絡學習的研究提齣瞭一箇新的思路,也為在高維非線性空間中解決網絡學習問題的有效性,從信息幾何的角度給齣瞭一種解釋.
인공신경망락최중요적특정취시망락적학습능력,통과대신경망락내부권치적조정,학습외부배경결구적특정화신식적표시.종신식궤하적각도,대신경망락적학습과정진행료궤하묘술,병장신경망락적학습문제전화위,최소화외부배경표시적진실분포여망락모형표시적핍근분포지간적"거리",병증명료대우가편마성지수족류형적신경망락시철규화문제.위신경망락학습적연구제출료일개신적사로,야위재고유비선성공간중해결망락학습문제적유효성,종신식궤하적각도급출료일충해석.