CAJ | 학술논문

在基于OCR技术的大规模文档录入系统中,自动检错可以大大降低人工校对成本.在日文OCR系统自动检错中,日文单词因其动词及形容词、形容动词的词尾变化现象使自动分词变得比较困难.本文提出了一种基于词素的日文分词新方法,通过建立以词素为基础单位的分词词库,以最大长度优先词条匹配方法分割出文章中有词尾变化的日文单词,避免了传统日文分词中收录单词各种词尾变化形式造成分词词库过于庞大的问题.实验表明,本文提出的分词方法可以达到99.0%的分词正确率;将该方法运用在OCR检错模块,当系统拒识率(即检错模块中认为可疑的字符在总字符中的比例)控制在1/5时,测试集上漏检率为0.05%,说明了该方法的有效性.
재기우OCR기술적대규모문당록입계통중,자동검착가이대대강저인공교대성본.재일문OCR계통자동검착중,일문단사인기동사급형용사、형용동사적사미변화현상사자동분사변득비교곤난.본문제출료일충기우사소적일문분사신방법,통과건립이사소위기출단위적분사사고,이최대장도우선사조필배방법분할출문장중유사미변화적일문단사,피면료전통일문분사중수록단사각충사미변화형식조성분사사고과우방대적문제.실험표명,본문제출적분사방법가이체도99.0%적분사정학솔;장해방법운용재OCR검착모괴,당계통거식솔(즉검착모괴중인위가의적자부재총자부중적비례)공제재1/5시,측시집상루검솔위0.05%,설명료해방법적유효성.