华南理工大学学报(自然科学版)
華南理工大學學報(自然科學版)
화남리공대학학보(자연과학판)
JOURNAL OF SOUTH CHINA UNIVERSITY OF TECHNOLOGY(NATURAL SCIENCE EDITION)
2013年
7期
131-136
,共6页
语义匹配%抄袭检测%指纹%文本语义
語義匹配%抄襲檢測%指紋%文本語義
어의필배%초습검측%지문%문본어의
semantic matching%plagiarism detection%fingerprint%text semantics
现有的抄袭检测方法大多根据相似度来判定文档间是否存在抄袭.与常见的复制检测不同,在抄袭检测中,占文档很小比例且未加引用的复制文本也将被认定为抄袭.受文档尺寸、复制篇幅和干扰信息的影响,现有方法的检测效果均不理想.针对这种局限性,文中分析了文本语义与指纹排列顺序的关系,提出了语义匹配方法,将指纹向量投影到一个二进制向量,在降低维数的同时保留了指纹的位置信息.在PAN公用语料集上将该方法与Jaccard和Hamming距离法进行了对比测试,发现文中方法的召回率和准确度均更优.
現有的抄襲檢測方法大多根據相似度來判定文檔間是否存在抄襲.與常見的複製檢測不同,在抄襲檢測中,佔文檔很小比例且未加引用的複製文本也將被認定為抄襲.受文檔呎吋、複製篇幅和榦擾信息的影響,現有方法的檢測效果均不理想.針對這種跼限性,文中分析瞭文本語義與指紋排列順序的關繫,提齣瞭語義匹配方法,將指紋嚮量投影到一箇二進製嚮量,在降低維數的同時保留瞭指紋的位置信息.在PAN公用語料集上將該方法與Jaccard和Hamming距離法進行瞭對比測試,髮現文中方法的召迴率和準確度均更優.
현유적초습검측방법대다근거상사도래판정문당간시부존재초습.여상견적복제검측불동,재초습검측중,점문당흔소비례차미가인용적복제문본야장피인정위초습.수문당척촌、복제편폭화간우신식적영향,현유방법적검측효과균불이상.침대저충국한성,문중분석료문본어의여지문배렬순서적관계,제출료어의필배방법,장지문향량투영도일개이진제향량,재강저유수적동시보류료지문적위치신식.재PAN공용어료집상장해방법여Jaccard화Hamming거리법진행료대비측시,발현문중방법적소회솔화준학도균경우.