计算机系统应用
計算機繫統應用
계산궤계통응용
APPLICATIONS OF THE COMPUTER SYSTEMS
2014年
2期
183-188
,共6页
卞艺杰%陈超%李亚冰%陆小亮
卞藝傑%陳超%李亞冰%陸小亮
변예걸%진초%리아빙%륙소량
机构知识库%HDFS%海量小文件%Dspace
機構知識庫%HDFS%海量小文件%Dspace
궤구지식고%HDFS%해량소문건%Dspace
institutional repository%HDFS%massive small files%dspace
机构知识库作为一种新型的学术交流模式和开放获取活动的绿色通道已逐渐成为国内外图书情报界关注的新焦点,随着机构库的发展其数据规模也在不断扩大,传统的存储模式已经不能满足日益增长的存储需求.在对机构库内容存储特点的研究基础上建立基于HDFS与Dspace的分布式机构库Hdspace.首先提出一种小文件合并生成新的存储文件,并对文件提出基于学科分类的两级索引,结合索引预缓存机制提高小文件的读取响应,为海量小文件存储及后续的信息高效利用提供了一种解决方案,通过模拟测试显示本模式能够大大提高机构知识库小文件的存储、读取以及检索效率.
機構知識庫作為一種新型的學術交流模式和開放穫取活動的綠色通道已逐漸成為國內外圖書情報界關註的新焦點,隨著機構庫的髮展其數據規模也在不斷擴大,傳統的存儲模式已經不能滿足日益增長的存儲需求.在對機構庫內容存儲特點的研究基礎上建立基于HDFS與Dspace的分佈式機構庫Hdspace.首先提齣一種小文件閤併生成新的存儲文件,併對文件提齣基于學科分類的兩級索引,結閤索引預緩存機製提高小文件的讀取響應,為海量小文件存儲及後續的信息高效利用提供瞭一種解決方案,通過模擬測試顯示本模式能夠大大提高機構知識庫小文件的存儲、讀取以及檢索效率.
궤구지식고작위일충신형적학술교류모식화개방획취활동적록색통도이축점성위국내외도서정보계관주적신초점,수착궤구고적발전기수거규모야재불단확대,전통적존저모식이경불능만족일익증장적존저수구.재대궤구고내용존저특점적연구기출상건립기우HDFS여Dspace적분포식궤구고Hdspace.수선제출일충소문건합병생성신적존저문건,병대문건제출기우학과분류적량급색인,결합색인예완존궤제제고소문건적독취향응,위해량소문건존저급후속적신식고효이용제공료일충해결방안,통과모의측시현시본모식능구대대제고궤구지식고소문건적존저、독취이급검색효솔.
