计算机技术与发展
計算機技術與髮展
계산궤기술여발전
Computer Technology and Development
2015年
11期
209-212
,共4页
地震数据%道集%并行计算%虚拟文件%分布式文件系统
地震數據%道集%併行計算%虛擬文件%分佈式文件繫統
지진수거%도집%병행계산%허의문건%분포식문건계통
seismic data%gather%parallel computing%virtual file%distributed file system
在地震资料处理系统中,对TB级的海量地震数据文件的存取存在严重的I/O瓶颈.针对地震数据文件操作的特点,提出了一个基于集群环境的分布式地震数据文件系统(DSFS).该系统由数据库节点、地震数据文件节点、计算节点组成.设计了面向地震道集数据的分布式文件架构,该架构以地震道头信息索引数据库为中心,将一个大的地震数据文件分解为多个可独立操作的子文件,建立基于道头字的索引数据表,根据索引表可快速定位道数据所在的子文件及数据块.设计了一组DSFS文件操作和道集数据读写操作,提供了针对虚拟文件按道头字值进行数据查询和输入输出,屏蔽了分布式文件的细节,并提出了文件分布及并行存取策略.DSFS在地震资料处理系统得到应用并具有很高的数据存取效率.
在地震資料處理繫統中,對TB級的海量地震數據文件的存取存在嚴重的I/O瓶頸.針對地震數據文件操作的特點,提齣瞭一箇基于集群環境的分佈式地震數據文件繫統(DSFS).該繫統由數據庫節點、地震數據文件節點、計算節點組成.設計瞭麵嚮地震道集數據的分佈式文件架構,該架構以地震道頭信息索引數據庫為中心,將一箇大的地震數據文件分解為多箇可獨立操作的子文件,建立基于道頭字的索引數據錶,根據索引錶可快速定位道數據所在的子文件及數據塊.設計瞭一組DSFS文件操作和道集數據讀寫操作,提供瞭針對虛擬文件按道頭字值進行數據查詢和輸入輸齣,屏蔽瞭分佈式文件的細節,併提齣瞭文件分佈及併行存取策略.DSFS在地震資料處理繫統得到應用併具有很高的數據存取效率.
재지진자료처리계통중,대TB급적해량지진수거문건적존취존재엄중적I/O병경.침대지진수거문건조작적특점,제출료일개기우집군배경적분포식지진수거문건계통(DSFS).해계통유수거고절점、지진수거문건절점、계산절점조성.설계료면향지진도집수거적분포식문건가구,해가구이지진도두신식색인수거고위중심,장일개대적지진수거문건분해위다개가독립조작적자문건,건립기우도두자적색인수거표,근거색인표가쾌속정위도수거소재적자문건급수거괴.설계료일조DSFS문건조작화도집수거독사조작,제공료침대허의문건안도두자치진행수거사순화수입수출,병폐료분포식문건적세절,병제출료문건분포급병행존취책략.DSFS재지진자료처리계통득도응용병구유흔고적수거존취효솔.
The serious I/O bottleneck was found in seismic data process system to access large seismic data file which size reaches TB grade. Aiming at the futures of accessing seismic data files,a distributed seismic data file system (DSFS) based on cluster computer is put forward,that is composed of database node,seismic data file node and computing node. A distributed file architecture facing seismic gath-er is designed,taking seismic trace indexing database as the center,spliting a large seismic data file into sub files that can be access seis-mic data separately,a seismic trace indexing table is designed to locate the sub file and data block that a trace data is stored. A set of oper-ators on DSFS file and accessing gather data are designed,providing the data query and input and output data by trace key values in large file,the distributed file details is screened. The strategy for distributed file and parallel I/O is presented. The DSFS has been used in seis-mic data process system,and has very high I/O efficiency.