一种基于分布式文件系统的遥感数据快速并发读写方法
摘要:
本发明提供一种基于分布式文件系统的遥感数据快速并发读写方法,底层物理结构上继承HDFS文件系统特点,包括在计算机群中的每台数据服务器上安装Hadoop系统,并建立HDFS文件系统,然后在每台数据服务器上划分一部分空间作为自有文件系统的物理存储空间;在HDFS业务处理层上进行了一级封装,接管操作系统对文件系统的访问,当操作系统只要求读取文件,且文件数据已经存在,则直接引用HDFS文件系统接口,由HDFS完成文件数据的读取;当操作系统要求对文件的访问包括有写文件操作则全面接管文件操作,由自有文件系统实现数据读写,并在读写数据完成后,将数据同步到HDFS中;所述自有文件系统只对一台服务器进行读写。本发明能够实现海量遥感数据的快速并发读写。
0/0