您所在的位置: 首页 > 专利技术 > 正文
专利基本信息
专利名称 一种基于分布式文件系统的海量地学数据并行处理方法
专利状态 - 专利号(申请号) CN103198097A
专利申请日期 2013-03-11 专利类型 发明专利
申请公布号 CN201310076895.2 申请公布日 2013-03-11
授权公告号 - 授权公告日 -
发明人 黎建辉,沈庚,周园春,王学志,韦远科,张洋
专利权人 中国科学院计算机网络信息中心
专利摘要 本发明公开了一种基于分布式文件系统的海量地学数据并行处理方法。本方法为:1)采用分布式文件系统作为地学数据的存储系统,部署在计算集群上;分布式文件系统拥有统一的名称空间;2)计算集群的作业调度系统将接收的计算作业保存到一等待队列中;3)调度系统从等待队列中选择一个计算作业进入运行队列;4)调度系统根据计算作业信息在分布式文件系统的元数据中查找该计算作业运行需要的数据文件所在的计算节点;5)作业调度系统挑选一持有该计算作业运行需要的数据最多的计算节点;该计算节点远程获取该计算作业需要但该计算节点未持有的数据文件,然后在该计算节点执行该计算作业,并返回执行结果。本方法最大程度的做到了计算本地化。
专利价值评估分析
相关推荐
Baidu
map