题名 | 博士论文-数据密集型大规模作业处理系统设计 |
作者 | 徐永士 |
学位类别 | 博士 |
答辩日期 | 2012 |
授予单位 | 中国科学院研究生院 |
授予地点 | 北京 |
导师 | 孙功星 |
关键词 | 数据本地化 作业调度 分布式 文件元数据 |
学位专业 | 计算机应用技术 |
中文摘要 | 论文在综合分析了目前使用的作业批处理系统和主要分布式海量存储系统的基础上,提出一种新型的数据感知的作业处理系统框架。框架中的作业处理子系统通过分布式文件元数据管理器感知被处理文件的位置属性,将作业调度到数据所在的节点上,实现数据的本地化处理。 设计的框架主要包括用户交互服务、资源管理服务、作业调度服务、作业执行服务、文件元数据管理服务及存储代理服务;给出了作业控制流和数据流,并开发了服务间的接口规范 |
语种 | 中文 |
学科主题 | 计算机应用技术 |
公开日期 | 2016-02-25 |
内容类型 | 学位论文 |
源URL | [http://ir.ihep.ac.cn/handle/311005/209995] ![]() |
专题 | 计算中心_学位论文和出站报告 |
作者单位 | 中国科学院高能物理研究所 |
推荐引用方式 GB/T 7714 | 徐永士. 博士论文-数据密集型大规模作业处理系统设计[D]. 北京. 中国科学院研究生院. 2012. |
个性服务 |
查看访问统计 |
相关权益政策 |
暂无数据 |
收藏/分享 |
除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。
修改评论