[发明专利]基于最小化IO访问冲突和文件分条的大规模分条文件分配系统有效
申请号: | 201310228642.2 | 申请日: | 2013-06-08 |
公开(公告)号: | CN103324577A | 公开(公告)日: | 2013-09-25 |
发明(设计)人: | 阮利;陈鲲;肖利民;董斌 | 申请(专利权)人: | 北京航空航天大学 |
主分类号: | G06F12/02 | 分类号: | G06F12/02 |
代理公司: | 北京金恒联合知识产权代理事务所 11324 | 代理人: | 李强 |
地址: | 100191*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明针对大数据的存储挑战以及需要频繁的进行文件读写的科学计算程序输入输出瓶颈等方面存在的问题,发明了一种基于最小化IO访问冲突和文件分条的大规模分条文件分配系统,在模块构成上主要包括系统初始参数获取模块,文件特征读取模块,文件和磁盘的排序模块,基于最小化IO访问冲突和文件分条的文件分配执行模块。由于本发明面向大数据应用和高性能计算机中大规模分条文件,充分考虑大规模文件请求的磁盘I/O冲突概率,为高性能计算机和大数据存储系统提供了适于大数据、最小化IO访问冲突的文件分配支持,进而为高效的大数据并行输入/输出提供有力支撑,故本发明具有广阔的应用前景。 | ||
搜索关键词: | 基于 最小化 io 访问 冲突 文件 大规模 分配 系统 | ||
【主权项】:
一种基于最小化IO访问冲突和文件分条的大规模分条文件分配系统,主要完成在在多个并行的磁盘内对要被访问的大数据分条文件进行文件的有效分配,具有满足面向大数据分条文件,充分考虑文件请求的磁盘I/O冲突概率需求的技术特征,其特征在于:在体系结构上,位于适于大数据应用的并行文件系统的体系结构自上而下为,大数据应用层‑>并行文件系统层‑>物理硬件层,该体系结构中的并行文件系统层;在流程上,位于负载均衡处理流程中的最小化I/O访问冲突的文件分配步骤,是基于分布式决策的负载均衡步骤的前提步骤。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京航空航天大学,未经北京航空航天大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201310228642.2/,转载请声明来源钻瓜专利网。
- 上一篇:一种基于x86体系结构处理器的VME单板计算机装置
- 下一篇:医用棉签消毒盒