郭明阳
- 作品数:10 被引量:8H指数:2
- 供职机构:中国科学院计算技术研究所更多>>
- 发文基金:国家高技术研究发展计划国家重点基础研究发展计划中国科学院战略性先导科技专项更多>>
- 相关领域:自动化与计算机技术生物学更多>>
- 存储服务关键支撑技术研究报告
- 2016年
- 该研究以数据资源和存储服务资源动态组织和管理为核心,研究适合于复杂应用环境下高效提供多类型存储服务的关键支撑技术及系统方法,解决面向复杂应用环境的数据存储问题,目的是更好地支撑面向下一代海量数据开放应用环境下的高效存储服务。该研究的工作集中于网络RAID阵列和机群文件系统两个系统,在分布式异步弱可比、高维冗余、机群文件系统基于大粒度子卷的元数据集群、机群文件系统客户端访问低延迟4项关键技术上取得进展。
- 许鲁郭明阳
- 关键词:QOS保障机制
- I/O访问相关性原理被引量:4
- 2014年
- 作为数据访问的基本原理,局部性一直是以单个数据访问请求为研究对象,忽视了数据之间的一个重要规律:数据访问中存在一些数据会一起访问——访问相关性.而且,相关性是有强度的:一些数据元素之间的相关性比其他元素更紧密.通过对典型数据I/O访问的分析,提出了访问相关性模型,并采用基于LRU堆栈的方法,提出了相关性集合的刻画方法.
- 刘建亮杨琳郭明阳许鲁
- 关键词:数据访问I/O访问
- BW-RAID系统的分布式异步版本识别机制
- 2016年
- 为解决BW-RAID系统中数据冗余模式从镜像向RAID4转换时的节点间缓存数据版本识别问题,提出了一种分布式异步版本识别机制。该版本识别机制在镜像卷中的一个逻辑块被更新时,为其生成一个新版本;在冗余模式转换时,通过比较镜像节点间的版本判定某一逻辑块在两个镜像节点缓存的数据是否一致,如果数据一致将其迁移到数据存储卷,否则暂存入镜像节点各自的磁盘缓存以保证系统的冗余一致性。实验表明,该机制在系统正常、降级、故障恢复状态下均能准确、有效识别一致数据;顺序写评测中存储负载小于1%,平均带宽提升最高达25.43%;Open-mail负载重播评测中存储负载低于40%,应用重播结束时写更新数据均完成冗余模式转换,实现了提高空间利用率的目标。
- 王慧郭明阳董欢庆许鲁
- 关键词:网络RAID数据一致性
- 基于稳定集模型的大容量缓存管理被引量:1
- 2013年
- 指出了阶段间数据换入换出效率是大容量缓存管理最重要的问题,并对这一问题进行了研究。定义了一种用于预测新阶段的数据访问的新的数据访问宏观模型——稳定集模型(SSM),并基于该模型设计了一套缓存管理方法,包括缓存容量配置、缓存粒度选择、数据预取和缓存替换算法。该套算法能提高缓存在阶段间的数据换入换出效率,更有效地优化集中存储负载,并提高应用访问的性能。实验表明,基于SSM的缓存管理方法能够将集中存储负载降低到传统缓存管理方法的2.0%-15.8%,平均响应时间降低到0.8%~15.2%。
- 郭明阳张永乐刘振晗刘振军许鲁
- 基于反馈机制的动态副本数量预测方法被引量:1
- 2011年
- 针对视频点播集群服务中对单一视频访问数量进行预测时,基于传统的历史信息加权方法产生的动态副本数量误差较大、点播集群负载均衡较差的问题,分析了传统方法预测误差产生的主要原因——对单一视频历史访问数量趋势信息的考虑缺失,并提出了一种基于反馈机制的动态副本数量预测方法。该方法在传统的基于历史信息加权方法的基础上,考虑了历史访问数量的趋势信息。对实际系统数据的模拟结果显示,在反馈系数等于1时,基于反馈机制可以使动态副本数量的平均预测错误率下降29.6%,峰值错误预测率下降42.9%。
- 石刘郭明阳刘浏沈玉良许鲁
- 关键词:负载均衡
- 数据访问模型的现状被引量:1
- 2015年
- 数据访问模型是系统性能理解和优化的先决条件,针对不同类的应用,提取出其共用的访问特征,可以提高访问模型的适用性。数据访问模型的研究主要是探索数据访问的规律,根据研究对象的不同,现有模型主要分为两类:微观模型和宏观模型。本文认为在大规模数据下,研究数据访问之间的宏观规律——访问相关性为优化系统性能提供了新的机会。
- 刘建亮郭明阳许鲁
- 关键词:数据访问数据模型
- 一种资源分配方法和系统
- 本发明提供一种资源分配方法和系统,首先申请资源,获取(blk_start,blk_len),在文件索引节点中增加(blk_offset,blk_start,blk_len)域;然后从预分配资源中获取资源记录到文件布局中,...
- 张军伟郭明阳张建刚
- 文献传递
- I/O访问相关性原理
- 作为数据访问的基本原理,局部性一直是以单个数据访问请求为研究对象,忽视了数据之间的一个重要规律:数据访问中存在一些数据会一起访问——访问相关性.而且,相关性是有强度的:一些数据元素之间的相关性比其他元素更紧密.通过对典型...
- 刘建亮杨琳郭明阳许鲁
- 关键词:数据访问输入输出
- 文献传递
- 一种资源分配方法和系统
- 本发明提供一种资源分配方法和系统,首先申请资源,获取(blk_start,blk_len),在文件索引节点中增加(blk_offset,blk_start,blk_len)域;然后从预分配资源中获取资源记录到文件布局中,...
- 张军伟郭明阳张建刚
- 文献传递
- 蓝鲸机群文件系统文件layout设计与实现被引量:2
- 2008年
- 维护文件逻辑位置到物理位置映射关系的文件布局是文件系统的重要组成部分。针对蓝鲸海量机群文件系统中文件的条带分布特性,分析了目前普遍采用的三级间接地址文件布局和扩展块段文件布局的优缺点。有效结合三级间接地址文件布局避免查询、直接映射的优点和扩展块段文件布局映射高效、空间占用少的优点,提出了一种新的固定长度扩展块段文件布局,并在小文件环境对其进行了优化改进,提出了幂次长度扩展块段文件布局。实验测试结果表明该文件布局可以有效适用于蓝鲸机群文件系统,达到了预期效果。该文件布局同样适用于其他采用条带机制的文件系统。
- 张军伟郭明阳张建刚许鲁
- 关键词:机群文件系统条带