浙江省教育厅科研计划(Y200907698)
- 作品数:3 被引量:1H指数:1
- 相关作者:于明远叶蕾黄庆藏俞栋辉梁荣华更多>>
- 相关机构:浙江工业大学更多>>
- 发文基金:浙江省自然科学基金浙江省教育厅科研计划国家自然科学基金更多>>
- 相关领域:自然科学总论自动化与计算机技术更多>>
- 基于Hadoop的房产信息服务的方法
- 2012年
- 针对大数据信息服务的运算效率的问题,提出一种基于Hadoop的房产信息服务方法,设计并实现了一个房产信息服务原型系统.使用Hadoop搭建分布式文件系统,在该文件系统之上使用RCFile对数据进行存储管理.此外,在该系统中集成数据索引、数据压缩等技术,并提出一种SQL高效查询机制——SQL-JM,将SQL查询转变成MapReduce作业,提高查询效率.前端使用一些信息可视化技术,如Treemap,StreamGraph,折线图等对数据进行直观展示.用户通过浏览器登录该系统后,可以申请并使用相关房产信息服务.Hive,HadoopDB,MySQL等数据库系统的查询对比实验验证了该系统能提高查询效率.
- 俞栋辉于明远叶蕾梁荣华
- 关键词:HADOOP查询优化数据管理
- 基于云计算环境的医学信息集成被引量:1
- 2011年
- 随着计算机设备在医学图像领域的大量应用和数字图像技术的快速发展,医学影像信息数据量急剧增长。如何有效地集成、管理和分析规模如此大的医学数据,仍是一大挑战。本文提出一种基于云计算技术的医学信息集成方法,将分布式数据存储和并行计算技术应用到医学信息集成中,用以实现离散的医学信息系统中各类异构医学数据信息的集成、共享、有效整合及应用。在此方法的基础上,构建了一个医学信息整合中心原型,并对集成方法的有效性进行了验证。
- 叶蕾黄庆藏于明远俞栋辉
- 关键词:云计算MAPREDUCE
- 面向异构集群的作业调度与资源分配研究
- 2012年
- 提出一种面向异构集群的作业调度与资源分配策略,在异构资源实时监控的基础上,实现了作业的有效调度,进而在作业执行阶段,采用基于二部图的最小权匹配的资源分配算法,实现异构资源到执行任务的合理部署与配置.以医学科学计算为背景,搭建了异构云计算环境,并进行了仿真实验.实验结果显示:提出的算法实现了预期的目标,有效弥补了现有同构作业调度算法的缺陷与不足.
- 刘希伟叶蕾于明远梁荣华黄庆藏
- 关键词:云计算作业调度异构集群资源分配