申林
- 作品数：4 被引量：1H指数：1
- 供职机构：北京大学更多>>
- 发文基金：国家自然科学基金国家科技重大专项更多>>
- 相关领域：自动化与计算机技术电子电信更多>>
- 一种数据并行批量导入只读查询系统的方法及系统
- 本发明涉及一种数据并行批量导入只读查询系统的方法及系统，系统由协调器，Hadoop驱动程序模块与线上查询系统驱动模块组成，方法为：1）接收原始特征数据请求，并转发到Hadoop进行处理；2）根据节点映射规则在Hadoop...
- 申林薛继龙杨智代亚非
- 文献传递
- 一种数据并行批量导入只读查询系统的方法及系统
- 本发明涉及一种数据并行批量导入只读查询系统的方法及系统，系统由协调器，Hadoop驱动程序模块与线上查询系统驱动模块组成，方法为：1）接收原始特征数据请求，并转发到Hadoop进行处理；2）根据节点映射规则在Hadoop...
- 申林薛继龙杨智代亚非
- 文献传递
- 面向移动业务数据的高效存储系统研究
- 移动网络的快速发展正在逐步改变着人们的生活。随着移动带宽的增长和移动终端的普及，越来越多的数据从移动设备产生。这些移动数据有不同于互联网的新特性，比如数据普遍较小但产生频繁、包含地理位置等隐私信息，需有不同于互联网系统的...
- 申林
- 关键词：并行处理数据划分
- IncGraph:支持实时计算的大规模增量图处理系统被引量：1
- 2013年
- 随着社交网络的流行,越来越多的相关应用要求能够实时地在大规模社会网络图上进行分析和计算。而目前的图处理系统,如Google的Pregel,是全局、批量处理的图处理系统,并不能实现对图的实时计算。因此,提出了一种新的图增量处理模型,当一个节点发生变化时,只需要以传播的方式更新局部范围内受影响节点。它本质上将传统的批量全局计算模型,转化成一系列的增量的、局部的图计算,保证对图变化的实时处理,并通过避免没有更新节点的重复计算来降低开销。基于这种新的图计算模型,设计了一个低开销、实时的图处理系统——IncGraph,它通过图切分技术将计算局部化,保证了计算的低开销,同时利用主动计算触发和反向链式更新技术,保证了计算的实时性和可靠性。利用真实的社交网络数据证明了IncGraph的低开销、实时性和扩展性。IncGraph的提出会为社交网络应用提供更为灵活的计算框架。
- 申林薛继龙曲直杨智代亚非
- 关键词：图切分
