刘备
- 作品数：2 被引量：21H指数：2
- 供职机构：武汉理工大学计算机科学与技术学院更多>>
- 发文基金：湖北省自然科学基金更多>>
- 相关领域：自动化与计算机技术更多>>
- Spark Streaming动态资源分配策略被引量：6
- 2017年
- 针对Spark Streaming作为混合大数据计算平台流处理组件时资源调整周期长和不能满足多应用多用户个性化需求的问题,提出了一种多应用下动态资源分配策略(DRAM)。该策略增加了应用全局变量来控制动态资源分配过程。首先,获取历史执行数据反馈和应用全局变量;然后,进行资源增减计算;最后,进行资源增减执行。实验结果表明,所提策略能够有效调整应用资源配额,且在稳定数据流和不稳定数据流两种情况下,其处理延时相比原Spark平台的Streaming策略和Core策略都有所降低;同时该策略也能够提高集群资源利用率。
- 刘备谭新明曹文彬
- 关键词：SPARK实时数据流动态资源分配
- 基于事件驱动的高性能WebSocket服务器的设计与实现被引量：15
- 2018年
- 近年来即时通信在Internet上得到了越来越广泛的应用,传统服务器所遵循的"拉取"方式并不能很好地满足实际应用中信息获取实时性、用户请求高并发等方面的需求。为了改善上述问题,以"推送"方式进行实时消息传递成为研究热点。通过采用WebSocket技术,以Node.js、Redis、RabbitMQ等开源项目为基础,设计实现一个WebSocket服务器,能够对大量不同用户的订阅请求提供实时消息推送服务,并改进了Node.js多进程管理模块。实验结果表明,单个WebSocket服务器在处理1000以上的并发连接时,错位率在1.52%左右,有效地实现了WebSocket服务器的高并发与稳定性。
- 曹文彬谭新明刘备刘传文
- 关键词：异步I/O稳定性
