陈希林
- 作品数:3 被引量:4H指数:1
- 供职机构:中国人民公安大学更多>>
- 相关领域:自动化与计算机技术政治法律更多>>
- 针对微博信息分析的HBase 存储结构设计
- 随着互联网的发展,微博对人们生活的影响日益加深。由于微博用户的激增,微博数据量已经非常庞大,且每时每刻都在急速增长。面对这种形势,传统数据库对于海量数据的处理效率已经难以满足需求,于是NoSQL 数据库应运而生。文章采用...
- 陈希林马丁
- 关键词:HADOOPNOSQLHBASE
- 基于Hadoop的电子证据保全平台的研究与实现
- 信息化进程的不断推进使涉及到电子证据的案件越来越多,从网购退款到电信诈骗,这些案件的办理都需要电子证据的支撑。然而与之相对的却是目前并不清晰的电子证据相关法律法规,并且电子证据本身的数字性和脆弱性使其非常容易被篡改或损毁...
- 陈希林
- 关键词:HADOOPHBASE
- 文献传递
- 针对微博信息分析的HBase存储结构设计被引量:4
- 2016年
- 随着互联网的发展,微博对人们生活的影响日益加深。由于微博用户的激增,微博数据量已经非常庞大,且每时每刻都在急速增长。面对这种形势,传统数据库对于海量数据的处理效率已经难以满足需求,于是NoSQL数据库应运而生。文章采用的HBase是目前比较受欢迎的开源NoSQL之一。作为依赖于HDFS分布式存储架构的新型NoSQL数据库,HBase不仅能满足高效的结构化数据存储,并通过Mapreduce实现高效处理,还能存储非结构化数据,为海量数据提供相对灵活的信息存储管理。最重要的是,HBase的集群扩展起来非常方便,只需要增加Slave节点机器即可,比传统数据库的读写分离、分表等扩展操作要简便得多。文章研究了针对微博信息的HBase行键设计,从深度信息、广度信息等不同角度探讨行键的设计,并通过二级索引改善HBase的查询效率。在不更改HBase源代码的前提下,文章解决了信息查询在很大程度上受到行键设计制约的问题,并充分考虑了适用于微博图片、链接等信息的存储方式,满足微博信息的高效管理。
- 陈希林马丁
- 关键词:HADOOPNOSQLHBASE