张潇
- 作品数:2 被引量:12H指数:2
- 供职机构:西安交通大学电子与信息工程学院计算机科学与技术系更多>>
- 相关领域:自动化与计算机技术文化科学更多>>
- 高能物理大数据挑战与海量事例特征索引技术研究被引量:8
- 2017年
- 新一代高能物理实验装置的建成与运行,产生了PB乃至EB量级的数据,这对数据采集、存储、传输与共享、分析与处理等数据管理技术提出了巨大挑战.事例是高能物理实验的基本数据单元,一次大型实验即可产生万亿级的事例.传统高能物理数据处理以ROOT文件为基本存储和处理单位,每个ROOT文件可以包含数千至数亿个事例.这种基于文件的处理方式虽然降低了高能物理数据管理系统的开发难度,但物理分析仅对极少量的稀有事例感兴趣,这导致了数据传输量大、I?O瓶颈以及数据处理效率低等问题.提出一种面向事例的高能物理数据管理方法,重点研究海量事例特征高效索引技术.在这种方法中,将物理学家感兴趣的事例的特征量抽取出来建立专门的索引,存储在NoSQL数据库中.为便于物理分析处理,事例的原始数据仍然存放在ROOT文件中.最后,通过系统验证和分析表明,基于事例特征索引进行事例筛选是可行的,优化后的HBase系统可以满足事例索引的需求.
- 程耀东张潇王培建查礼侯迪齐勇马灿
- 关键词:高能物理数据管理HBASE查询优化
- SaaS模式下图书馆QR码应用与思考被引量:4
- 2015年
- 针对国内图书馆独立研发广泛开展的QR码服务现状,文章通过架构Saa S模式下共享QR服务,实现不同区域、不同图书馆管理系统下QR码在馆藏OPAC系统、读者培训、读者借书证等领域的具体应用。具体探讨了Saa S模式下浏览器QR码生成、QR码与图书馆馆藏书目系统的集成及借书证QR模块生成,对实现过程中图书馆基础设施配置、深度挖掘读者使用数据及页面布局等问题进行了深入思考。
- 李娟魏青山张潇韩萌杨峰
- 关键词:SAASQR码共享服务