期刊文献+
共找到3篇文章
< 1 >
每页显示 20 50 100
基于NoSQL数据库的大数据查询技术的研究与应用 被引量:28
1
作者 朱建生 汪健雄 张军锋 《中国铁道科学》 EI CAS CSCD 北大核心 2014年第1期135-141,共7页
基于NoSQL数据库理论,根据应用场景的不同,将NoSQL数据库分为面向高性能读写、面向文档和面向分布式计算的3种类型。对比分析这3种类型数据库的6种代表产品的优缺点,结合铁路客票实名制售票信息综合分析系统中的大数据操作的需求,选用No... 基于NoSQL数据库理论,根据应用场景的不同,将NoSQL数据库分为面向高性能读写、面向文档和面向分布式计算的3种类型。对比分析这3种类型数据库的6种代表产品的优缺点,结合铁路客票实名制售票信息综合分析系统中的大数据操作的需求,选用NoSQL数据库中的面向分布式计算的Cassandra数据库。基于Cassandra数据库,提出铁路客票实名制信息综合分析系统的技术架构,并设计反向索引以构建客票实名制乘车信息的查询策略和查询流程。通过性能测试,验证了NoSQL数据库技术在处理大数据查询和分析中的高可用性,可突破传统关系型数据库和数据仓库在应用中所遇到的查询性能、扩展性以及投资成本的瓶颈。 展开更多
关键词 NOSQL数据库 cassandra数据库 数据处理 反向索引 数据查询
下载PDF
面向Cassandra数据库的高效动态数据管理机制 被引量:7
2
作者 王博千 于齐 +3 位作者 刘辛 沈立 王志英 陈微 《计算机科学》 CSCD 北大核心 2016年第7期197-202,共6页
Cassandra数据库是当前通用的数据库之一,同时也被Apache列为重点发展的顶级项目。针对Cassandra分布式数据库系统而言,大量的写请求会造成过多分散的SStable结构以及过高的数据冗余度,进而造成用户读取请求响应速度下降。该问题可以通... Cassandra数据库是当前通用的数据库之一,同时也被Apache列为重点发展的顶级项目。针对Cassandra分布式数据库系统而言,大量的写请求会造成过多分散的SStable结构以及过高的数据冗余度,进而造成用户读取请求响应速度下降。该问题可以通过系统自动触发的局部数据合并机制或人为干预的整体数据合并机制来解决。然而,不合时机的系统自动局部合并过程会严重降低用户正在执行的读取操作的性能,而过长时间的人为整体数据合并过程又会长时间地占用系统资源,严重制约系统的整体性能。针对此问题,提出了一种面向Cassandra数据库的动态数据管理机制。首先,实时监测系统环境,将数据按照写入时间和大小进行分层分级管理,对合并的时机、参与合并的文件及合并过程分别制定相应的执行策略;其次,通过特定优化手段减少数据的合并时间,以降低合并过程对系统性能的影响。测试结果表明,该管理机制优化了Cassandra数据库的合并过程,提升了系统整体的读取响应速度。 展开更多
关键词 cassandra数据库 动态数据管理 合并策略 读取响应速度
下载PDF
HIRFL-CSRm电源监测系统 被引量:3
3
作者 葛良 张玮 +3 位作者 安石 安敬蕊 王鹏鹏 常建军 《强激光与粒子束》 EI CAS CSCD 北大核心 2019年第2期93-97,共5页
电源监测系统为兰州重离子加速器装置(HIRFL)机器研究、自动调束、深度学习提供重要的实时数据,在对HIRFL进行EPICS升级过程中,重新设计电源监测系统,采用分布式的设计布局,形成一种由上层、中间件、底层构成的拓展架构,实现上层数据的... 电源监测系统为兰州重离子加速器装置(HIRFL)机器研究、自动调束、深度学习提供重要的实时数据,在对HIRFL进行EPICS升级过程中,重新设计电源监测系统,采用分布式的设计布局,形成一种由上层、中间件、底层构成的拓展架构,实现上层数据的中间件处理、下层参数的中间件统一下发,避免上层非法参数对下层设备的不利影响,简化下层异常的处理;为了调束方便,整合显示界面,优化不同功能界面上大数据量显示的难题,提高显示的流畅度;为了完成数据的后台分析,搭建非关系型数据库集群,实现重要数据多副本、实时数据分片多节点存储,提高数据安全性及数据库读写速度,避免复杂的数据库表结构设置,拓展数据库集群优化及节点增加。 展开更多
关键词 电源监测 数据采集 数据库 EPICS cassandra数据库
下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部