一种基于ANTLR的MongoDB数据库SQL转化模型 被引量：9

1

作者 李常青 谷建华 《西北工业大学学报》 EI CAS CSCD 北大核心 2017年第1期143-147,共5页

作为非关系型数据的典型存储和管理模型,NoSQL(not only structured query language)技术随着大数据发展浪潮已成为研究热点之一。通过对著名NoSQL数据库MongoDB特点的分析,针对其缺乏SQL(structured query language)访问接口的不足,提... 作为非关系型数据的典型存储和管理模型,NoSQL(not only structured query language)技术随着大数据发展浪潮已成为研究热点之一。通过对著名NoSQL数据库MongoDB特点的分析,针对其缺乏SQL(structured query language)访问接口的不足,提出了一种基于ANTLR的MongoDB数据库SQL转化模型,并重点研究了该模型的分层构成、SQL解析、语义转换以及运行机制。基于该模型,设计开发了原型系统,对该模型的效果进行了验证,达到了预期的目标。这一研究成果的突出贡献在于,它可以使得软件开发人员对MongoDB数据库的学习曲线变得平坦,减少了编制程序的工作量,提高了软件的开发效率。 展开更多

关键词 sql no sql Mongo DB 大数据 转化模型 ANTLR

下载PDF 职称材料

云环境下图数据库建模技术及其应用研究 被引量：12

2

作者 邱胜海 王云霞 +1 位作者 樊树海 贾晓林 《计算机应用研究》 CSCD 北大核心 2016年第3期794-797,共4页

针对云环境下传统关系型数据库在大数据库建模方面存在的问题,描述了一种全新的能适应云计算环境建模的图数据库,定义了图数据库模型的基本概念,给出了图数据库建模元素及组织形式,在关系型数据库概念模型建模理论及方法的基础上提出了... 针对云环境下传统关系型数据库在大数据库建模方面存在的问题,描述了一种全新的能适应云计算环境建模的图数据库,定义了图数据库模型的基本概念,给出了图数据库建模元素及组织形式,在关系型数据库概念模型建模理论及方法的基础上提出了图数据库建模的若干规则和方法。以图数据库Neo4j为例,详细描述了现代物料入库管理图数据库的建模过程,并应用Cypher语言实现了该系统模型的增加、删除、更改、查询及统计功能。实践结果表明,图数据库建模技术能使构造的模型语义表达更丰富,更具简易性和可扩展性等优点,对开发基于图模型的智能管理信息系统能够提供一定的参考依据。 展开更多

关键词 云计算 概念模型 图数据库模型 Cypher语言 非关系型数据库 物料入库管理信息系统

下载PDF 职称材料

分布式数据库聚合计算性能优化 被引量：10

3

作者 肖子达 朱立谷 +1 位作者 冯东煜 张迪 《计算机应用》 CSCD 北大核心 2017年第5期1251-1256,共6页

针对分布式数据库在分析应用方面的聚合计算性能较低的问题,以MongoDB数据库为研究实例,提出了一种基于片键和索引的数据库性能提升方法。首先,通过分析业务特征指导选择的片键字段,该字段需要保证数据在分片节点上的均匀布局;其次,通... 针对分布式数据库在分析应用方面的聚合计算性能较低的问题,以MongoDB数据库为研究实例,提出了一种基于片键和索引的数据库性能提升方法。首先,通过分析业务特征指导选择的片键字段,该字段需要保证数据在分片节点上的均匀布局;其次,通过研究分布式数据库的索引效率,利用删除查询字段索引的方法进一步提升计算性能,该方法能充分利用硬件资源提高聚合计算的性能。实验结果表明,采用高基数粒度的分片片键能够让数据在集群上均匀地分布在各个数据节点上,而舍弃索引使用全表查询能够有效提高聚合计算的速度,聚合计算优化方法能够有效提高聚合计算的性能。 展开更多

关键词 no sql Mongo DB MAPREDUCE 聚合计算 性能优化

下载PDF 职称材料

Cassandra应用研究 被引量：6

4

作者 秦苻珂 《电脑知识与技术》 2016年第3X期14-16,共3页

该文介绍了No SQL数据库Cassandra的数据模型和部署方法,介绍了基于java语言和Thrift API的Cassandra应用的开发方法。

关键词 nosql 数据库 Cassandra JAVA Thrift API

下载PDF 职称材料

多种技术融合的图书馆分布式大数据存储技术研究 被引量：3

5

作者 贾文菲 刘丹 《单片机与嵌入式系统应用》 2020年第7期37-39,共3页

本文基于现有的关系型数据库存储技术、非关系型No SQL数据库以及常用的数字图书馆存储技术,提出一种新型的可用于数字图书馆的存储技术。整个存储系统的核心由实现数据操作的内存数据库、实现集中存储数据的关系型数据库、实现价格便... 本文基于现有的关系型数据库存储技术、非关系型No SQL数据库以及常用的数字图书馆存储技术,提出一种新型的可用于数字图书馆的存储技术。整个存储系统的核心由实现数据操作的内存数据库、实现集中存储数据的关系型数据库、实现价格便宜和数据提取功能的非关系型No SQL数据库组成。通过实验验证,该数据存储系统针对单个数据信息所消耗的时间为69.6 s,将5.4 TB量级的数据信息的处理时间换算为3小时42分钟,相对于普通的数据存储系统,在时间上节省了至少1小时。 展开更多

关键词 数字图书馆 大数据 存储技术 no sql

下载PDF 职称材料

基于MongoDB的蛋白质组学大数据存储系统设计 被引量：5

6

作者 张琳 谭军 白明泽 《计算机应用》 CSCD 北大核心 2016年第A01期232-236,共5页

蛋白质组学质谱数据具有关系复杂、数据量大、查询方式多样等一系列的特点。在研究蛋白质组学质谱数据时,传统的存储系统一般采用文件和关系型数据库存储数据,往往需要预定义数据表结构,难以实现动态增加多样化蛋白质组信息的功能。此外... 蛋白质组学质谱数据具有关系复杂、数据量大、查询方式多样等一系列的特点。在研究蛋白质组学质谱数据时,传统的存储系统一般采用文件和关系型数据库存储数据,往往需要预定义数据表结构,难以实现动态增加多样化蛋白质组信息的功能。此外,关系型数据库的集群架构关系复杂,维护成本高,代码处理也复杂。为解决传统存储系统在海量蛋白质组学数据的存储和访问的效率瓶颈问题,应用No SQL非关系型数据库,提出了一种基于Mongo DB分布式数据库存储结构的蛋白质组学数据存储系统设计方案。通过系统的功能测试、性能测试,结果表明,随着数据量和访问量的上升,Mongo DB显示出了更高的性能和更快的处理速度,该平台能够改善传统的文件存储和关系数据库存储所暴露的部分性能问题。 展开更多

关键词 蛋白质组学 大数据 Mongo DB no sql 关系数据库

下载PDF 职称材料

基于MongoDB的空间搜索引擎设计及优化方法 被引量：4

7

作者 潘国富 《测绘通报》 CSCD 北大核心 2021年第8期162-165,共4页

本文介绍了非关系型数据库MongoDB的空间查询功能,针对海量用户并发服务的应用场景,提出了一种空间近邻信息查询引擎的优化策略。该策略根据短时间内空间数据内容变化较小及相邻位置搜索结果相似度高的特征,利用格网化机制实现在等效查... 本文介绍了非关系型数据库MongoDB的空间查询功能,针对海量用户并发服务的应用场景,提出了一种空间近邻信息查询引擎的优化策略。该策略根据短时间内空间数据内容变化较小及相邻位置搜索结果相似度高的特征,利用格网化机制实现在等效查询结果前提下数据库操作次数减少;同时利用内存缓冲机制减少磁盘I/O读写次数,从而显著提高系统的并发数及查询速度。测试结果表明,在相同硬件设施条件下,优化后搜索引擎的效率比原生系统提高了近50倍。 展开更多

关键词 空间查询 非关系型数据库 MONGODB 位置服务

下载PDF 职称材料

基于Hadoop平台的海量数据高效抽取方法及应用 被引量：4

8

作者 徐金玲 金璐 +3 位作者 李昆明 熊政 仲春林 方超 《电子测试》 2015年第1期114-116,共3页

本文从数据抽取过程的本质出发,论述了传统数据抽取过程与大数据平台数据抽取过程的异同,以基于Hadoop的大数据平台为例,结合传统的关系型数据库和非关系型数据库(No SQL)的特点,提出了一种从关系型数据库到大数据平台的高效数据抽取方... 本文从数据抽取过程的本质出发,论述了传统数据抽取过程与大数据平台数据抽取过程的异同,以基于Hadoop的大数据平台为例,结合传统的关系型数据库和非关系型数据库(No SQL)的特点,提出了一种从关系型数据库到大数据平台的高效数据抽取方法,实现了对数据源系统资源占用的最小化,并在电力公司用电大数据抽取中得到广泛应用。 展开更多

关键词 海量数据 数据抽取 nosql 大数据平台

下载PDF 职称材料

基于Neo4j的网络化协作加工设备资源建模方法研究 被引量：4

9

作者 赵旭 唐健均 谭清中 《现代制造工程》 CSCD 北大核心 2018年第2期55-63,共9页

针对网络化协作加工过程中制造资源地域分散、功能异构、管理自治和知识演化的特点,以及制造资源有效集成与共享的迫切需求,分析了网络化协作环境下加工设备资源的建模需求及属性特征,建立了一种基于图形数据库技术(Neo4j)的网络化协作... 针对网络化协作加工过程中制造资源地域分散、功能异构、管理自治和知识演化的特点,以及制造资源有效集成与共享的迫切需求,分析了网络化协作环境下加工设备资源的建模需求及属性特征,建立了一种基于图形数据库技术(Neo4j)的网络化协作加工设备资源建模实现框架,并对其所涉及的基于Neo4j的网络化协作加工设备图形数据库模型、基于Cypher语言的设备属性语义描述方法和基于遍历方式的设备信息搜索方法等关键技术进行了研究。最后,用一个实例对该建模方法进行了应用验证。 展开更多

关键词 网络化制造 设备资源 建模 图形数据库技术 no sql

下载PDF 职称材料

云计算的网络教学数据库安全技术研究 被引量：1

10

作者 薛淑敏 张雪亚 《电脑知识与技术》 2018年第4X期6-8,共3页

网络教学很大程度上可以实现教学资源的整合与共享,弥补传统教学方式的不足,有效地提高教学质量。基于云计算的网络教学模式,用户失去了对数据的控制权,数据安全问题成为用户首要解决问题。因此,提出了基于云计算的网络教学平台数据安... 网络教学很大程度上可以实现教学资源的整合与共享,弥补传统教学方式的不足,有效地提高教学质量。基于云计算的网络教学模式,用户失去了对数据的控制权,数据安全问题成为用户首要解决问题。因此,提出了基于云计算的网络教学平台数据安全保护技术的研究。主要采用No SQL数据库和基于三方口令认证秘钥交换协议,保证了数据库的安全性。No SQL抛弃了关系数据库的规范化理论,采用无模式的方法进行数据建模,主要目的是弥补关系数据库的不足之处;基于三方口令认证秘钥交换协议方案主要通过密码学方法对口令进行保护。此方案简单易用,可以基本上实现用户和网络平台之间安全、高效的双向认证。 展开更多

关键词 云计算 网络教学 数据库安全 no sql

下载PDF 职称材料

云计算技术中的关键性数据库技术 被引量：3

11

作者 张土前 《电子技术与软件工程》 2019年第22期142-143,共2页

本文对云计算技术、NOSQL技术进行简单总结,分析以云计算技术为核心机房资产管理系统的数据库技术,并以案例说明其应用价值。

关键词 云计算技术 数据库技术 no sql

下载PDF 职称材料

基于NoSQL数据库的大数据处理分析

12

作者 赵鑫 《电脑知识与技术（过刊）》 2015年第4X期26-27,共2页

随着互联网的急速发展和云计算的大范围普及,我们生活的环境正在经历着大规模的数据爆炸,海量的数据在迅速的增长和积累,我们已经步入了大数据的时代。面对如此庞大的数据量,传统的关系数据库存储的硬盘已经无法承受各种需求,对于高访... 随着互联网的急速发展和云计算的大范围普及,我们生活的环境正在经历着大规模的数据爆炸,海量的数据在迅速的增长和积累,我们已经步入了大数据的时代。面对如此庞大的数据量,传统的关系数据库存储的硬盘已经无法承受各种需求,对于高访问和高存储的海量数据也无法满足其高效率的要求,对于改善服务器对于高扩展性和高可用性的缺陷问题,No SQL这种数据库变营运而生,对于大数据的处理起着至关重要的作用。该文将从No SQL的相关内容进行阐述,进而提出基于No SQL数据库的大数据处理的分析。 展开更多

关键词 no sql 数据库 大数据 数据处理

下载PDF 职称材料

基于NoSQL的PDM零件非几何信息存储策略 被引量：1

13

作者 夏秀峰 郭洋 《沈阳航空航天大学学报》 2015年第2期61-66,共6页

MBD技术在制造业上的应用,使现有PDM系统中存在着大量RDB难以处理的非结构化数据。提出了一种PDM混合数据存储策略,用RDB存储零件的描述信息,而其实际内容则用NoSQL数据库存储。该方案不仅可以利用RDB的结构化特点来方便查询与统计,还... MBD技术在制造业上的应用,使现有PDM系统中存在着大量RDB难以处理的非结构化数据。提出了一种PDM混合数据存储策略,用RDB存储零件的描述信息,而其实际内容则用NoSQL数据库存储。该方案不仅可以利用RDB的结构化特点来方便查询与统计,还能充分利用No SQL灵活的存储结构较快处理非结构化数据。实验结果表明,该策略可以有效的提升查询速度,降低数据的存储空间。 展开更多

关键词 产品数据管理 非几何信息 存储策略 非结构化数据 no sql技术

下载PDF 职称材料

基于NoSQL的全文检索系统研究 被引量：1

14

作者 吕琼帅 张国平 《电子设计工程》 2014年第22期49-51,55,共4页

在大数据背景下为了提高全文检索效率,提出了一种基于No SQL技术的全文检索系统设计方案。该系统在架构时采用了分层的设计思想,上层应用层利用Mem Cache的快速处理优势来提高用户的响应速度,中间服务层利用异步通讯机制和规则库来对事... 在大数据背景下为了提高全文检索效率,提出了一种基于No SQL技术的全文检索系统设计方案。该系统在架构时采用了分层的设计思想,上层应用层利用Mem Cache的快速处理优势来提高用户的响应速度,中间服务层利用异步通讯机制和规则库来对事件进行处理,底部的数据持久化层则使用将索引文件分开存放的方式来提高I/O速度。通过实验表明,该系统比仅采用Lucene的全文检索系统具有较快的响应速度。 展开更多

关键词 no sql 全文检索 MEM CACHE LUCENE 分层设计

下载PDF 职称材料

谈谈移动互联网时代中的计费系统发展方向

15

作者 陈心咏 《福建电脑》 2014年第11期90-91,共2页

本文结合移动互联网时代的特点,从业务需求、技术发展等多个方面阐述了传统电信计费系统的未来发展方向,力求使得电信计费系统在发挥自身优势的前提下,更加适应时代的进步,焕发新的能量和活力。

关键词 虚拟计费系统租赁 no sql 余额管理中心 统一支付 云计费终端

下载PDF 职称材料

基于互联网环境下对高校师生信息反馈平台的研究

16

作者 毕明洋 冯棡 戎杰 《河北企业》 2016年第11期132-133,共2页

随着我国高等教育现代化步伐的迈进,对高校民主的要求也日益迫切,结合现下"互联网+"的时代背景,利用互联网解决问题的方式成为必然趋势。通过研究国内高校民主管理的现象,发现越来越多的师生员工希望自己在大学的管理中拥有... 随着我国高等教育现代化步伐的迈进,对高校民主的要求也日益迫切,结合现下"互联网+"的时代背景,利用互联网解决问题的方式成为必然趋势。通过研究国内高校民主管理的现象,发现越来越多的师生员工希望自己在大学的管理中拥有知情权和话语权,由此采用了SOA(面向服务)的架构,设计了响应式的Web界面,并利用No SQL非结构化数据及多媒体的支持,设计出了高校师生信息反馈平台,主要为师生对学校反馈意见提供服务。它的主要功能包括提供师生及意见对应部门信息交流的平台、对现有数据进行监控并对平台信息的统计分析、对师生反馈及部门答复进行公开处理等内容。它较之于往日纸质意见反馈的资源浪费及数据统计的繁复冗杂,更为有效地将现实需求与实际开发联系起来,且其支持移动终端,有利于师生随时随地进行信息反馈,为全院师生提供了便利。 展开更多

关键词 互联网+ SOA no sql 移动终端 师生信息反馈

下载PDF 职称材料

基于MongoDB的社区论坛设计与研究

17

作者 杨卫平 张子頔 《电脑知识与技术（过刊）》 2015年第8X期7-10,共4页

现有基于SQL数据库设计社区论坛在面对海量数据和大量并发用户访问时显得力不从心,使用一种全新的架构解决此问题变得迫在眉睫。该文研究了基于MongoDB的社区论坛,采用NoSQL文档型数据库作为数据库存储数据,实现了论坛所具备的发帖、留... 现有基于SQL数据库设计社区论坛在面对海量数据和大量并发用户访问时显得力不从心,使用一种全新的架构解决此问题变得迫在眉睫。该文研究了基于MongoDB的社区论坛,采用NoSQL文档型数据库作为数据库存储数据,实现了论坛所具备的发帖、留言、用户管理等基本功能,在处理海量数据和大量访问时论坛性能表现良好。 展开更多

关键词 MONGODB nosql 社区论坛

下载PDF 职称材料

海量结构化数据存储检索系统 被引量：31

18

作者 吴广君 王树鹏 +1 位作者 陈明 李超 《计算机研究与发展》 EI CSCD 北大核心 2012年第S1期1-5,共5页

Big Data是近年在云计算领域中出现的一种新型数据,传统关系型数据库系统在数据存储规模、检索效率等方面不再适用.目前的分布式No-SQL数据库可以提供分布式数据存储环境,但是无法支持多列查询.设计并实现分布式海量结构化数据存储检索... Big Data是近年在云计算领域中出现的一种新型数据,传统关系型数据库系统在数据存储规模、检索效率等方面不再适用.目前的分布式No-SQL数据库可以提供分布式数据存储环境,但是无法支持多列查询.设计并实现分布式海量结构化数据存储检索系统(MDSS).系统采用列存储结构,采用集中分布式B+Tree索引和局部索引相结合的方法提高检索效率.在此基础上讨论复杂查询条件的任务分解机制,支持大数据的多属性检索、模糊检索以及统计分析等查询功能.实验结果表明,提出的分布式结构化数据管理技术和查询任务分解机制可以显著提高分布式条件下大数据集的查询效率,适合应用在日志类数据、流记录数据等海量结构化数据的存储应用场合. 展开更多

关键词 大数据 HADOOP 数据检索 no-sql数据库 海量数据存储

下载PDF 职称材料

基于NoSQL的RDF数据存储与查询技术综述 被引量：21

19

作者 王林彬 黎建辉 沈志宏 《计算机应用研究》 CSCD 北大核心 2015年第5期1281-1286,共6页

随着语义网的发展和RDF(resource description framework,资源描述框架)数据量的快速增长,利用NoSQL数据库存储和管理大规模RDF数据已经成为了当前的研究热点。介绍了No SQL数据库的种类划分和各类型特点,阐述了RDF数据在各类No SQL数... 随着语义网的发展和RDF(resource description framework,资源描述框架)数据量的快速增长,利用NoSQL数据库存储和管理大规模RDF数据已经成为了当前的研究热点。介绍了No SQL数据库的种类划分和各类型特点,阐述了RDF数据在各类No SQL数据库中存储结构设计和并行查询算法的研究现状,分析比较了不同方法的优缺点。最后,讨论了利用No SQL数据库管理RDF的优势,总结了现有研究的不足之处,并展望了未来的研究方向。 展开更多

关键词 资源描述框架 nosql数据库 数据模型 存储结构设计 RDF并行查询算法

下载PDF 职称材料

基于LabVIEW电机转子转动惯量在线测量系统设计 被引量：2

20

作者 郭帆 许华杰 《装备制造技术》 2014年第7期148-150,共3页

为了准确测量电机转子的转动惯量,采用空载减速法,以图形化编程语LabVIEW8.6为开发平台,开发设计出一套电机转子转动惯量的测量系统。该系统选用固高gts800运动控制卡实现对电机的控制,NIUSB-621x高速数据采集卡将采集到的信号传送到PC... 为了准确测量电机转子的转动惯量,采用空载减速法,以图形化编程语LabVIEW8.6为开发平台,开发设计出一套电机转子转动惯量的测量系统。该系统选用固高gts800运动控制卡实现对电机的控制,NIUSB-621x高速数据采集卡将采集到的信号传送到PC机,由LabVIEW测量系统对数据进行转换、曲线拟合处理和计算,实现数据的实时获取、显示,并将SQL数据库技术引入到转动惯量测量系统软件开发中,以方便测量数据的管理。该系统满足了电机转子转动惯量测量试验的要求,对于在线电机转子转动惯量的测量有着重要现实意义。 展开更多

关键词 电机转子转动惯量 空载减速 LABVIEW sql数据库

下载PDF 职称材料