基于MySQL的数据管理系统设计与实现 被引量：38

1

作者 苟文博 于强 《电子设计工程》 2017年第6期62-65,共4页

为解决实践十号卫星有效载荷地面实验过程中实验数据统一管理的问题,文中设计了基于MySQL的数据管理平台。针对实验装置本身的特点提出了一种数据管理方法 ,采用MySQL数据库存储解析后的实验数据,实现实验装置地面实验过程的监控以及实... 为解决实践十号卫星有效载荷地面实验过程中实验数据统一管理的问题,文中设计了基于MySQL的数据管理平台。针对实验装置本身的特点提出了一种数据管理方法 ,采用MySQL数据库存储解析后的实验数据,实现实验装置地面实验过程的监控以及实验数据的查询统计分析,以图线和表格两种方式显示查询结果。实验结果表明,该数据管理系统能够精确解析实验数据,方便实验人员查询分析实验数据、修改解析参数。 展开更多

关键词 数据管理系统 数据解析 数据库 C#

下载PDF 职称材料

基于网络爬虫技术的健康医疗大数据采集整理系统 被引量：31

2

作者 卞伟玮 王永超 +5 位作者 崔立真 郭伟 李晖 周苗 薛付忠 刘静 《山东大学学报（医学版）》 CAS 北大核心 2017年第6期47-55,共9页

目的快速、准确地获得公共卫生服务系统的医疗数据,并进行数据整理,为建立人群健康风险评估模型提供数据基础。方法运用聚焦网络爬虫技术,设计算法并编程,在自动记录和修正URL异常、原始数据存档、保持登录方式3个方面进行算法改进。将... 目的快速、准确地获得公共卫生服务系统的医疗数据,并进行数据整理,为建立人群健康风险评估模型提供数据基础。方法运用聚焦网络爬虫技术,设计算法并编程,在自动记录和修正URL异常、原始数据存档、保持登录方式3个方面进行算法改进。将设计好的爬虫应用于爬取已获得授权网站的医疗数据,通过医学数据库系统,对数据进行解析、整理与导出。结果获得多个公共卫生服务基地数据,为当地政府部门提供数据分析报告,利用整理分析的数据完成多项健康风险评估模型建立。结论基于网络爬虫技术建立的数据采集整理系统,可以解决获取及整理网络许可数据的难题,将此技术应用于医药卫生领域,可使现有丰富的医学数据资源得以充分利用并提高利用效率。 展开更多

关键词 网络爬虫 数据库系统 聚焦爬虫 数据采集 数据解析 数据整理

原文传递

基于键-值缓存的IFC模型Web应用技术 被引量：18

3

作者 刘强 张建平 胡振中 《清华大学学报（自然科学版）》 EI CAS CSCD 北大核心 2016年第4期348-353,359,共7页

近年来,基于工业基础类(IFC)标准的建筑信息模型(BIM)应用技术得到快速发展,但现有的技术和方法难以支持面向互联网的IFC模型对象传输和查询等应用。为实现IFC模型在Web中的应用,该文使用JSON格式建立了一种面向网络的IFC对象模型,使用... 近年来,基于工业基础类(IFC)标准的建筑信息模型(BIM)应用技术得到快速发展,但现有的技术和方法难以支持面向互联网的IFC模型对象传输和查询等应用。为实现IFC模型在Web中的应用,该文使用JSON格式建立了一种面向网络的IFC对象模型,使用分布式的键-值存储系统Redis建立了IFC数据的高速缓存,并基于以上对象模型和缓存技术提出了IFC数据的分步、动态解析方法,实现了大容量IFC数据的轻量化、标准化的网络传输和高速动态解析。验证表明:该模型和技术可以支持面向互联网的BIM应用,并且能够大幅提升IFC数据文件的解析效率,可将大容量(超过30MB)IFC文件的解析速度提升1倍以上,具有较高的使用价值和应用前景。 展开更多

关键词 工业基础类(IFC)标准 建筑信息模型(BIM) 键-值缓存 数据解析 模型轻量化

原文传递

田间作物高通量表型信息获取与分析技术研究进展 被引量：18

4

作者 程曼 袁洪波 +1 位作者 蔡振江 WANG Ning 《农业机械学报》 EI CAS CSCD 北大核心 2020年第S01期314-324,共11页

田间作物表型信息获取种类、数量以及信息处理与分析方法对于发现有价值的表型特性并确定其遗传因素有着重要影响,而传统的田间表型信息获取方法依赖于研究人员的人工采样测量,不但费时费力,还存在效率低和主观性强等缺点。为解决这一问... 田间作物表型信息获取种类、数量以及信息处理与分析方法对于发现有价值的表型特性并确定其遗传因素有着重要影响,而传统的田间表型信息获取方法依赖于研究人员的人工采样测量,不但费时费力,还存在效率低和主观性强等缺点。为解决这一问题,田间作物高通量表型信息获取及分析技术成为了当前植物表型领域的一个研究热点。目前,表型研究主要集中在3个方面:传感器、平台和信息分析。本文从这3个方面阐述国内外田间作物高通量表型信息获取及分析技术的最新研究成果,分析表型信息获取技术中常用传感器的应用范围和使用限制条件以及不同表型信息获取平台的优缺点,总结表型信息分析的方法,提出使用时需要根据具体情况,综合考虑实际需求以及经济合理性选择和设计。最后展望田间作物表型研究未来的发展方向,将集中在多类型数据融合、数据标准化管理、多学科知识整合等方面。该项研究成果对推广田间表型信息获取技术和分析方法、促进表型研究和遗传育种研究的深入融合提供了理论参考和技术支撑。 展开更多

关键词 田间作物 高通量表型 信息获取 数据分析

下载PDF 职称材料

一种便携式多体征参数监护系统的设计及实现 被引量：15

5

作者 戴明 王琪 +2 位作者 吴万庆 陈昳丽 李春月 《电子技术应用》 北大核心 2015年第2期78-81,共4页

采用模块化设计的方法,设计并实现了一种便携式实用新型医疗健康监护系统。系统由人体生理参数采集电路、微控制电路和系统软件三部分组成,可对人体常见的体征参数进行采集、处理和显示。实验对比结果表明,监护系统能准确稳定地对人体... 采用模块化设计的方法,设计并实现了一种便携式实用新型医疗健康监护系统。系统由人体生理参数采集电路、微控制电路和系统软件三部分组成,可对人体常见的体征参数进行采集、处理和显示。实验对比结果表明,监护系统能准确稳定地对人体体温、脉搏、呼吸、心电、血压、血氧等多个参数进行实时测量、保存和显示,并能通过蓝牙和Wi Fi进行无线传输。 展开更多

关键词 STM32 多生理参数测量 体征监护 数据解析 实时动态显示 无线传输

下载PDF 职称材料

农机数据采集传输系统的设计与实现——基于CAN总线 被引量：8

6

作者 刘传茂 王熙 《农机化研究》 北大核心 2016年第12期207-211,共5页

随着CAN总线的发展应用,越来越多的农业机械开始装备使用CAN总线,采集农机CAN数据对于农机作业运行及故障维修的应用研究具有重要意义。农机CAN总线数据采集传输系统,能够实时采集、解析、传输农机CAN总线数据信息,且可将数据传输到PC... 随着CAN总线的发展应用,越来越多的农业机械开始装备使用CAN总线,采集农机CAN数据对于农机作业运行及故障维修的应用研究具有重要意义。农机CAN总线数据采集传输系统,能够实时采集、解析、传输农机CAN总线数据信息,且可将数据传输到PC机进行数据处理和数据分析。为此,详细介绍了基于单片机、CAN控制器及CAN收发器的农机CAN总线数据采集传输系统,并给出了硬件设计和软件实现。试验表明:该系统将发动机转速、油耗、经纬度、高程等数据解析并传输存储,在实际应用过程中,系统可靠性好,信息准确、运行正常。 展开更多

关键词 农机数据 数据解析 控制器局域网 CAN

下载PDF 职称材料

DICOMRT数据解析库的开发与应用 被引量：8

7

作者 吴磊 於文雪 罗立民 《医疗装备》 2006年第4期11-13,共3页

DICOM RT是放射治疗领域的数据传输通用标准。本文首先介绍了DICOM RT标准中所使用的数据编码规则和内容结构,接着阐明了DICOM RT数据解析的具体实现方法,最后讨论了该解析库的一些应用工作。

关键词 DICOM RT 放射治疗 数据解析 解析库 开发与应用

下载PDF 职称材料

基于Python的拉勾网网络爬虫设计与实现 被引量：4

8

作者 冯晓磊 《现代信息科技》 2023年第6期85-87,91,共4页

随着科学技术的发展,网络资源对人们的生活产生巨大的影响,为了进一步简化查找和精准定位网络资源,网络爬虫技术日渐兴起。由于Python语言的强兼容性,基于Python的网络爬虫技术成为了一种主流爬虫技术。针对学生求职的需求,文章采用基于... 随着科学技术的发展,网络资源对人们的生活产生巨大的影响,为了进一步简化查找和精准定位网络资源,网络爬虫技术日渐兴起。由于Python语言的强兼容性,基于Python的网络爬虫技术成为了一种主流爬虫技术。针对学生求职的需求,文章采用基于Python的网络爬虫技术,设计拉勾网的岗位信息爬取程序,实现了对岗位信息的保存,为后续的查看使用提供便利。 展开更多

关键词 PYTHON 网络爬虫 数据解析

下载PDF 职称材料

一种基于PCIE总线的高性能数据传输架构设计 被引量：2

9

作者 洪畅 翟栋梁 丁志辉 《现代电子技术》 2023年第21期6-10,共5页

为了提高数据传输系统中PCIE总线的带宽利用率,并且降低处理器端数据解析开销,增强通用性和可移植性,设计了一种高性能的PCIE DMA传输架构。对于常规的分散⁃聚集式DMA传输流程进行优化改进,将传输过程中所有必要的参数提前发送给FPGA,... 为了提高数据传输系统中PCIE总线的带宽利用率,并且降低处理器端数据解析开销,增强通用性和可移植性,设计了一种高性能的PCIE DMA传输架构。对于常规的分散⁃聚集式DMA传输流程进行优化改进,将传输过程中所有必要的参数提前发送给FPGA,从而减少了传输过程中的交互开销。DMA传输参数均可由用户进行配置,描述符链表中表项内容可扩展。在传输数据过程中FPGA完成数据特征参数反馈,有助于处理器后续的数据解析。基于国产化的信息处理板完成了该架构的性能测试,测试结果表明该架构在传输效率上得到显著提升。目前该架构已成功部署于某型雷达国产化信息处理平台中,完成雷达中频数据的实时传输和处理,具有带宽利用率高、通用性强、资源开销小、报文易解析的优点,能够满足海量数据的高速传输及数据解析的需求。 展开更多

关键词 PCIE FPGA DMA 分散⁃聚集 描述符 数据传输 数据解析 传输效率

下载PDF 职称材料

面向自定义虚拟机的远程调试器设计与实现

10

作者 陈芳 李耀 +2 位作者 宋雷军 申臻 胡逸琳 《先进小卫星技术（中英文）》 2024年第2期87-94,共8页

针对快速仿真器(quickemulator,QEMU)虚拟机支持的终端调试存在交互性差和可视性不足等问题,设计了一种可扩展、操作简便的远程调试器.首先,基于远程串行调试通信协议(remote serialprotocol,RSP)拓展了QEMU虚拟机的调试接口.进而,构建... 针对快速仿真器(quickemulator,QEMU)虚拟机支持的终端调试存在交互性差和可视性不足等问题,设计了一种可扩展、操作简便的远程调试器.首先,基于远程串行调试通信协议(remote serialprotocol,RSP)拓展了QEMU虚拟机的调试接口.进而,构建了GUN调试器机器接口(GUN debuggermachineinterface,GDB/MI)数据传输通道传递调试信息,在此基础上,通过提取、解析及重组调试信息更新变量信息和调试状态.最终,设计了可视化界面实现源码查看、指令发送、信息显示与调试追踪.实际应用表明:该远程调试器能够满足基础的调试需求,并且设计的可视化界面使得调试过程更为简洁直观. 展开更多

关键词 QEMU虚拟机 调试器 远程通信 数据解析 集成开发环境

下载PDF 职称材料

基于XML的数据解析软件设计与实现 被引量：6

11

作者 辛怀声 王鹏 《电脑知识与技术》 2014年第1期57-59,71,共4页

在开展数据处理和数据分析的工作前，常常需要对采集的原始数据进行解析处理，常规的方法是针对大量的数据接口分别开发解析代码，这样做不仅工作量大，代码冗余度高，日后对接口进行修改或添加时都需要同步修改解析程序的相应代码，给... 在开展数据处理和数据分析的工作前，常常需要对采集的原始数据进行解析处理，常规的方法是针对大量的数据接口分别开发解析代码，这样做不仅工作量大，代码冗余度高，日后对接口进行修改或添加时都需要同步修改解析程序的相应代码，给数据分析处理工作带来极大的困难。为了有效解决这一问题，该文提出了一种基于XML的数据解析方法，实现接口定义和程序编码的隔离，能够在不改动程序代码情况下，实现数据接口的按需添加或修改，有利于节约后期针对解析程序的开发和维护成本。 展开更多

关键词 数据解析 隔离 接口

下载PDF 职称材料

面向多尺度折线图数据解析的两阶段方法 被引量：1

12

作者 王赵宇 周国帆 舒挺 《智能计算机与应用》 2023年第6期97-102,共6页

折线图数据解析在医疗、学术等领域具有重要价值,传统的基于图形学的方法需要对每个像素归类再进行后续识别从而影响了算法的效率,而基于神经网络的方法由于需要依赖显著的图表特征,在背景与线条颜色相近、折线较细等情况下存在效果不... 折线图数据解析在医疗、学术等领域具有重要价值,传统的基于图形学的方法需要对每个像素归类再进行后续识别从而影响了算法的效率,而基于神经网络的方法由于需要依赖显著的图表特征,在背景与线条颜色相近、折线较细等情况下存在效果不佳等问题。基于此,本文融合图形学方法和神经网络方法,提出了一种两阶段折线图数据解析方法。首先,基于色彩筛选线条上的像素对轴标签、边界、角点、网格等图表基础信息进行检测;其次,利用神经网络获取初步分割结果,结合传统图形学方法进一步完善分割效果并进行数值映射;最后,在多尺度折线图数据抽样数据集上评估本文算法,在轴标签检测中F1-Score值达到0.851,在线条分割中mIoU值达到0.921,在数值映射中平均欧式距离达到0.087。实验结果表明该方法可以有效解决线条与背景色颜色接近、图表分辨率不高等场景下的折线图数据解析问题。 展开更多

关键词 色彩筛选 折线图 数据解析

下载PDF 职称材料

动车组车载非实时数据下载及应用平台设计与实现

13

作者 杨春辉 程凯 李超旭 《铁路计算机应用》 2023年第7期29-33,共5页

为满足铁路动车组故障原因深入分析、趋势规律预测等需求,分析车载非实时数据现状,提出采用无线局域网(WLAN,Wireless Local Area Network)结合5G移动通信公网进行非实时数据下载的方式,设计了动车组车载非实时数据下载及应用平台。通... 为满足铁路动车组故障原因深入分析、趋势规律预测等需求,分析车载非实时数据现状,提出采用无线局域网(WLAN,Wireless Local Area Network)结合5G移动通信公网进行非实时数据下载的方式,设计了动车组车载非实时数据下载及应用平台。通过海量数据处理监控、批量高效数据解析及数据完整性校验等关键技术,实现车载非实时数据的采集传输、数据监控、数据解析、数据共享及综合展示等功能。该平台的实现可进一步推动铁路动车组非实时数据的下载建设,对于动车组故障分析及运用状态评估预测等研究具有重要意义。 展开更多

关键词 动车组 车载非实时数据 大数据处理 数据解析 完整性校验

下载PDF 职称材料

气象台站历史沿革信息检索可视化系统设计与实现 被引量：4

14

作者 陈东辉 高峰 +2 位作者 刘娜 韩瑞 罗岚心 《计算机应用》 CSCD 北大核心 2021年第S01期119-124,共6页

针对气象台站历史沿革文件在开发利用过程中出现的查询检索效率低下、统计分析不便等问题,设计开发了气象台站历史沿革信息检索可视化系统。首先,根据气象台站历史沿革文件特点,运用多线程分布式文件批处理技术对文件内容进行快速解析;... 针对气象台站历史沿革文件在开发利用过程中出现的查询检索效率低下、统计分析不便等问题,设计开发了气象台站历史沿革信息检索可视化系统。首先,根据气象台站历史沿革文件特点,运用多线程分布式文件批处理技术对文件内容进行快速解析;然后,基于快捷开放的MySQL数据库对解析的关键信息创建多分表,通过冗余站号和台站类型信息建立表之间关联;接着,构建ElasticSearch搜索引擎,将数据库表数据进行格式转换,实现台站历史沿革信息全文检索;最后,为直观了解气象台站分布及沿革信息,创建轻量级WebGIS框架实现可视化信息交互功能。2019年10月该系统基于国家气象业务内网上线运行以来,系统查询检索突破10万次,数据下载5463次,为气候资料数据集研制、数据均一性检验与订正等提供重要的数据支撑。 展开更多

关键词 气象台站 历史沿革文件 数据解析 查询检索 可视化

下载PDF 职称材料

基于多线程加速的STEP标准并行解析算法

15

作者 毕玉莉 刘嘉政 +2 位作者 杨义军 曾薇 雍俊海 《计算机辅助设计与图形学学报》 EI CSCD 北大核心 2023年第12期1842-1850,共9页

当前CAD软件加载大型STEP中性文件时速度慢,其效率瓶颈关键在于其解析算法.针对基于单线程的中性标准解析算法已经远远不能满足当前CAD应用需求的问题,提出了一种基于多线程的分层并行数据解析算法,利用当前主流CPU都采用的多核并行架构... 当前CAD软件加载大型STEP中性文件时速度慢,其效率瓶颈关键在于其解析算法.针对基于单线程的中性标准解析算法已经远远不能满足当前CAD应用需求的问题,提出了一种基于多线程的分层并行数据解析算法,利用当前主流CPU都采用的多核并行架构,大幅提升了STEP文件解析效率.根据模型体中数据的分层特性,算法利用线程池对各层数据解析进行并行加速.文中算法已经在开源几何引擎OpenGE中实现.与OpenCASCADE的对比实验验证了文中算法的有效性.实验结果表明,算法的并行解析程序运行速度相比串行解析程序运行速度提升至原算法的2倍,比OpenCASCADE解析算法快50%. 展开更多

关键词 STEP标准 数据解析 多线程 并行处理算法

下载PDF 职称材料

浅谈液体火箭发动机试验数据解析入库技术 被引量：2

16

作者 董冬 乔江晖 +2 位作者 朱成亮 刘晓 白文义 《火箭推进》 CAS 2015年第4期105-108 112,共5页

液体火箭发动机试验数据解析入库技术通过分析试验数据的结构特点,选取适合异构试验数据的存储方式,采用关系数据库存储结构化数据和文件数据库存储非结构化数据相结合的方式进行数据存储。基于数据入库通用模型建立试验数据解析入库模... 液体火箭发动机试验数据解析入库技术通过分析试验数据的结构特点,选取适合异构试验数据的存储方式,采用关系数据库存储结构化数据和文件数据库存储非结构化数据相结合的方式进行数据存储。基于数据入库通用模型建立试验数据解析入库模型,包括数据分类与结构标准化,数据解析或者附件上传,导入关系数据库或存入文件数据库。模型建立完成后根据模型进行液体火箭发动机试验数据解析,解析完成后的数据存入文件数据库或关系数据库中。液体火箭发动机试验数据解析入库关键技术,尤其是试验数据解析入库模型可用于其它领域试验数据管理,为相应的试验数据解析入库模型建立提供设计参考。 展开更多

关键词 试验数据 数据解析 数据入库 关键技术

下载PDF 职称材料

电子病历共享系统中数据解析系统的实现 被引量：2

17

作者 徐亮 宋海涛 杜军平 《计算机仿真》 CSCD 北大核心 2012年第3期40-43,共4页

对电子病历共享系统中数据解析系统进行了研究,设计了XML数据模型到数据库模型的映射规则,实现了XML数据到数据库的自动解析和加载。系统分为参数配置、数据加载和后期维护三个模块。参数配置模块对数据解析规则进行配置;数据加载模块... 对电子病历共享系统中数据解析系统进行了研究,设计了XML数据模型到数据库模型的映射规则,实现了XML数据到数据库的自动解析和加载。系统分为参数配置、数据加载和后期维护三个模块。参数配置模块对数据解析规则进行配置;数据加载模块根据解析规则完成数据的解析和加载;后期维护模块对数据解析和加载过程中出现的异常进行修正。 展开更多

关键词 数据解析 参数配置 数据加载 异常处理

下载PDF 职称材料

基于LINUX系统的NMEA-0183格式数据流解析 被引量：2

18

作者 王祝先 关兴民 +1 位作者 季晓菲 张兆伟 《自动化技术与应用》 2018年第3期59-64,共6页

本文对NMEA-0183协议的基本格式进行了介绍,并分析了NMEA-0183格式数据的解析原理,在此基础上,对基于Linux系统的NMEA-0183格式数据实时提取与处理方法进行了研究,编写了与其相关的端口通信程序和数据解析处理程序,最终实现了Linux系统... 本文对NMEA-0183协议的基本格式进行了介绍,并分析了NMEA-0183格式数据的解析原理,在此基础上,对基于Linux系统的NMEA-0183格式数据实时提取与处理方法进行了研究,编写了与其相关的端口通信程序和数据解析处理程序,最终实现了Linux系统下的NMEA-0183原始数据提取、解析处理和传输过程,并通过GNSS接收机板卡进行了实验验证。 展开更多

关键词 NMEA-0183 LINUX系统 数据解析 串口通信 网络通信

下载PDF 职称材料

面向轮式机器人导航的轨迹推演 被引量：2

19

作者 肖立武 曾连荪 朱锦顺 《电子设计工程》 2014年第24期30-32,共3页

基于满足低成本轮式移动机器人平台的导航需求为目的,通过轮式机器人的运动模型,深入分析轮式机器的状态,实时地解算轮式机器人的相对位移和航向角,之后给上位机发送相对位移和航向角数据进行估算解析,最后通过解析出来的数据推演出轮... 基于满足低成本轮式移动机器人平台的导航需求为目的,通过轮式机器人的运动模型,深入分析轮式机器的状态,实时地解算轮式机器人的相对位移和航向角,之后给上位机发送相对位移和航向角数据进行估算解析,最后通过解析出来的数据推演出轮式机器人的实时轨迹。实地实验验证了轮式机器人相对位移解算以及对上报数据进行解析算法的性能。本算法为轮式机器人的轨迹估算推演提供了新思路,实验结果证明了该算法的正确性与实用性。 展开更多

关键词 数据解析 运动模型 解算相对位移 轨迹推演

下载PDF 职称材料

基于.NET的分布式设备组网与管理系统软件设计与实现 被引量：2

20

作者 孙志刚 王国涛 +2 位作者 高萌萌 杨文英 蒋爱平 《计算机应用》 CSCD 北大核心 2021年第S02期198-207,共10页

针对现有环境下实验设备分布放置与独立观测带来操作与分析不便的问题,提出了一种基于. NET平台的分布式设备组网与管理系统。系统包含一个运行在独立计算机设备上的服务器软件与九个运行在实验设备上的客户端软件,借助于局域网建立服... 针对现有环境下实验设备分布放置与独立观测带来操作与分析不便的问题,提出了一种基于. NET平台的分布式设备组网与管理系统。系统包含一个运行在独立计算机设备上的服务器软件与九个运行在实验设备上的客户端软件,借助于局域网建立服务器软件与多个客户端软件之间的Socket通信连接,完成分布式实验设备的集中组网与统一控制。客户端软件将实验设备的单次测试结果以数据或文件形式及时传输至服务器存储,服务器软件下属的分析界面实现对测试结果的数据解析、波形绘制与图像显示等功能,达到对分布式实验设备独立或联合测试结果的综合分析的目的。现场测试表明,服务器软件与九个客户端软件运行稳定,Socket通信连接可靠,实时数据与文件传输高效,分析界面功能完善且分析结果正确,有效解决了现有环境下实验设备测试与分析过程中存在的不足。本研究具有较强的兼容性,可以快速应用于其他分布放置的实验设备,接入现有系统中。 展开更多

关键词 .NET平台 分布式设备 SOCKET通信 数据解析 波形绘制

下载PDF 职称材料