内存映射文件在大数据量海洋调查数据处理中的应用 被引量：10

1

作者 于慧彬 齐鹏 +1 位作者 梁捷 杨逍 《海洋技术》 北大核心 2010年第1期32-35,共4页

在进行大数据量海洋调查数据处理的过程中,以通常的普通文件操作的方式读取这些数据往往需要应用程序持续不断地努力执行与硬盘间的大量数据交换任务,其不但占用大量计算机内存,而且完成的效率之低往往令人难以忍受。为满足大数据量海... 在进行大数据量海洋调查数据处理的过程中,以通常的普通文件操作的方式读取这些数据往往需要应用程序持续不断地努力执行与硬盘间的大量数据交换任务,其不但占用大量计算机内存,而且完成的效率之低往往令人难以忍受。为满足大数据量海洋调查数据计算机处理工作的需要,利用内存映射文件的方法实现了对大数据量海洋调查数据进行高效率读取和分析的软件设计。文中阐述了该软件的设计思路和内存映射文件方法的具体实现过程。通过实际应用证明该软件稳定可靠,在运行效率上较普通应用程序方式有显著提高。 展开更多

关键词 内存映射文件 WINDOWS API 数据处理

下载PDF 职称材料

在VB利用内存映射文件读取大数据量原始遥感影像图 被引量：3

2

作者 杨群 《计算机工程与应用》 CSCD 北大核心 2003年第6期135-137,共3页

原始遥感影像数据一般是经过粗处理后以二进制格式提供给用户。这些影像数据同一般的图像数据相比数据量较大,通常采用专业遥感软件进行读取和处理。但当前应用中对遥感数据处理和分析的方法大多都要和GIS相结合,而当前国际流行的商业GI... 原始遥感影像数据一般是经过粗处理后以二进制格式提供给用户。这些影像数据同一般的图像数据相比数据量较大,通常采用专业遥感软件进行读取和处理。但当前应用中对遥感数据处理和分析的方法大多都要和GIS相结合,而当前国际流行的商业GIS一般都不具有图像处理功能,同样在商业遥感影像处理软件方面也很难发现较强的GIS功能。如何把GIS和RS有效地结合起来,是目前实际应用中面临的一个问题。论文在分析GIS和遥感影像处理功能集成的方法和意义的基础上,对比了传统文件读取方法和内存映射文件处理方法之间的差异,并给出了利用内存映射文件的方式显示和处理大数据量原始影像文件的具体实现思路。 展开更多

关键词 内存映射文件 数据量 原始遥感影像图 地理信息系统 VB语言 数字图像处理 二进制格式

下载PDF 职称材料

基于内存映射的ENVI标准格式影像指定块数据快速读取 被引量：1

3

作者 郭春波 王茂芝 +1 位作者 汪大明 郭科 《四川理工学院学报（自然科学版）》 CAS 2012年第5期58-61,共4页

针对遥感影像海量数据存储问题,提出了一种基于内存映射的指定块数据快速读取方法,并通过OpenGL对ENVI标准格式的遥感影像海量数据快速读取予以验证。实验结果表明,基于内存映射的方式能有效地解决遥感影像海量数据指定内容的快速读取... 针对遥感影像海量数据存储问题,提出了一种基于内存映射的指定块数据快速读取方法,并通过OpenGL对ENVI标准格式的遥感影像海量数据快速读取予以验证。实验结果表明,基于内存映射的方式能有效地解决遥感影像海量数据指定内容的快速读取问题。论文还对内存映射的原理以及基于OpenGL显示的ENVI标准格式遥感影像数据读取程序实现细节进行了描述。 展开更多

关键词 内存映射 ENVI标准格式 OPENGL 内存管理

下载PDF 职称材料

快速处理大数据量三维激光扫描数据的技术研究 被引量：41

4

作者 张瑞菊 王晏民 李德仁 《测绘科学》 CSCD 北大核心 2006年第5期93-94,68,共3页

为解决由于利用三维激光扫描仪进行模型重建过程中数据量大而造成的在数据读取、数据处理及三维显示等方面速度低下、操作不流畅等问题,结合当前计算机软、硬件技术的现状,分析激光扫描数据本身的特点,提出基于内存映射文件技术、虚拟... 为解决由于利用三维激光扫描仪进行模型重建过程中数据量大而造成的在数据读取、数据处理及三维显示等方面速度低下、操作不流畅等问题,结合当前计算机软、硬件技术的现状,分析激光扫描数据本身的特点,提出基于内存映射文件技术、虚拟内存技术、多线程技术、数据库技术及用OpenGL快速显示三维模型的技术等解决手段,同时在WindowsXP操作系统上,利用Vc++6.0给予了具体的程序实现,以古建筑室内激光扫描数据作为试验数据,实践表明了文章提出的技术手段在现有的计算机条件下,较好地解决数据量大、数据处理和显示速度慢的问题。 展开更多

关键词 点云 内存映射文件 虚拟内存 多线程 数据库 OPENGL

下载PDF 职称材料

大数据量地球物理测井绘图关键技术研究 被引量：15

5

作者 李河 王祝文 +1 位作者 李舟波 王朝辉 《地球物理学进展》 CSCD 北大核心 2005年第1期71-77,共7页

在开发地球物理测井解释软件过程中,绘图所涉及的数据量很大,在绘图过程中要进行大量的比例运算、坐标转换及坐标映射等,特别是绘制巨幅、需要连续滚屏显示的声电成像测井图像,数据量和运算量更大,因此,就会经常出现内存不足、图形刷新... 在开发地球物理测井解释软件过程中,绘图所涉及的数据量很大,在绘图过程中要进行大量的比例运算、坐标转换及坐标映射等,特别是绘制巨幅、需要连续滚屏显示的声电成像测井图像,数据量和运算量更大,因此,就会经常出现内存不足、图形刷新速度过慢、图形重叠和闪烁等现象.在开发测井解释系统GeoWell过程中,采用内存映射文件、内存DC绘图、局部重绘等技术实现了大数据量巨幅测井图形的快速度、高质量绘制以及图形的连续滚动显示,提高了绘图效率,为微机环境下开发大数据量复杂测井绘图软件提供了技术参考. 展开更多

关键词 测井软件 内存映射文件 内存DC绘图 局部重绘 连续滚动显示

下载PDF 职称材料

基于Vega Prime的多场景仿真系统框架 被引量：12

6

作者 孙科峰 李洁 《计算机仿真》 CSCD 2007年第12期193-195,251,共4页

介绍了基于MFC的Vega Prime视景仿真开发方法。分析了多场景仿真系统中不能正常进行场景切换的原因,提出了基于进程的场景切换方法。该方法将基于MFC的主控进程和基于MFC的Vega Prime仿真进程分离开来。主控进程通过创建/中止仿真进程... 介绍了基于MFC的Vega Prime视景仿真开发方法。分析了多场景仿真系统中不能正常进行场景切换的原因,提出了基于进程的场景切换方法。该方法将基于MFC的主控进程和基于MFC的Vega Prime仿真进程分离开来。主控进程通过创建/中止仿真进程的方式实现场景间切换;进程间采用内存映射文件和消息机制两种方式进行数据通讯,以传递Vega Prime环境初始化参数、仿真控制参数和场景属性数据,能够保证仿真系统的大数据量通讯要求和实时性要求。构建了基于VegaPrime的多场景仿真系统框架。 展开更多

关键词 多场景 进程 内存映射文件 消息机制

下载PDF 职称材料

基于C++的实时数据库的设计与实现 被引量：4

7

作者 孙志宏 吴成明 +1 位作者 谢会玲 胡翔勇 《三峡大学学报（自然科学版）》 CAS 2004年第6期540-543,共4页

根据仿真系统支撑平台的实时性要求 ,利用动态链接库和内存映射文件建立系统运行的实时数据库 ,通过内存映射文件开辟共享内存区 ,编制一系列封装在动态链接库的接口函数来实现对共享内存区数据的操作 .该方法既能实现多个进程数据的共... 根据仿真系统支撑平台的实时性要求 ,利用动态链接库和内存映射文件建立系统运行的实时数据库 ,通过内存映射文件开辟共享内存区 ,编制一系列封装在动态链接库的接口函数来实现对共享内存区数据的操作 .该方法既能实现多个进程数据的共享 ,又保证了实时的响应速度 . 展开更多

关键词 实时数据库 内存映射文件 共享内存 动态链接库 C++ 进程 实时性 封装 响应速度 接口函数

下载PDF 职称材料

基于EVC平台的内存映射文件技术研究与应用 被引量：4

8

作者 赵小建 方康玲 《微计算机信息》 北大核心 2007年第03X期234-235,190,共3页

本文分析了Win32环境下内存映射文件技术的系统实现原理,并结合嵌入式文件系统的特点,给出了该技术在嵌入式实时通讯系统中对多进程间数据共享问题的解决方案,提高了系统的实时性,具有一定的推广价值。

关键词 EVC 内存映射文件 嵌入式系统 数据共享

下载PDF 职称材料

高速红外图像实时采集存储与显示技术 被引量：5

9

作者 吴志红 孙力 阎杰 《红外技术》 CSCD 北大核心 2003年第5期56-59,共4页

高速红外图像采集技术在军事和遥感探测领域有着广泛的应用价值。针对红外成像的红外图像数据实时采集、存储、显示困难的问题 ,提出了一种采用PXI智能前端加工业控制计算机二级控制的红外图像采集方案 ,叙述了该方案的系统结构和图像... 高速红外图像采集技术在军事和遥感探测领域有着广泛的应用价值。针对红外成像的红外图像数据实时采集、存储、显示困难的问题 ,提出了一种采用PXI智能前端加工业控制计算机二级控制的红外图像采集方案 ,叙述了该方案的系统结构和图像采集原理。从实验结果看 ,采用该系统能够连续地实时采集、存储和显示高速红外图像 。 展开更多

关键词 红外图像 图像采集 存储 显示 PXI 内存映射文件 红外探测

下载PDF 职称材料

基于软总线构件技术的数据传输处理系统开发 被引量：5

10

作者 王军 熊桂喜 《现代计算机》 2007年第1期24-26,90,共4页

本文从软构件技术出发,提出了一种基于软件总线体系结构的专用软件开发模式,详细讨论了该系统的体系结构和逻辑层次、软总线的通信结构以及总线API等关键技术。

关键词 软件总线体系结构 构件技术 内存映射文件 事件

下载PDF 职称材料

地球物理测井数据格式及面向对象的数据读取 被引量：3

11

作者 李河 王祝文 +1 位作者 李舟波 丁永浩 《物探与化探》 CAS CSCD 2005年第2期174-178,共5页

在进行地球物理测井数据处理或解释软件开发时,只有知道所处理的测井数据的格式,才能正确地进行读取、格式转换、数据处理以及绘图等工作。在对ECLIPS5700数控测井系统XTF文件格式分析的基础上,基于内存映射文件技术,采用面向对象的方... 在进行地球物理测井数据处理或解释软件开发时,只有知道所处理的测井数据的格式,才能正确地进行读取、格式转换、数据处理以及绘图等工作。在对ECLIPS5700数控测井系统XTF文件格式分析的基础上,基于内存映射文件技术,采用面向对象的方法创建了XTF文件数据读取类,实现了大数据量XTF文件数据的快速读取,也可为其它格式测井数据的格式转换和数据处理提供技术参考。 展开更多

关键词 地球物理测井 数据读取 xTF文件格式 内存映射文件

下载PDF 职称材料

基于内存映射文件的进化算法数据存储引擎 被引量：4

12

作者 姜三义 代真真 +1 位作者 李阳 周爱民 《计算机工程与应用》 CSCD 北大核心 2015年第1期49-53,101,共6页

为了观察和分析进化算法的执行情况,往往需要将算法执行过程中产生的大量数据存储在磁盘文件中。用于进化算法的嵌入式数据存储引擎EADB(Evolutionary Algorithm Database)提供了简便灵活的数据存储接口,通过使用内存映射文件技术来实... 为了观察和分析进化算法的执行情况,往往需要将算法执行过程中产生的大量数据存储在磁盘文件中。用于进化算法的嵌入式数据存储引擎EADB(Evolutionary Algorithm Database)提供了简便灵活的数据存储接口,通过使用内存映射文件技术来实现数据的快速和大量存储。相较于传统文件I/O存储方式和一般的通用数据存储引擎,EADB大大加快了存储速度。 展开更多

关键词 进化算法 内存映射文件 数据存储引擎 文件I/O

下载PDF 职称材料

内存映射文件在大容量采编数据处理中的应用 被引量：4

13

作者 胡光东 李锦明 +1 位作者 马游春 秦丽 《电脑编程技巧与维护》 2009年第16期54-55,65,共3页

针对处理大于2GB的数据所面临的困难,提出一种利用内存映射文件实现数据读写的标准方法。该方法具有处理数据更加快速、灵活和高效等优点。实践证明,该方法在大容量采编数据的读取、处理和显示等方面的应用中,取得了良好效果。

关键词 内存映射文件 大容量采编数据

下载PDF 职称材料

基于内存映射文件的仿真系统进程间数据 被引量：4

14

作者 杨明元 任景光 刘未学 《电子科技》 2010年第11期33-34,共2页

针对某综合仿真系统进程间进行大数据量快速实时传输的需求,在分析进程间数据传输方法的基础上,采用内存映射文件技术,实现了进程间大数据量的实时传输。结果表明,基于内存映射文件技术的进程间大数据量的快速实时传输,在某综合仿真系... 针对某综合仿真系统进程间进行大数据量快速实时传输的需求,在分析进程间数据传输方法的基础上,采用内存映射文件技术,实现了进程间大数据量的实时传输。结果表明,基于内存映射文件技术的进程间大数据量的快速实时传输,在某综合仿真系统中工作可靠、稳定。 展开更多

关键词 进程间数据传输 内存映射文件 仿真系统

下载PDF 职称材料

内存映射文件在提取有限元模态结果中的应用 被引量：3

15

作者 陕光 凌玲 胡于进 《计算机应用》 CSCD 北大核心 2012年第5期1429-1431,1435,共4页

对于有限元分析软件导出的大型结果文件,在使用常规的文件操作函数处理时,容易导致计算机速度缓慢甚至失去响应。针对这个问题,提出了一种基于内存映射文件读写数据的方法。该方法通过建立磁盘文件与进程地址的关联,直接访问磁盘文件,... 对于有限元分析软件导出的大型结果文件,在使用常规的文件操作函数处理时,容易导致计算机速度缓慢甚至失去响应。针对这个问题,提出了一种基于内存映射文件读写数据的方法。该方法通过建立磁盘文件与进程地址的关联,直接访问磁盘文件,提取相关结果信息。当文件过大时,采用了分段映射的技术,逐段进行处理,并对两种不同的分段方式进行了比较。测试结果表明,比起传统的文件读写方法,该方法可以大大提高文件读取的速度,有效适应巨型文本文件的读取需求。 展开更多

关键词 有限元分析 内存映射文件 进程地址 分段映射 文本文件

下载PDF 职称材料

基于内存映射文件的进程间数据传输 被引量：3

16

作者 段继华 段继东 《无线电工程》 2007年第11期46-47,51,共3页

介绍了Windows操作系统的内存管理方式及Windows操作系统中进程间通信的几种方式,论述了内存映射文件的定义,以及使用内存映射文件在进程间共享内存的原理、操作和使用内存映射文件的方法和步骤。根据内存映射文件在进程间共享数据的原... 介绍了Windows操作系统的内存管理方式及Windows操作系统中进程间通信的几种方式,论述了内存映射文件的定义,以及使用内存映射文件在进程间共享内存的原理、操作和使用内存映射文件的方法和步骤。根据内存映射文件在进程间共享数据的原理,实现了多进程间数据传输共享的消息队列,并应用于工程实践中,取得了较好的效果。 展开更多

关键词 进程间数据传输 内存映射文件 虚拟地址空间 消息队列

下载PDF 职称材料

组态软件在煤矿监测监控系统中的应用 被引量：3

17

作者 石磊 梁自泽 +2 位作者 范长春 李恩 侯增广 《微计算机信息》 2009年第10期21-23,共3页

本文以一种综合运用VC++和世纪星组态软件两种平台共同开发实现的"煤矿井下安全生产监测监控系统"为例,介绍了利用内存文件映射技术实现进程间动态数据交换的方法。详细说明了了利用内存文件映射实现共享内存的原理及其实现步... 本文以一种综合运用VC++和世纪星组态软件两种平台共同开发实现的"煤矿井下安全生产监测监控系统"为例,介绍了利用内存文件映射技术实现进程间动态数据交换的方法。详细说明了了利用内存文件映射实现共享内存的原理及其实现步骤,并给出系统编程实例。性能分析及系统认证都证明了该方法的高效性和系统的实时性。 展开更多

关键词 组态软件 动态数据交换 内存文件映射

下载PDF 职称材料

变电站综合自动化系统中数据共享的实现 被引量：2

18

作者 刘春水 郭庆平 《河北理工学院学报》 2003年第4期61-66,88,共7页

结合XT2000变电站综合自动化系统,介绍了一种实现电力系统海量数据共享的方法。该方法主要基于分布式关系数据库,内存映射机制,面向对象等技术。实现的系统操作简单,实时性强,可靠度高,在实际运行中,取得了良好效果。

关键词 变电站 综合自动化系统 数据共享 关系数据库 内存映射 面向对象 数据结构 数据通讯

下载PDF 职称材料

一种数据表实时备份系统的高速缓存方法 被引量：2

19

作者 郭丹 卢正添 +1 位作者 陈文 林汉翮 《四川大学学报（自然科学版）》 CAS CSCD 北大核心 2010年第5期998-1002,共5页

通过分析Oracle数据表实时备份系统中本地数据的生成速度和网络速度的不匹配所引发的问题,提出了一种基于内存映射文件的高速缓存方法.该方法通过与指针访问动态内存相同的方式来访问磁盘上的文件,从而实现快速高效地读写数据.并引入了... 通过分析Oracle数据表实时备份系统中本地数据的生成速度和网络速度的不匹配所引发的问题,提出了一种基于内存映射文件的高速缓存方法.该方法通过与指针访问动态内存相同的方式来访问磁盘上的文件,从而实现快速高效地读写数据.并引入了一种基于二分法的探测报文速率的带宽测量技术,使系统能动态地适应网络状态.实验表明,该方法不但能使系统具有良好的实时性,而且保证了系统在不同网络状态下具有良好的稳定性和动态适应能力. 展开更多

关键词 实时备份 内存映射文件 高速缓存 二分法

原文传递

一种基于GPU和内存映射文件的高分辨率遥感图像快速处理方法 被引量：2

20

作者 马秀丹 崔宾阁 +2 位作者 钟勇 张永辉 费东 《海洋科学》 CAS CSCD 北大核心 2018年第1期139-146,共8页

高分辨率遥感图像处理经常面临程序执行时间过长和内存空间不足的问题,虽然并行计算技术可以提高遥感图像的处理速度,但是无法降低算法占用的巨大内存空间。为了解决这一问题,本文提出了一种利用CUDA和内存映射文件的高分辨率遥感图像... 高分辨率遥感图像处理经常面临程序执行时间过长和内存空间不足的问题,虽然并行计算技术可以提高遥感图像的处理速度,但是无法降低算法占用的巨大内存空间。为了解决这一问题,本文提出了一种利用CUDA和内存映射文件的高分辨率遥感图像快速处理方法,并以K-Means算法为例进行了实现。其中,CUDA技术可以有效利用GPU强大的并行计算能力,而内存映射文件技术降低了磁盘I/O速度较慢对算法性能的影响。实验结果表明,本文方法比传统K-Means聚类算法计算速度提高了30倍左右,内存使用量降低了90%以上。 展开更多

关键词 内存映射文件 CUDA 优化 遥感图像 聚类

下载PDF 职称材料