期刊文献+
共找到4篇文章
< 1 >
每页显示 20 50 100
基于Min-Hash数据降维的伴随关系研究 被引量:1
1
作者 黄晓雄 李博文 +4 位作者 卢云亮 林璋 史超 陈伟 章武盛 《中国电子科学研究院学报》 北大核心 2020年第10期984-988,共5页
文中提出一种新的计算伴随关系(同行、同停留)的方法,该方法基于手机信号数据、人脸行踪和车辆记录等多源数据。首先,利用ID-MAPPING技术将多源数据统一关联到同一ID,实现数据融合;接着,采用min-Hash算法进行数据降维,降低运算量和存储... 文中提出一种新的计算伴随关系(同行、同停留)的方法,该方法基于手机信号数据、人脸行踪和车辆记录等多源数据。首先,利用ID-MAPPING技术将多源数据统一关联到同一ID,实现数据融合;接着,采用min-Hash算法进行数据降维,降低运算量和存储空间;最后,利用分块Hash映射将具有相同轨迹特征片段的用户映射进同一个桶,计算时空相似度,得到具有相似时空序列的人员列表,从而生成伴随关系。实测数据表明:该方法在提高伴随关系准确度的同时,运行效率比传统方法提升了12倍。 展开更多
关键词 伴随关系 id-mapping min-Hash 时空相似度
下载PDF
Flink在广西广电实时用户画像系统中的设计与实践 被引量:1
2
作者 彭宇涛 《中国有线电视》 2021年第9期939-942,共4页
数据量的不断增大,使信息筛选和处理的困扰与日俱增,用户画像项目以此背景成立,旨在“数据驱动业务与运营”。系统地介绍了用户画像项目:首先,介绍了三种技术选型,通过对比阐明了采用Flink架构的原因;其次,从用户画像的业务架构、处理... 数据量的不断增大,使信息筛选和处理的困扰与日俱增,用户画像项目以此背景成立,旨在“数据驱动业务与运营”。系统地介绍了用户画像项目:首先,介绍了三种技术选型,通过对比阐明了采用Flink架构的原因;其次,从用户画像的业务架构、处理流程描述了项目的设计和实施,并详细介绍了ID-Mapping数据结构;最后,探讨了数据量增加时可能存在的问题,并提出了未来的优化方案。 展开更多
关键词 数据处理 用户画像 Flink 分层架构 id-mapping
下载PDF
数字地图图幅接边的虚拼接算法 被引量:9
3
作者 张赢 汪荣峰 廖学军 《计算机工程与设计》 CSCD 北大核心 2010年第16期3640-3643,共4页
为了改善数字地图图幅自动接边算法在处理大区域甚至全球范围的大数据量图幅接边时效率低的问题,提出了基于矢量ID映射的"虚拼接"算法。该算法提取图幅的边界信息集进行拼接判断而生成拼接链,根据拼接链生成ID映射对,对映射... 为了改善数字地图图幅自动接边算法在处理大区域甚至全球范围的大数据量图幅接边时效率低的问题,提出了基于矢量ID映射的"虚拼接"算法。该算法提取图幅的边界信息集进行拼接判断而生成拼接链,根据拼接链生成ID映射对,对映射对排序以实现快速搜索各图幅中需要映射的矢量ID并实施映射,合并拼接矢量的属性,最终实现拼接效果。"虚拼接"没有对被拼接矢量的坐标数据进行重组,避免了对内存的巨大需求,减少了自动接边中的人工干预。 展开更多
关键词 数字地图 图幅 自动接边 虚拼接 id映射
下载PDF
异步检查点容错PVM 被引量:1
4
作者 余洋 陆鑫达 《计算机工程与应用》 CSCD 北大核心 1999年第11期34-37,共4页
以工作站簇为代表的计算环境是当前分布式系统和并行计算的研究重点之一,PVM所提供的消息传递机制支持了高效的异构网络计算。但标准PVM缺乏对系统容错的支持,这可以通过使用检查点的回滚恢复方式予以弥补。该文对如何在用户级... 以工作站簇为代表的计算环境是当前分布式系统和并行计算的研究重点之一,PVM所提供的消息传递机制支持了高效的异构网络计算。但标准PVM缺乏对系统容错的支持,这可以通过使用检查点的回滚恢复方式予以弥补。该文对如何在用户级实现PVM全局容错,分析其设计思想和实现技术。主要思想是使用进行消息记录的异步检查点算法,并利用PVM守护进程和全局调度进程进行控制,所有操作对应用程序都是透明的。利用该系统还可以进一步实现PVM的透明进程迁移和负载均衡。 展开更多
关键词 异步检查点 容错 工作站簇 PVM 软件系统
下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部