期刊文献+
共找到8篇文章
< 1 >
每页显示 20 50 100
基于ELK的日志分析系统研究及应用 被引量:29
1
作者 姚攀 马玉鹏 徐春香 《计算机工程与设计》 北大核心 2018年第7期2090-2095,共6页
为解决现阶段物联网应用日志处理效率低下的问题,研究一种基于ELK技术栈的开源日志解决方案。探讨各组件的工作原理和使用方法,提出解析日志的规则和技巧,总结优化Elasticsearch集群性能的方法,在此基础之上搭建能够对海量日志进行实时... 为解决现阶段物联网应用日志处理效率低下的问题,研究一种基于ELK技术栈的开源日志解决方案。探讨各组件的工作原理和使用方法,提出解析日志的规则和技巧,总结优化Elasticsearch集群性能的方法,在此基础之上搭建能够对海量日志进行实时采集和检索的分析监控系统。实验结果表明,该方案具有配置方式灵活、集群可线性扩展、日志实时导入、检索性能高效、可视化方便等优点,能有效提高运维效率和异常排查速度。 展开更多
关键词 大数据 物联网 系统监控 日志分析平台 ELK Elasticsearch
下载PDF
江西省下行气象资料实时监视平台设计与实现 被引量:13
2
作者 李显风 邓卫华 +2 位作者 邹海燕 何瑶 赵艳 《气象科技》 北大核心 2016年第2期229-233,共5页
下行气象资料是省级气象部门重要的数据源。在分析下行气象资料接收流程基础上,提出了江西省下行气象资料实时监视平台的构建思路。基于日志分析,采用MVC架构、SQL Server数据库和HTML、JavaScript等Web技术对平台进行设计与实现。平台... 下行气象资料是省级气象部门重要的数据源。在分析下行气象资料接收流程基础上,提出了江西省下行气象资料实时监视平台的构建思路。基于日志分析,采用MVC架构、SQL Server数据库和HTML、JavaScript等Web技术对平台进行设计与实现。平台实现了对江西省实时下载资料和CMACast系统广播资料等下行气象资料的实时监视。平台具有对下行气象资料年、月、日和任意时段的统计分析和对后台日志处理系统的异常报警。平台投入业务应用后,大大提高了江西省下行资料接收和监控效率。 展开更多
关键词 下行气象资料 日志分析 实时监视 平台
下载PDF
ELK日志分析平台在电子商务系统监控服务中的应用 被引量:12
3
作者 周映 韩晓霞 《信息技术与标准化》 2016年第7期67-70,共4页
针对运维服务人员因海量的应用日志、系统日志、错误日志等分散存储在不同设备里而面临异常监控发现不及时、日志分析效率低下、统计检索繁琐等问题,通过研究ELK(由弹性搜索、日志事件采集、统计展示三个开源免费工具组成)的工作原理,完... 针对运维服务人员因海量的应用日志、系统日志、错误日志等分散存储在不同设备里而面临异常监控发现不及时、日志分析效率低下、统计检索繁琐等问题,通过研究ELK(由弹性搜索、日志事件采集、统计展示三个开源免费工具组成)的工作原理,完成ELK日志分析平台的安装部署,从而提高监控服务质量和效率,实现异常首发。该平台不仅配置简单,而且完全开源免费。该设计也能为运维服务人员直观展现各类日志情况,便于对监控数据分析利用,从而提升运维效率与质量。 展开更多
关键词 运维 日志分析平台 效率提升 监控服务 ELK
下载PDF
面向电力大数据日志分析平台的异常监测集成预测算法 被引量:8
4
作者 倪震 李千目 郭雅娟 《南京理工大学学报》 EI CAS CSCD 北大核心 2017年第5期634-645,共12页
随着电力企业网络技术的发展,传统和新生的日志处理系统已不能满足大数据状态下的日志分析要求,为了实现系统日志异常分析的目标,该文提出一种基于时间序列的系统异常数量集成预测算法和面向该算法的评价体系。该算法对多种分类预测算... 随着电力企业网络技术的发展,传统和新生的日志处理系统已不能满足大数据状态下的日志分析要求,为了实现系统日志异常分析的目标,该文提出一种基于时间序列的系统异常数量集成预测算法和面向该算法的评价体系。该算法对多种分类预测算法进行集成,对收集到的日志数据进行分类预测,进而实现了以综合最优的准确度预测系统的异常数量,评价体系很好地支持了该算法的工作,算法增强了日志分析平台的安全性。 展开更多
关键词 日志分析 异常监测 大数据平台 集成预测算法
下载PDF
基于3D油藏地质模型构建一体化测井解释平台技术研究 被引量:2
5
作者 王卫 《测井技术》 CAS CSCD 2017年第3期369-372,共4页
测井解释人员需要掌握目标区域的相关信息,如构造、层位、邻井结果、砂体连通性信息、井眼轨迹、钻录资料等,才能对目标井作出正确解释。基于3D油藏地质模型开展测井解释更符合测井分析家的需要,测井解释过程形成的层位、油水饱和度等... 测井解释人员需要掌握目标区域的相关信息,如构造、层位、邻井结果、砂体连通性信息、井眼轨迹、钻录资料等,才能对目标井作出正确解释。基于3D油藏地质模型开展测井解释更符合测井分析家的需要,测井解释过程形成的层位、油水饱和度等信息能够补充和完善油藏地质模型;完善的油藏地质模型又能够更精确地指导解释工作。研制了基于3D油藏地质模型构建一体化测井解释软件平台,从设计思想、架构技术、数据流控制方法等进行了分析,给出了应用实例。3D油藏地质模型构建测井解释平台能够更好地指导测井解释工作,有利于测井解释符合率的提高。 展开更多
关键词 测井解释 测井分析平台 油藏地质模型 解释软件 测井分析家
下载PDF
基于Hadoop的可信计算平台日志分析模型 被引量:4
6
作者 严嘉维 张琛 +3 位作者 李成蹊 孙权荣 张程誉 谭玉霖 《软件导刊》 2018年第8期71-75,共5页
针对传统关联规则Apriori算法难以适应大数据的问题,为提高可信计算平台日志数据分析效率,提出了一种基于Hadoop的可信计算平台日志分析模型。构建了日志分析模型总体框架,对非结构化原始日志数据进行垂直划分,采用分布式文件存储系统,... 针对传统关联规则Apriori算法难以适应大数据的问题,为提高可信计算平台日志数据分析效率,提出了一种基于Hadoop的可信计算平台日志分析模型。构建了日志分析模型总体框架,对非结构化原始日志数据进行垂直划分,采用分布式文件存储系统,结合MapReduce编程模式给出一种分布式Apriori并行垂直算法。通过日志挖掘建立用户行为关联规则库,并采用规则匹配实现对用户异常行为的检测。理论分析和实验数据证明,该模型在大数据环境下能够有效提高日志分析效率。 展开更多
关键词 日志分析 可信计算 HADOOP平台 数据挖掘 APRIORI算法
下载PDF
基于Storm实时流式计算框架的网络日志分析方法 被引量:5
7
作者 杨立鹏 张仰森 +2 位作者 张雯 王建 曾健荣 《计算机科学》 CSCD 北大核心 2019年第9期176-183,共8页
随着互联网的飞速发展,网络日志数据呈现爆炸式增长,网络日志蕴含着丰富的网络安全信息。通过对网络日志进行分析,提出了基于访问行为和网络关系的攻击IP识别模型和基于滑动时间窗口的IP真人属性判定模型。基于Storm实时流式计算框架,... 随着互联网的飞速发展,网络日志数据呈现爆炸式增长,网络日志蕴含着丰富的网络安全信息。通过对网络日志进行分析,提出了基于访问行为和网络关系的攻击IP识别模型和基于滑动时间窗口的IP真人属性判定模型。基于Storm实时流式计算框架,对所提模型进行算法实现,以构建分布式网络日志实时计算与分析平台,并对实现过程中遇到的技术问题给出了解决方案。通过真实数据对所构建的模型进行分析计算,结果表明,所构建的攻击IP识别模型的标注准确率达到98%,IP真人属性判定模型的标注准确率达到96%;构建的分布式网络日志实时计算与分析平台能够有效、实时地监控网络安全,并及时识别网络中存在的安全隐患。 展开更多
关键词 STORM IP真人率 攻击IP识别 分布式网络日志分析平台
下载PDF
基于大数据环境下智能日志分析平台运维方案研究 被引量:3
8
作者 窦继涛 代飞 《九江职业技术学院学报》 2017年第4期90-92,共3页
随着信息技术的蓬勃发展,数据大爆炸时代已经到来,对数据中心的运维提出了更高的要求,不管是性能支撑,还是业务数据挖掘,都需要站在大数据的角度,让技术智慧服务于业务。本文提出的基于大数据环境下的智能日志处理分析平台解决方案,在... 随着信息技术的蓬勃发展,数据大爆炸时代已经到来,对数据中心的运维提出了更高的要求,不管是性能支撑,还是业务数据挖掘,都需要站在大数据的角度,让技术智慧服务于业务。本文提出的基于大数据环境下的智能日志处理分析平台解决方案,在提高业务数据分析、处理、挖掘能力的同时,可解决业务系统的安全性问题,实现智能运维。 展开更多
关键词 大数据 日志处理分析平台 方案 智能运维
下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部