期刊导航
期刊开放获取
cqvip
退出
期刊文献
+
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
检索
高级检索
期刊导航
共找到
7
篇文章
<
1
>
每页显示
20
50
100
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
显示方式:
文摘
详细
列表
相关度排序
被引量排序
时效性排序
基于Flume的分布式日志采集分析系统设计与实现
被引量:
27
1
作者
陈飞
艾中良
《软件》
2016年第12期-,共7页
互联网的迅猛发展以及大数据相关技术的兴起,使得日志数据的规模日益剧增,给已有的日志采集及分析系统带来了挑战;同时针对互联网安全的攻击活动也层出不穷,如何在海量的日志中及时提取有效的信息以为企业安全提供信息支撑,也给现有的...
互联网的迅猛发展以及大数据相关技术的兴起,使得日志数据的规模日益剧增,给已有的日志采集及分析系统带来了挑战;同时针对互联网安全的攻击活动也层出不穷,如何在海量的日志中及时提取有效的信息以为企业安全提供信息支撑,也给现有的分析系统提出了新的需求。本文结合使用Flume、Elasticsearch以及Kibana等技术手段提出了一种分布式的日志采集分析系统,从系统设计和架构等方面提出了新的解决思路,并针对Nginx的访问日志进行了实时采集和分析及展示,完成了原型系统的实现,实验证明,基于Flume的分布式的日志采集分析系统方案具有可行性。
展开更多
关键词
信息安全
日志采集
FLUME
Elasticsearch
kibana
下载PDF
职称材料
基于Elastic Stack的高校数据中心可视化运维的研究与实现
被引量:
2
2
作者
杜巧宝
李玲
《电脑与电信》
2021年第6期60-64,共5页
高校数据中心的运维是信息化发展中不可或缺的一部分,需要能够通过图形化方式监控数据中心运行状态,提前预判问题、快速定位问题和排除故障。以Docker容器技术做支撑,通过开源的Elastic Stack技术设计实现了可视化运维监控平台。在实践...
高校数据中心的运维是信息化发展中不可或缺的一部分,需要能够通过图形化方式监控数据中心运行状态,提前预判问题、快速定位问题和排除故障。以Docker容器技术做支撑,通过开源的Elastic Stack技术设计实现了可视化运维监控平台。在实践中,该平台能够很好地完成日志数据的传输、存储、分析和可视化展示,提高了数据中心各系统的稳定性和业务的连续性。
展开更多
关键词
DOCKER
Elasticsearch
BEAT
kibana
可视化
下载PDF
职称材料
基于Flume的分布式日志聚合系统的研究
被引量:
2
3
作者
陈军
《科技视界》
2017年第11期77-77,114,共2页
互联网的迅猛发展以及大数据相关技术的兴起,使得日志数据的规模日益剧增,给已有的日志采集及分析系统带来了挑战;本文结合使用Flume、Elasticsearch以及Kibana等技术手段提出了一种分布式的日志采集分析系统,从系统设计和架构等方面提...
互联网的迅猛发展以及大数据相关技术的兴起,使得日志数据的规模日益剧增,给已有的日志采集及分析系统带来了挑战;本文结合使用Flume、Elasticsearch以及Kibana等技术手段提出了一种分布式的日志采集分析系统,从系统设计和架构等方面提出了新的解决思路,并针对Flume的访问日志进行了实时采集和分析及展示。
展开更多
关键词
日志采集
FLUME
Elasticsearch
kibana
下载PDF
职称材料
基于FEK的大数据网络日志分析
被引量:
1
4
作者
何江银
黄岷
+1 位作者
李端肃
吴明生
《信息记录材料》
2019年第5期149-150,共2页
信息技术在企业中的迅速普及与应用,随之带来的是大数据处理的困难与挑战。企业每天生成很多日志文件,如果能实时处理分析日志数据,企业就能够提高管理效率,为生产经营提供更好地服务。本文介绍了基于Flume的服务器日志采集与分析过程,...
信息技术在企业中的迅速普及与应用,随之带来的是大数据处理的困难与挑战。企业每天生成很多日志文件,如果能实时处理分析日志数据,企业就能够提高管理效率,为生产经营提供更好地服务。本文介绍了基于Flume的服务器日志采集与分析过程,基于Elastic Search分布式存储搜索,使用Kibana对企业资源访问进行了分析。
展开更多
关键词
FLUME
Elasticsearch
kibana
网络日志分析
下载PDF
职称材料
利用Kafka实现大话务并发数据流的吞吐系统
被引量:
3
5
作者
唐颖淳
《电信科学》
2018年第S2期134-139,共6页
为了解决中国电信股份有限公司上海分公司的统一消息推送平台的数据吞吐量较低,无法满足新的业务需求的问题,采用流式数据处理技术实现了一种基于运营商的大话务业务系统构建模式。首先,在充分研究了业内实时流式处理技术的发展以及运...
为了解决中国电信股份有限公司上海分公司的统一消息推送平台的数据吞吐量较低,无法满足新的业务需求的问题,采用流式数据处理技术实现了一种基于运营商的大话务业务系统构建模式。首先,在充分研究了业内实时流式处理技术的发展以及运营商本身信令数据源的特点之后,确定以Kafka作为消息队列组件,在业务处理过程中为了提供毫秒级的数据流查询能力,采用了Redis组件提供基于内存的Key-Value引擎。另外,为实现平台的高可靠性及易维护性,采用Kafka+Elasticsearch+Logstash+Kiban实现了日志监控子系统。最后对应用情况进行分析,并对系统的进一步改进提出了建议。
展开更多
关键词
流处理
高吞吐量
高并发
Kafka
REDIS
Elasticsearch+Logstash+
kibana
下载PDF
职称材料
基于Kibana系统的机器人故障数据分析
被引量:
1
6
作者
张艳清
《科技与创新》
2021年第19期23-25,共3页
随着互联网和信息产业的快速发展,大数据的应用市场也在不断扩大,大数据作为国家的一项战略任务,在推动中国经济转型升级过程中发挥着至关重要的作用。特别是进入21世纪后,高科技技术飞速发展以及市场竞争日趋激烈,工业生产通过大数据...
随着互联网和信息产业的快速发展,大数据的应用市场也在不断扩大,大数据作为国家的一项战略任务,在推动中国经济转型升级过程中发挥着至关重要的作用。特别是进入21世纪后,高科技技术飞速发展以及市场竞争日趋激烈,工业生产通过大数据分析更是向着信息化、高速化、智能化的方向发展。同时,大数据可以将人类从旧的价值观和发展观中解放出来,从全新的视角理解世界的科技进步和复杂技术的涌现,改变人类对工作、生活和思维的看法。主要以北京奔驰前驱车工厂装焊车间为背景,讲述了采用Kibana系统抓取相关机器人报警数据的过程,通过对数据分析制定相应的预防性措施,从而大大降低装焊车间故障率。
展开更多
关键词
大数据
机器人故障
kibana
系统
预防性措施
下载PDF
职称材料
机场客源大数据应用研究与设计
7
作者
关华
王丽娟
+2 位作者
程宇
吴洁
冯景亮
《电脑编程技巧与维护》
2020年第9期96-98,共3页
客源分析对民航业发展至关重要,提出了一种基于旅客位移信息的机场客源分析系统,深入挖掘机场客源结构,提升机场客源覆盖面和渗透力。在此基础上,分析了机场覆盖能力及竞争情况,评估优化机场航线资源,具有规模化推广价值。
关键词
客源分析
机场辐射域
机场竞争力
ElasticSearch文档数据库
kibana
分析平台
下载PDF
职称材料
题名
基于Flume的分布式日志采集分析系统设计与实现
被引量:
27
1
作者
陈飞
艾中良
机构
华北计算技术研究所
出处
《软件》
2016年第12期-,共7页
文摘
互联网的迅猛发展以及大数据相关技术的兴起,使得日志数据的规模日益剧增,给已有的日志采集及分析系统带来了挑战;同时针对互联网安全的攻击活动也层出不穷,如何在海量的日志中及时提取有效的信息以为企业安全提供信息支撑,也给现有的分析系统提出了新的需求。本文结合使用Flume、Elasticsearch以及Kibana等技术手段提出了一种分布式的日志采集分析系统,从系统设计和架构等方面提出了新的解决思路,并针对Nginx的访问日志进行了实时采集和分析及展示,完成了原型系统的实现,实验证明,基于Flume的分布式的日志采集分析系统方案具有可行性。
关键词
信息安全
日志采集
FLUME
Elasticsearch
kibana
Keywords
Information Security
Log collection
Flume
Elasticsearch
kibana
分类号
TP311.52 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
基于Elastic Stack的高校数据中心可视化运维的研究与实现
被引量:
2
2
作者
杜巧宝
李玲
机构
安徽职业技术学院
出处
《电脑与电信》
2021年第6期60-64,共5页
文摘
高校数据中心的运维是信息化发展中不可或缺的一部分,需要能够通过图形化方式监控数据中心运行状态,提前预判问题、快速定位问题和排除故障。以Docker容器技术做支撑,通过开源的Elastic Stack技术设计实现了可视化运维监控平台。在实践中,该平台能够很好地完成日志数据的传输、存储、分析和可视化展示,提高了数据中心各系统的稳定性和业务的连续性。
关键词
DOCKER
Elasticsearch
BEAT
kibana
可视化
Keywords
Docker
Elasticsearch
Beat
kibana
visualization
分类号
TP308 [自动化与计算机技术—计算机系统结构]
下载PDF
职称材料
题名
基于Flume的分布式日志聚合系统的研究
被引量:
2
3
作者
陈军
机构
湖北工业大学
出处
《科技视界》
2017年第11期77-77,114,共2页
文摘
互联网的迅猛发展以及大数据相关技术的兴起,使得日志数据的规模日益剧增,给已有的日志采集及分析系统带来了挑战;本文结合使用Flume、Elasticsearch以及Kibana等技术手段提出了一种分布式的日志采集分析系统,从系统设计和架构等方面提出了新的解决思路,并针对Flume的访问日志进行了实时采集和分析及展示。
关键词
日志采集
FLUME
Elasticsearch
kibana
分类号
TP368.5 [自动化与计算机技术—计算机系统结构]
下载PDF
职称材料
题名
基于FEK的大数据网络日志分析
被引量:
1
4
作者
何江银
黄岷
李端肃
吴明生
机构
甘肃银光聚银化工有限公司
出处
《信息记录材料》
2019年第5期149-150,共2页
文摘
信息技术在企业中的迅速普及与应用,随之带来的是大数据处理的困难与挑战。企业每天生成很多日志文件,如果能实时处理分析日志数据,企业就能够提高管理效率,为生产经营提供更好地服务。本文介绍了基于Flume的服务器日志采集与分析过程,基于Elastic Search分布式存储搜索,使用Kibana对企业资源访问进行了分析。
关键词
FLUME
Elasticsearch
kibana
网络日志分析
分类号
TP39 [自动化与计算机技术—计算机应用技术]
下载PDF
职称材料
题名
利用Kafka实现大话务并发数据流的吞吐系统
被引量:
3
5
作者
唐颖淳
机构
中国电信股份有限公司上海分公司政企客服部
出处
《电信科学》
2018年第S2期134-139,共6页
文摘
为了解决中国电信股份有限公司上海分公司的统一消息推送平台的数据吞吐量较低,无法满足新的业务需求的问题,采用流式数据处理技术实现了一种基于运营商的大话务业务系统构建模式。首先,在充分研究了业内实时流式处理技术的发展以及运营商本身信令数据源的特点之后,确定以Kafka作为消息队列组件,在业务处理过程中为了提供毫秒级的数据流查询能力,采用了Redis组件提供基于内存的Key-Value引擎。另外,为实现平台的高可靠性及易维护性,采用Kafka+Elasticsearch+Logstash+Kiban实现了日志监控子系统。最后对应用情况进行分析,并对系统的进一步改进提出了建议。
关键词
流处理
高吞吐量
高并发
Kafka
REDIS
Elasticsearch+Logstash+
kibana
分类号
TP311.13 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
基于Kibana系统的机器人故障数据分析
被引量:
1
6
作者
张艳清
机构
北京奔驰汽车有限公司
出处
《科技与创新》
2021年第19期23-25,共3页
文摘
随着互联网和信息产业的快速发展,大数据的应用市场也在不断扩大,大数据作为国家的一项战略任务,在推动中国经济转型升级过程中发挥着至关重要的作用。特别是进入21世纪后,高科技技术飞速发展以及市场竞争日趋激烈,工业生产通过大数据分析更是向着信息化、高速化、智能化的方向发展。同时,大数据可以将人类从旧的价值观和发展观中解放出来,从全新的视角理解世界的科技进步和复杂技术的涌现,改变人类对工作、生活和思维的看法。主要以北京奔驰前驱车工厂装焊车间为背景,讲述了采用Kibana系统抓取相关机器人报警数据的过程,通过对数据分析制定相应的预防性措施,从而大大降低装焊车间故障率。
关键词
大数据
机器人故障
kibana
系统
预防性措施
分类号
TP242 [自动化与计算机技术—检测技术与自动化装置]
下载PDF
职称材料
题名
机场客源大数据应用研究与设计
7
作者
关华
王丽娟
程宇
吴洁
冯景亮
机构
广东机场白云信息科技有限公司
出处
《电脑编程技巧与维护》
2020年第9期96-98,共3页
文摘
客源分析对民航业发展至关重要,提出了一种基于旅客位移信息的机场客源分析系统,深入挖掘机场客源结构,提升机场客源覆盖面和渗透力。在此基础上,分析了机场覆盖能力及竞争情况,评估优化机场航线资源,具有规模化推广价值。
关键词
客源分析
机场辐射域
机场竞争力
ElasticSearch文档数据库
kibana
分析平台
分类号
TP311.13 [自动化与计算机技术—计算机软件与理论]
V354 [自动化与计算机技术—计算机科学与技术]
下载PDF
职称材料
题名
作者
出处
发文年
被引量
操作
1
基于Flume的分布式日志采集分析系统设计与实现
陈飞
艾中良
《软件》
2016
27
下载PDF
职称材料
2
基于Elastic Stack的高校数据中心可视化运维的研究与实现
杜巧宝
李玲
《电脑与电信》
2021
2
下载PDF
职称材料
3
基于Flume的分布式日志聚合系统的研究
陈军
《科技视界》
2017
2
下载PDF
职称材料
4
基于FEK的大数据网络日志分析
何江银
黄岷
李端肃
吴明生
《信息记录材料》
2019
1
下载PDF
职称材料
5
利用Kafka实现大话务并发数据流的吞吐系统
唐颖淳
《电信科学》
2018
3
下载PDF
职称材料
6
基于Kibana系统的机器人故障数据分析
张艳清
《科技与创新》
2021
1
下载PDF
职称材料
7
机场客源大数据应用研究与设计
关华
王丽娟
程宇
吴洁
冯景亮
《电脑编程技巧与维护》
2020
0
下载PDF
职称材料
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
上一页
1
下一页
到第
页
确定
用户登录
登录
IP登录
使用帮助
返回顶部