摘要
针对万兆网络流量采集容易丢包和海量数据难以存储的问题,设计一种特定的网络测量方法及数据存储方式,其中包括在Linux内核TCP/IP协议栈中添加快速匹配算法以实现IP快速过滤、分布式多点采集机制对不同地点服务器进行检测、多粒度聚合对海量数据进行存储。在运营商实地环境下进行测试,结果表明,该系统能够达到预期的功能设计目标。
This paper designes a specific network measurement and data storage to solve the packet loss and massive data storage in gigabit network traffic collection,including adding fast matching algorithm in TCP/IP stack of the linux kernel,distributing multi-server collection mechanisms and multi-grain aggregates of massive data storage.This system achieves the expected degsign objective by operator's real-time test.
出处
《计算机工程》
CAS
CSCD
北大核心
2011年第7期87-90,共4页
Computer Engineering
基金
教育部科学技术基金资助重点项目(208117)
重庆市教委科学技术基金资助项目(KJ080528)
关键词
互联网数据中心
流量测量
并行采集
Internet Data Center(IDC)
traffic measure
parallel collection