国产欧美精品一区二区,中文字幕专区在线亚洲,国产精品美女网站在线观看,艾秋果冻传媒2021精品,在线免费一区二区,久久久久久青草大香综合精品,日韩美aaa特级毛片,欧美成人精品午夜免费影视

基于流式處理架構的日志采集系統的設計與實(shí)現
DOI:
CSTR:
作者:
作者單位:

1.公安部第三研究所 信息安全技術(shù)部;2.上海辰銳信息科技公司 研發(fā)中心

作者簡(jiǎn)介:

通訊作者:

中圖分類(lèi)號:

基金項目:

上海市人才發(fā)展資金資助(No.2020016)、中國博士后科學(xué)基金資助(No.2020M670998)、上海市自然科學(xué)基金資助(No.21ZR1422000)、公安部科技計劃項目資助(No.2019JZX004)


Design and Implementation of Log Collection System Based on Stream Processing Architecture
Author:
Affiliation:

Fund Project:

  • 摘要
  • |
  • 圖/表
  • |
  • 訪(fǎng)問(wèn)統計
  • |
  • 參考文獻
  • |
  • 相似文獻
  • |
  • 引證文獻
  • |
  • 資源附件
  • |
  • 文章評論
    摘要:

    對信息系統運行記錄、操作日志、告警信息的采集問(wèn)題進(jìn)行了研究,提出了一種面向泛政府行業(yè)安全運行管理平臺的統一日志采集系統。采用基于消息隊列的流式處理架構,實(shí)現日志采集、日志處理、日志上報等各個(gè)環(huán)節的解耦;采用標準化接口和插件技術(shù),實(shí)現各種異構日志信息的采集和數據上報;采用消息隊列的流量削峰技術(shù),保證日志傳輸的安全可靠;依據日志流量特征,提出一種支持動(dòng)態(tài)調整消費組的設計模式,滿(mǎn)足系統的高性能要求。整個(gè)系統由日志采集、數據上報、數據管理、系統管理、策略管理、Agent管理、日志源管理模塊和日志采集代理(Agent)子系統組成,可滿(mǎn)足對各類(lèi)安全數據的集中分析、安全威脅感知和智能研判。

    Abstract:

    This paper studies the collection of operation record, operation log and alarm information of information system, and puts forward a unified log collection system for pan-government industry safety operation management platform. The flow processing architecture based on message queue is adopted to realize the decoupling of log collection, log processing and log reporting. Standardized interfaces and plug-ins are used to collect heterogeneous log information and data. The traffic peak clipping technology of message queue is adopted to ensure the safety and reliability of log transmission. According to the characteristics of log traffic, a design mode supporting dynamic adjustment of consumption group is proposed to meet the high performance requirements of the system. The whole system is composed of log collection, data reporting, data management, system management, policy management, Agent management, log source management module and log collection subsystem, which can meet the centralized analysis, security threat perception and intelligent analysis of various security data.

    參考文獻
    相似文獻
    引證文獻
引用本文

邵旭東,樊志杰,張敬鋒,曹志威,周明富,熊已興,張林.基于流式處理架構的日志采集系統的設計與實(shí)現計算機測量與控制[J].,2023,31(4):272-280.

復制
分享
文章指標
  • 點(diǎn)擊次數:
  • 下載次數:
  • HTML閱讀次數:
  • 引用次數:
歷史
  • 收稿日期:2022-12-14
  • 最后修改日期:2022-12-14
  • 錄用日期:2023-02-10
  • 在線(xiàn)發(fā)布日期: 2023-04-24
  • 出版日期:
文章二維碼
吉水县| 突泉县| 关岭| 潮州市| 皋兰县| 宁都县| 东安县| 吉安县| 焦作市| 任丘市| 栾城县| 平凉市| 涿鹿县| 云阳县| 北辰区| 凤翔县| 平陆县| 塔河县| 朝阳市| 抚顺县| 奎屯市| 拉萨市| 永城市| 上犹县| 许昌市| 宁乡县| 咸阳市| 顺义区| 永嘉县| 新化县| 简阳市| 昆明市| 麦盖提县| 贵溪市| 甘南县| 星座| 那坡县| 鹿泉市| 宾川县| 沙河市| 巫溪县|