广电日志分析系统

需求

广电集团中有若干个系统都产生日志信息,目前大约分布与70到80台服务器中,分别是windows与Linux操作系统。需要将服务器上产生的日志文件利用我们的技术进行解析

设计

每个日志工作站负责30-50个服务器的日志解析工作。可以根据实际需求进行设置,也可以增加或减少日志解析工作站。

测试

目前,针对得到的日志文件进行了分析。完成的了基本的解析算法,并对算法进行了大规模的优化。日志解析基本做到了秒级的处理。以crm_dsmcc点播日志搜集\EdgeB\SSS1中的48M的日志文件为例,解析基本在一秒之内完成。

运行demo.exe,点击"打开日志文件"按钮,选择crm_dsmcc点播日志搜集\EdgeB\SSS1下的文件

在 "Session"选项卡下,左边显示的是全部有assetId的session,右边显示的是该Session对应的日志,其中红色字体的日志为关键日志。

在 "日志记录"选项卡下,显示的该日志文件的所有记录

相关推荐
我是哈哈hh5 分钟前
【Node.js】ECMAScript标准 以及 npm安装
开发语言·前端·javascript·node.js
张元清27 分钟前
电商 Feeds 流缓存策略:Temu vs 拼多多的技术选择
前端·javascript·面试
一枚前端小能手28 分钟前
🎨 CSS布局从入门到放弃?Grid让你重新爱上布局
前端·css
晴空雨29 分钟前
React 合成事件原理:从事件委托到 React 17 的重大改进
前端·react.js
魏嗣宗31 分钟前
Node.js 网络编程全解析:从 Socket 到 HTTP,再到流式协议
前端·全栈
pepedd86432 分钟前
还在开发vue2老项目吗?本文带你梳理vue版本区别
前端·vue.js·trae
zhang988000037 分钟前
储能领域大数据平台的设计中如何使用 Hadoop、Spark、Flink 等组件实现数据采集、清洗、存储及实时 / 离线计算,支持储能系统分析与预测
大数据·hadoop·spark
老蒋新思维42 分钟前
存量竞争下的破局之道:品牌与IP的双引擎策略|创客匠人
大数据·网络·知识付费·创客匠人·知识变现
pepedd8641 小时前
浅谈js拷贝问题-解决拷贝数据难题
前端·javascript·trae
@大迁世界1 小时前
useCallback 的陷阱:当 React Hooks 反而拖了后腿
前端·javascript·react.js·前端框架·ecmascript