广电日志分析系统

需求

广电集团中有若干个系统都产生日志信息,目前大约分布与70到80台服务器中,分别是windows与Linux操作系统。需要将服务器上产生的日志文件利用我们的技术进行解析

设计

每个日志工作站负责30-50个服务器的日志解析工作。可以根据实际需求进行设置,也可以增加或减少日志解析工作站。

测试

目前,针对得到的日志文件进行了分析。完成的了基本的解析算法,并对算法进行了大规模的优化。日志解析基本做到了秒级的处理。以crm_dsmcc点播日志搜集\EdgeB\SSS1中的48M的日志文件为例,解析基本在一秒之内完成。

运行demo.exe,点击"打开日志文件"按钮,选择crm_dsmcc点播日志搜集\EdgeB\SSS1下的文件

在 "Session"选项卡下,左边显示的是全部有assetId的session,右边显示的是该Session对应的日志,其中红色字体的日志为关键日志。

在 "日志记录"选项卡下,显示的该日志文件的所有记录

相关推荐
小政爱学习!19 分钟前
封装axios、环境变量、api解耦、解决跨域、全局组件注入
开发语言·前端·javascript
魏大帅。24 分钟前
Axios 的 responseType 属性详解及 Blob 与 ArrayBuffer 解析
前端·javascript·ajax
花花鱼30 分钟前
vue3 基于element-plus进行的一个可拖动改变导航与内容区域大小的简单方法
前端·javascript·elementui
k093334 分钟前
sourceTree回滚版本到某次提交
开发语言·前端·javascript
zmd-zk39 分钟前
kafka+zookeeper的搭建
大数据·分布式·zookeeper·中间件·kafka
激流丶40 分钟前
【Kafka 实战】如何解决Kafka Topic数量过多带来的性能问题?
java·大数据·kafka·topic
EricWang13581 小时前
[OS] 项目三-2-proc.c: exit(int status)
服务器·c语言·前端
September_ning1 小时前
React.lazy() 懒加载
前端·react.js·前端框架
测试界的酸菜鱼1 小时前
Python 大数据展示屏实例
大数据·开发语言·python
时差9531 小时前
【面试题】Hive 查询:如何查找用户连续三天登录的记录
大数据·数据库·hive·sql·面试·database