高级课程日志易16版本介绍.pptx

大数据驱动的IT运维 －日志易1.6版产品介绍;;IT运维当前的状态;;IT 运维的大数据分析;IT运维的大数据怎么来？;IT运维的大数据怎么来？;IT运维的大数据 —— 每天遇到的时间序列机器数据;;传统大数据方案面对IT运维需求的不适感;日志3.0时代：实时有哪些信誉好的足球投注网站引擎;;;;日志易－日志解析与日志分组;日志易－日志有哪些信誉好的足球投注网站与即时排名统计;日志易－日志告警;;日志易－日志分析展示;;基于用户分组的权限设计;全新的『引导式』Heka配置流程设计;全新的字段提取规则和日志关联逻辑;更有效的字段提取规则验证设计;全新的Manager -- 页面式部署和自监控系统;新增消息提醒和告警历史查询功能;增强的SPL语义和可视化效果;报表功能;上下文查看;更全面的过滤查询辅助;;;;;;;;;;600多个业务系统，面对每天产生大海量（几十TB）的日志数据，日常运维过程中，往往面临以下问题： 1.逐台登陆服务器，无法集中查看日志和基于海量数据的数据挖掘及用户行为分析。 2.日志查询方式比较原始，只能less、grep和awk等常见的linux指令，无法多维度查询（时间段、关键字、字段值） 3.无法进行日志的业务逻辑分析和告警。;1.平安科技目前接入约60多个业务系统（总共600多个，逐步接入），每秒产生约30万条日志，由于日志量庞大，为了降低防火墙策略的复杂度以及防火墙流量压力，将网络设备，服务器，业务应用日志通过专门网口接入到内网万兆交换机，直接转发到日志易集群（目前部署约30台服务器，后续根据业务量增加，步骤扩容） 2.各业务系统服务器中部署日志易采集agent，用于增量读取业务日志;;;;;已接入60个应用系统 (一帐通，移动展业，任意门，邮件网关…)使用日志易后感受： 1.省去登陆服务器的操作，快速的同时更降低人为登陆服务器误操作引发生产故障。 2.查询条件多维度，提升定位异常原因的效率。 3.可以对日志数据进行数据挖掘、用户行为分析并提取相应的报表，同时还可以针对应用系统健康指数提前告警，而不是事后补漏。;;;;;1.业务关联分析聚合规则由用户灵活配置（boss，crm业务系统即使产生变化也不会影响到日志易平台的功能）;;各地市业务请求量排名;;;业务系统集中到省移动的中心机房，每天业务日志量大 计费系统是IT运维最关心的系统，通过流量日志，业务日志分析，可以及时发现业务系统故障点，及时处理 前端营业系统，更关心用户体验，会较多的使用排序对比等方式，为IT运维的后续优化，指明方向;;日志易，日志分析更容易