数据中心里如何做好日志监控
发布网友
发布时间：2022-04-22 05:12
共2个回答
热心网友
时间：2022-06-04 00:23
展开3全部
数据中心的日志类别众多，来自于服务器、网络、数据库、中间件等IT基础架构的，还有上层业务应用产生的，每天增加的规模都很大。
想要做好日志监控，关键需要考虑好哪个类别的日志中需要提炼哪些信息用于监控，日志数据中蕴含了许多有价值讯息，但并非都适合于监控。
既然是谈监控，实时性就需要强，所以日志的指标化提取和关键字匹配是通常的监控手段，指标化提取就要考虑日志解析的能力，一般的日志分析平台都有自定*析规则的能力，但往往是在日志数据落盘后通过查询方式获取，这种方式用于事后分析是可行的，但事中监控实时性就不够了，因为无论哪种存放日志的数据库（ES或者其他大数据架构）都经不起大量的频繁查询，除非为了性能牺牲掉监控的密度。
正确的方式是在日志平台建设时考虑加一道流式处理，在流里做日志的解析、关键字提取以及指标数据的聚合运算，以及异常检测和告警，这样的话才能保证日志监控的及时有效，落盘后的数据仍然可以支持事后分析；另外一种新型的日志监控是基于算法的异常模式识别，这种做法的好处是完全不用预先解析日志就可以在实时流处理引擎里跑异常模式识别算法，把有别于历史同期的异常模板找出来，同时贴出来日志原文，这样就可以在不需要写解析规则（特别是日志量大变化快的情况）时也可以监控日志异常，发现异常后仍然可以后期处理日志中的关键信息，将其解析出来生成规则，作为日常监控关键字或者指标；这两种方法可以相辅相成，提高日志数据的监控效率。
当然，除了监控手段本身，日志数据的规范化治理也很重要，数据中心应该统一日志规范，对于不同种类和级别的业务分层分类管理日志，对于日志的指标化要形成体系并持续维护。这种日志质量的提升对于做好监控是一种基础支撑力。
热心网友
时间：2022-06-04 00:23
怎样将数据中心的日志监控有效做起来，是每个数据中心最为关心的问题。首先，日志信息要统一格式；其次，日志采集与业务转发分离，缩短故障定位和恢复的时间；第三，日志信息要简洁和准确，大大节省日常运维的检查时间；第四，很多数据中心已经开始做自动化的运维管理，对日志服务器增加自动化检查的脚本，通过脚本对日志进行检查，节省人工成本；第五，与设备商做好交流沟通，要求设备商提供完整的日志信息，所有的故障都应该通过日志反映出来，这样才能高效运维。
