告警系统的一些想法

基础

以应用为中心建设cmdb

能力

收集

多渠道收集(zabbix,prometheus等)

决策

告警分组
告警静默
告警抑制
告警收敛
告警权重
告警级联
告警升级
告警降噪

周边

告警认领+解决+统计(未认领,未解决)等
多渠道告警(电话,短信,钉钉消息,邮件等)
告警信息富化
告警排查时期临时赋能权限
告警解决不了主动升级
告警拉群
告警关联log和trace和metrics