请教一下关于 elk 日志报警,服务重启不断推送报警问题 - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
Curiosity777
V2EX    Java

请教一下关于 elk 日志报警,服务重启不断推送报警问题

  •  
  •   Curiosity777 312 天前 2066 次点击
    这是一个创建于 312 天前的主题,其中的信息可能已经有所发展或是发生改变。

    做了一个 elk 日志监控系统,通过 elastalert2 推送到钉钉上,遇到的问题是微服务某一个服务发版重启了,(目前都是单机部署)会导致不断的发送 timeout 这类的报警,期望是,重启服务阶段不进行报警,大佬们有好的思路吗

    11 条回复    2025-01-21 09:27:06 +08:00
    2Nfree
        1
    2Nfree  
       312 天前
    elastalert2 的日志告警原理上就是查询 ES ,直接设置规则 query must_not 对应 timeout 的日志类别,如果要是要求更高级的日志告警还是推荐用 flink cep 去做
    Curiosity777
        2
    Curiosity777  
    OP
       312 天前
    @2Nfree 好的,只是想控制重启期间的 timeout ,正常的还是要的,cep 我去了解下,感谢您的宝贵回答
    2Nfree
        3
    2Nfree  
       312 天前
    @Curiosity777 #2 如果重启期间的 timeout 报错和正常的 timeout 的报错是一致的,那你这种需要监听日志上下文,如应用程序获取了 SIGNTEM 的信号,就发出一个应用被关闭的信号日志,然后通过窗口监听上文中有被关闭的信号再去屏蔽发版的 timeout 报错,但是我感觉这个需求有点伪需求的意思了,你知道他在发版了实际上就人工忽略就好了
    Curiosity777
        4
    Curiosity777  
    OP
       312 天前
    @2Nfree #3 好的,明白了,谢谢大佬
    NoKey
        5
    NoKey  
       312 天前
    咋区分到底是人工停机发版、重启,还是系统自动给 kill 了呢?直接认为忽略啊,x 点到 x 点发版,此时间范围内有运维组跟踪,收到消息请忽略,巴拉巴拉的
    FarmerChillax
        6
    FarmerChillax  
       312 天前
    是不是应该考虑解决方向「为什么重启期间有告警?」
    - 是不是没有最好流量无损?
    FarmerChillax
        7
    FarmerChillax  
       312 天前
    @FarmerChillax 最好 -> 做好
    codepark
        8
    codepark  
       312 天前
    2Nfree
        9
    2Nfree  
       312 天前
    @NoKey #5 确实没有考虑到这个,所以感觉这个有点伪需求的意思
    brianinzz
        10
    brianinzz  
       312 天前
    最近在做日志收集的选型所以 ELK 还是最优解吗? 还是现在有更好的方案
    yhl601125163
        11
    yhl601125163  
       311 天前
    @brianinzz doris
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     1383 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 25ms UTC 16:49 PVG 00:49 LAX 08:49 JFK 11:49
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86