生产环境日志多大 rotate 一个文件合适?现在是 1GB rotate 一个文件, gzip 压缩完每个文件一百多 MB,一天会有 4~5 个文件(压缩前 4~5GB) - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
请不要在回答技术问题时复制粘贴 AI 生成的内容
drymonfidelia
生产环境日志多大 rotate 一个文件合适?现在是 1GB rotate 一个文件, gzip 压缩完每个文件一百多 MB,一天会有 4~5 个文件(压缩前 4~5GB)
  •  
  •   drymonfidelia Feb 21, 2024 2917 views
    This topic created in 795 days ago, the information mentioned may be changed or developed.
    19 replies    2024-02-22 19:38:39 +08:00
    chendy
        1
    chendy  
       Feb 21, 2024
    老项目,无日志收集,出问题只能人肉看,日志文件 20m 一滚,超过一月压缩,超过三月删除
    但是日志量没这么大,一天几百 m
    Sanko
        2
    Sanko  
       Feb 21, 2024
    我这里是 10M 一滚
    rorwprint
        3
    rorwprint  
       Feb 21, 2024
    看场景是否可以按小时滚
    zliea
        4
    zliea  
       Feb 21, 2024
    我赞同 3# 这个数量可以小时
    feelinglucky
        5
    feelinglucky  
       Feb 21, 2024
    无定式,看使用场景以及服务器的配置等各种条件而定

    话说没有被日志撑爆服务器磁盘的经验,对于后端开发职业精力而言是不完整的,哈哈哈
    guo4224
        6
    guo4224  
       Feb 21, 2024
    4-5g 的文件,你还能折腾出花来吗
    drymonfidelia
        7
    drymonfidelia  
    OP
       Feb 21, 2024
    @feelinglucky 已经发生过不知道多少次日志撑爆硬盘了 要不我们能跑就行的代码连压缩都不会做
    Dragonish3600
        8
    Dragonish3600  
       Feb 21, 2024 via iPhone
    按时间不是按大小,
    drymonfidelia
        9
    drymonfidelia  
    OP
       Feb 21, 2024
    @ladypxy 我们产品不同时间活跃用户量差异很大,不适合按时间
    darksheep9527
        10
    darksheep9527  
       Feb 21, 2024
    @drymonfidelia #9 我觉得按时间会更合适 因为去 support 的时候 可以按照用户操作时间 直接找对应的日志文件
    按大小切片 找日志文件就会慢一些
    drymonfidelia
        11
    drymonfidelia  
    OP
       Feb 21, 2024
    @darksheep9527 文件名里有创建时间呀,只要知道发生问题的时间还是可以一次定位到日志文件
    knightdf
        12
    knightdf  
       Feb 21, 2024
    以 vim 打开不卡为标准,哈哈
    kneo
        13
    kneo  
       Feb 21, 2024 via Android
    一天一个文件比较方便。建议 10g 。
    bronyakaka
        14
    bronyakaka  
       Feb 21, 2024
    建议按天滚动,保留 1 个月。
    体积的话多大都行的,看存储够不够用,不会有太大性能问题

    (推荐一下我的 kafka gui 客户端,非常好用: https://github.com/Bronya0/Kafka-King/)
    paopjian
        15
    paopjian  
       Feb 21, 2024
    保存报错日志,操作日志就随意吧?
    laminux29
        16
    laminux29  
       Feb 21, 2024   1
    这要根据财力来。

    比如,如果给每台设备的系统盘,就配置了 2TB SSD ,单个日志 100GB 都没问题。

    至于归档,直接 7z 最高压缩方式。
    julyclyde
        17
    julyclyde  
       Feb 22, 2024
    科学的讲,你都不该写到盘上
    日志 是流
    qiyilai
        18
    qiyilai  
       Feb 22, 2024
    我这边 100M
    CHENXCHEN
        19
    CHENXCHEN  
       Feb 22, 2024
    我们是按大小+时间来轮转,保留最近 1 个月或者最近 20 个文件
    About     Help     Advertise     Blog     API     FAQ     Solana     5407 Online   Highest 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 64ms UTC 05:51 PVG 13:51 LAX 22:51 JFK 01:51
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86