生产环境出了问题,直接责任人是我,现在都在排查原因,我心里很慌,应该怎么办,求支招。 - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
baofu100year
V2EX    职场话题

生产环境出了问题,直接责任人是我,现在都在排查原因,我心里很慌,应该怎么办,求支招。

  •  
  •   baofu100year 2020-01-19 11:03:54 +08:00 9554 次点击
    这是一个创建于 2099 天前的主题,其中的信息可能已经有所发展或是发生改变。
    第 1 条附言    2020-01-19 18:22:39 +08:00
    经一整天系统的排查,发现受到影响的数据不算是重要数据(不会影响系统正常流程),已经出错的数据之后再做维护,我的心也是彻底落了下来。感谢各位的安慰以及支招
    62 条回复    2020-01-20 17:23:55 +08:00
    baofu100year
        1
    baofu100year  
    OP
       2020-01-19 11:08:31 +08:00
    关键是下午还想去面试,感觉自己现在心态爆炸
    MrJeff
        2
    MrJeff  
       2020-01-19 11:10:36 +08:00
    写好 CaseStudy
    3789
        3
    3789  
       2020-01-19 11:18:40 +08:00 via Android
    表面荒一匹,实则稳如老狗
    baofu100year
        4
    baofu100year  
    OP
       2020-01-19 11:22:05 +08:00
    影响范围很大,半个月的数据都有问题,现在正在想补救措施,脑子都大了
    zhangdszq
        5
    zhangdszq  
       2020-01-19 11:23:29 +08:00   1
    事情出了慌也没用, 像解题一样一步步解决
    baofu100year
        6
    baofu100year  
    OP
       2020-01-19 11:23:31 +08:00
    还有一个 kai men hong,预计 50w 条数据有问题。
    shiran3f
        7
    shiran3f  
       2020-01-19 11:24:49 +08:00   2
    慌也改变不了客观事实,别想太多,态度强势一点然后如果是尽职状态了,那也没什么好担心了,挺直腰板做好应急措施和事后。出问题不担心,第一时间控制损失,控制住了就快点恢复,之后就说我们的恢复流程、恢复效率怎么怎么强。下次怎么改进。其他的就是该怎么奖惩怎么奖惩了,听 kan 天 lao 由 ban 命 xin 了 qing。
    guojiaxiang
        8
    guojiaxiang  
       2020-01-19 11:25:05 +08:00
    @taylorsfan 测试让过的[狗头]
    misaka19000
        9
    misaka19000  
       2020-01-19 11:26:08 +08:00
    有啥好慌的,先想着解决,解决不了大不了被开除,多大点事
    moyupoi
        10
    moyupoi  
       2020-01-19 11:29:18 +08:00 via iPhone   3
    慌说明你有责任心,对事情负责,如果承受不住就先把面试延期先解决当前的问题,如果能兼顾,就该去面试去面试,外一面上也给自己留条后路
    baofu100year
        11
    baofu100year  
    OP
       2020-01-19 11:30:06 +08:00
    @misaka19000 我只是怕背赔偿责任 (WAI BAO),开除倒是小问题
    fewok
        12
    fewok  
       2020-01-19 11:35:29 +08:00
    先讲清楚最坏情况的影响。
    gzchen
        13
    gzchen  
       2020-01-19 11:37:54 +08:00
    影响大的话,赔偿跑不了咯
    twl007
        14
    twl007  
       2020-01-19 12:08:30 +08:00
    准确来说这部是团队的问题么 为什么会是你个人的责任?
    lovedebug
        15
    lovedebug  
       2020-01-19 12:12:46 +08:00 via Android
    测试呢?怎么测的?没自动化?没 act ?没 e2e ?流程呢?没监控?没 critical log ?没人看线上日志?背锅也轮不到你呀。我感觉是项目发布流程的问题
    dxgundam01
        16
    dxgundam01  
       2020-01-19 12:36:29 +08:00 via Android
    让外包做直接负责人,甲方做什么?
    renmu
        17
    renmu  
       2020-01-19 12:37:02 +08:00 via Android
    代码 review 呢,测试呢,背锅也轮不到你,不要慌
    Perry
        18
    Perry  
       2020-01-19 12:37:38 +08:00 via iPhone   1
    这种让责任人背锅的公司不待也罢
    mmdsun
        19
    mmdsun  
       2020-01-19 12:41:40 +08:00 via Android   3
    代码 bug 有不是很正常么。

    还要让程序员赔钱?

    (那医生治死人了岂不是要偿命。
    otakustay
        20
    otakustay  
       2020-01-19 12:44:25 +08:00   3
    赔偿是不可能赔偿的,大不了直接走人,公司他有本身法律上索赔,我不信哪家法院会支持。问题出了就一定先解决问题,解决完了再慌也不迟
    sampeng
        21
    sampeng  
       2020-01-19 12:52:45 +08:00
    按你这个思路。。。谁敢做运维?
    出一丢丢事就是删库跑路?
    deorth
        22
    deorth  
       2020-01-19 13:15:58 +08:00   1
    不要方,问题很大,方也没用
    sadfQED2
        23
    sadfQED2  
       2020-01-19 13:24:07 +08:00 via Android
    50w 数据,手工改,一天改 1 万条,两个月改完狗头保命
    moyupoi
        24
    moyupoi  
       2020-01-19 13:26:08 +08:00 via iPhone
    开个权限让 V2EX 每个人改 10 条,一天就改完,能不能用就不知道了…
    glaucus
        25
    glaucus  
       2020-01-19 13:26:20 +08:00   2
    看似慌得一批,实则还有空来 V 站水贴
    guojiaxiang
        26
    guojiaxiang  
       2020-01-19 13:56:44 +08:00   1
    @glaucus 天塌下来也不能影响水贴
    wdytoya
        27
    wdytoya  
       2020-01-19 14:03:50 +08:00
    看似慌得一批,实则稳如老狗
    CEBBCAT
        28
    CEBBCAT  
       2020-01-19 14:24:30 +08:00   1
    一个完善的公司,应该是一个不会出错的公司,如果靠出错时致力于把错误的螺丝消灭,那么这家机器已经走在了自我毁灭的路上

    拿多少钱,担多少责。中学老师教过:义务 <-> 权力,我想在这里也是同理
    cnoder
        29
    cnoder  
       2020-01-19 14:26:32 +08:00
    拿多少钱,担多少责
    KuroNekoFan
        30
    KuroNekoFan  
       2020-01-19 14:28:39 +08:00
    出了问题不是先回滚吗
    geminikingfall
        31
    geminikingfall  
       2020-01-19 14:37:55 +08:00
    没事的,我之前删表都没事。。。。
    tabris17
        32
    tabris17  
       2020-01-19 14:39:57 +08:00
    你只是打工的,不用承担赔偿责任
    blackccc
        33
    blackccc  
       2020-01-19 14:43:05 +08:00
    看似慌得一批,实则还有空来 V 站水贴
    luozic
        34
    luozic  
       2020-01-19 14:45:20 +08:00 via iPhone
    慌个啥? fmea 分析中问题只讲在哪里发生的还搞个屁?
    cs3230524
        35
    cs3230524  
       2020-01-19 15:07:53 +08:00
    rm -rf /*
    itechify
        36
    itechify  
    PRO
       2020-01-19 15:44:03 +08:00
    删库跑路吧
    cxh116
        37
    cxh116  
       2020-01-19 15:44:15 +08:00 via Android
    公司都是有限责任公司,生产事故轮不到一个底层员工来背全责。
    a1044634486
        38
    a1044634486  
       2020-01-19 15:46:26 +08:00 via Android
    让负责人收下的人背锅
    westoy
        39
    westoy  
       2020-01-19 15:49:47 +08:00
    那更得抓紧面试了...
    Mac
        40
    Mac  
       2020-01-19 15:51:01 +08:00
    谁验收谁负责啊
    NoString
        41
    NoString  
       2020-01-19 15:56:34 +08:00
    不要慌 我也出过同类型错,认真排查,先止损,再上补丁,最后至于是被 GANK 还是 FIRE 听天由命了
    CeresLC
        42
    CeresLC  
       2020-01-19 16:33:37 +08:00
    先解决问题,然后写问题报告,完事!
    都已经发生了慌什么啊
    1109599636
        43
    1109599636  
       2020-01-19 16:37:36 +08:00
    @mmdsun 你这比喻不行♂医生治死人是要赔钱的
    Huizhen
        44
    Huizhen  
       2020-01-19 16:45:20 +08:00
    @taylorsfan 开门红? 华夏?
    Huizhen
        45
    Huizhen  
       2020-01-19 16:45:43 +08:00
    @Huizhen 竹简?
    Erroad
        46
    Erroad  
       2020-01-19 16:48:23 +08:00
    拿多少钱,担多少责。现在就当问题不是自己的,慢慢查原因,想办法洗数据就好了。我今年搞了两三次这种事情了,每次都是百万单级别,责任不全是我的,年终奖也照样拿
    l8g
        47
    l8g  
       2020-01-19 17:09:44 +08:00
    最多开除,又不会让你赔偿,慌个啥。生产出了问题,整个链路都背锅,不会只有你一个人的责任。
    而且真出了大问题,你自己都不会想在这家公司待下去,况且你本身也在面试了。
    先把这个线上问题解决好,再想之后的事情吧。
    wupher
        48
    wupher  
       2020-01-19 17:14:14 +08:00   1
    那你还有心情在 V2EX 发贴?

    你要真担心后果,不如现在先去找律师咨询一下更靠谱。

    不懂你的角色,如果你只是一个普通员工,安心,最多只能开除你,貌似你对这个不怎么怕。

    如果你是外包承接方,这个要看你们之间合同具体怎么签的了。详情你咨询律师最妥当。如果你们连合同都没签,你就干个给钱写代码的活,那估计更没什么事。

    除此之外,认真协助排查故障原因也是你的责任和道德吧,祝你好运,预祝春节快乐。
    zhouwei520
        49
    zhouwei520  
       2020-01-19 17:19:29 +08:00
    你得老板比你更慌,他们会处理的
    xuanxuan11
        50
    xuanxuan11  
       2020-01-19 17:24:08 +08:00
    表面慌,心里稳,忍不住在这里炫耀起来了,人呐
    xiaoyang7545
        51
    xiaoyang7545  
       2020-01-19 17:31:41 +08:00
    嗨呀,这种事情最终不都是随便最后找个测试小弟背锅吗。
    yEhwG10ZJa83067x
        52
    yEhwG10ZJa83067x  
       2020-01-19 17:40:52 +08:00
    赔钱是真的吗?扣年终绩效还可以理解,还需要自己赔钱?那得开多高的工资啊
    baofu100year
        53
    baofu100year  
    OP
       2020-01-19 18:17:43 +08:00
    @d892fc 大哥,出问题了还会炫耀么,这整的我也太那啥了吧
    lights
        54
    lights  
       2020-01-19 18:51:55 +08:00
    当你真的经历过
    - 正在搞活动,但是你开发的登陆接口突然不能登陆了
    - 正在搞活动,但是官网直接被你 rm -rf 了
    - 快要搞活动,但是数据库被你搞 crash 了,最新的数据找不回了
    的时候,你就不会再慌了
    reus
        55
    reus  
       2020-01-19 20:46:33 +08:00 via Android
    赔偿?让公司直接起诉你,看法院支持不支持。
    zixianlaiye
        56
    zixianlaiye  
       2020-01-19 20:48:44 +08:00
    @lights 说出你的故事
    aaahhh123
        57
    aaahhh123  
       2020-01-19 22:15:04 +08:00
    开门红? bao xian 公司?
    wangyzj
        58
    wangyzj  
       2020-01-19 22:43:39 +08:00
    当你 rm -f /后就不慌了
    MoccaCafe
        59
    MoccaCafe  
       2020-01-20 08:39:43 +08:00 via iPhone
    我以前也犯过错误,以为会赔掉整个身家,但说实话,每个月拿那一点钱,还不够老板包 2nai 的小费呢,赔偿是不可能的,钱都没给够
    Eugene1024
        60
    Eugene1024  
       2020-01-20 08:59:34 +08:00
    慌也没用,还不如认真仔细分析下问题,做好补救
    Varobjs
        61
    Varobjs  
       2020-01-20 10:10:20 +08:00
    慌个毛,又不是没测试。。。
    曾经我写一半的东西,被别人上线了,损失十几万,居然第一责任人是我。
    MissThee
        62
    MissThee  
       2020-01-20 17:23:55 +08:00
    @wangyzj 已经没什么好怕的了
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     2598 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 31ms UTC 09:53 PVG 17:53 LAX 02:53 JFK 05:53
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86