变更红线与问责

变更3要素

  1. 可灰度
  2. 可监控
  3. 可应急

变更红线

  1. 禁止在非变更窗口期、封网期进行变更(不同的公司变更期不通,基本都有高峰期/低峰期的规定);这些变更包括但不限于:压测,代码提交到生成,紧急线上变更需要走审批流程。
  2. 禁止未经测试验证, 预发验证,或者灰度的线上变更
  3. 禁止无边跟影面、操作步骤、验证方案、应急预案及回滚方案说明的变更,应急预案必须具备可操作性,通俗的讲就是:任何变更都必须评估风险,做好sop,做好操作失败的修复方案。
  4. 禁止一切变更方案外的操作,如果变更出现非预期的情况应当立即停止并将情况反馈到上级,不要做额外的操作试图来改变些什么,这中额外操作可能带来更大的不可控的影响。如果需要调整方案,需得到上级的批准,且走了紧急变更流程。
  5. 禁止在生产环境执行或变更与线上问题排查无关的操作

说明:

  1. 所有的系统都应该接风控平台,做到任何变更有记录,有据可循。触发变更红线的判定,也以系统日志为准。
  2. 灰度必须为有效灰度,灰度比例包括但不限于地区、用户、设备、集群、机房。有线上有效流量,灰度时间不小于10分钟。变更期必须盯着监控面板,事后必须线上验证,有异常第一时间会滚
  3. 线上变更指:对线上的任何操作,包括应用系统发布,系统调整,后台配置,数据结构变更,数据订正以及规则策略调整等一切线上变更操作。

红线问责

只有红线,却没有触发红线的处罚措施也是不行的,这就如同有了监控系统却没有报警系统一样,监控便成了摆设,发挥不出其价值。当然了,红线问责,也是为了提醒大家不要触碰红线,并非以处罚为目的。

责任人问责

问责,根据不同公司的规章制度进行问责,通常的做法是和和绩效,晋升关联。

  1. 一次违反变更红线并引发故障的责任人,半年绩效不合格,并在技术团队范围通报
  2. 二次违反变更红线并引发故障的责任人,全年绩效不合格,并在技术团队范围通报
  3. 一些重要的活动,促销等期间产生的故障(不论大小,包括冒烟),都按照1,2处理。

违反红线变更,并对公司产生较大利益损害以及舆论压力的,可酌情劝退。

管理问责

如果一个团队连续出现违规变更,触发红线,那么管理者也当一并问责。

  1. 每次违反红线的责任人,其主管连带问责严重警告一次,并且技术团队范围通报;如果主管受到2次严重警告,那么半年绩效不合格
  2. 新人试用期内,实习生触发的触发规则的,由直接主管代为承担处罚

原文地址:https://www.cnblogs.com/vinsent/p/12155517.html

时间: 2024-10-19 06:08:32

变更红线与问责的相关文章

天津baozha,十问责相关部门!

1.为何危险化学品离居民区那么近? 2.事故企业到底是什么背景? 3.为何爆炸发生后,相关人没有即时告知消防员灾情是危险物品,不能用水? 4.为何总是在事故发生后,党国才能发现隐忧? 5.爆炸区的物品爆炸引发的后果和危害到底有多大? 6.为何"天津爆炸"许多相关新闻都被封杀?天津真的是一个没有新闻的城市? 7.为什么每次事故发生后党国官员的态度总是推卸责任? 8.天灾还是人祸?为何至今没有负责人出来表明态度? 9.爆炸中心周围既然有居民楼,难道那些楼都是鬼城?死亡的人都将白白死去? 1

发生线上故障后问责是不是第一要务

<Google SRE>这本书,说过这样一句话:系统正常,只是该系统无数异常情况下的一种特例.故障是不可避免的,不管是再牛的系统.再知名的科技公司. 既然不可避免,我们要做的就是不断提升能力和优化流程,减少故障出现的概率. 今天公司线上系统出现了响应迟钝的情况,白天偶现,到了晚上,出现雪崩效应.各个系统,都出现相应超时等情况.最终定位到有一个太服务器的CPU跑满了. 其实监控系统已经出现报警提醒,但因未有一套规范流程.没有第一时间观察到.出现线上有问题,第一时间应该查看监控系统是否有异常情况,

中纪委机关报:官员庸政懒政怠政是软腐败 要问责

而凌月吓得脸蛋惨白刚才的一瞬间她遭受了一次火雨攻击纵有烈焰气盾的保护还是被打到了空血 但是让人惊诧的却是被干掉那么多气血之后淡淡稻花香依旧还有三分之二的气血这么看来她的总气血已经接近了难道说她是全血的加点 而且这套皮甲最可贵的莫过于加了物理攻击力总所周知无论是此刻还是弓箭手都是以敏捷著称的职业追求的无非是高敏捷高致命一击率这样一来攻击力就有了巨大的缺损也造成了弓箭手和刺客大多只能控制布甲职业的尴尬局面而现在这套皮甲居然加了高达的物理攻击力我无异于是雪中送炭足以改变一个玩家的方向 但是凌雪可不能就

一年之计在于春-2015年两会-国家总理李克强答记者问

首先需要声明,本文纯属一个毫无远见和真才实学的小小散户的愚昧见解,仅供参考. 学习心得 金融市场会进一步开放,政府不会再扮演保姆的角色了,盈亏都是大家的决定,自己承担后果: 在金融风险上,中国的确是一个个案性的金融风险,但是我们完全可以守住,不发生系统性我们允许个案性金融风险的发生,按照市场方式进行清算.今年我们要出台存款保险条例,而且要进一步发展多层次资本市场,降低企业资金杠杆率,可以使金融更好为企业服务.(银行可以倒闭,混业经营,注册制,金融改革等): 我很愿意为网购.快递和带动的电子商务等

2018申论热点积累(50篇)

1.经济 1.共享经济该听谁的? 共享经济是指利用互联网等现代信息技术整合.分享海量的分散化闲置资源,满足多样化需求的经济活动总和.对于我国而言,发展共享经济适应了“创新.协调.绿色.开放.共享”发展理念的新要求,对实现创新驱动.推进供给侧结构性改革.建设网络强国等具有重要意义.从现实情况看,转型发展的迫切需求.网民大国红利.节俭的传统文化以及企业的成功实践,使共享经济迎来了快速发展的“机会窗口”. 继共享睡眠舱.共享雨伞.共享充电宝等共享模式之后,有高校学生推出共享厨房,某公交站台惊现共享马扎

安全生产的规范和机制

安全生产的重要性 安全生产是我们的底线,随着业务的不断扩大,服务的范围变广,线上的故障和问题开始频发;这些故障给客户和公司带来了不可估量的损失,不仅影响我们在业界的口碑,更会影响客户群对我们的信任. 我们需要思考,别人为什么使用你的服务?如果你的服务故障了,用户有怎样的反响?出现故障了我们如何止损,减少对客户的影响,维护我们的价值? 如何提高安全生产 安全生产会促进我们服务的可用性,最大限度的减少线上事故率;那么我们应该从哪些方面来提高安全生产,而保护我们的客户,保护我们生产的同学呢?大致的方向

2017全国两会政府工作报告(全文)

2017全国两会政府工作报告(全文) "两会"并不是一个特定的机构名称,而是对自1959年以来历年召开的"中华人民共和国全国人民代表大会"和"中国人民政治协商会议"的统称.由于两场会议会期基本重合,而且对于国家运作的重要程度都非常的高,故简称做"两会".下面一起来阅读2017年政府两会工作报告! 2017年两会政府工作报告 --2017年3月5日在第十二届全国人民代表大会第五次会议上 国务院总理 李克强 各位代表,现在,我代表

十八大报告(全文)

坚定不移沿着中国特色社会主义道路前进 为全面建成小康社会而奋斗 --在中国GCD第十八次全国代表大会上的报告 (2012年11月8日) HJT 11月8日,中国GCD第十八次全国代表大会在北京人民大会堂开幕.HJT代表十七届中央委员会向大会作报告. 新华社记者 黄敬文 摄 同志们: 现在,我代表第十七届中央委员会向大会作报告. 中国GCD第十八次全国代表大会,是在我国进入全面建成小康社会决定性阶段召开的一次十分重要的大会.大会的主题是:高举中国特色社会主义伟大旗帜,以邓小平理论."三个代表&qu

产品经理如何搞定程序员?

引用:http://blog.sina.com.cn/s/blog_9c34449701013qmb.html?sudaref=www.baidu.com 产品经理和程序员这两个都是苦逼的岗位,但有时候两个苦逼还经常在一起较真,成为了2B,今天我们来聊聊产品经理如何搞定程序员,使两个苦逼不再苦逼,下面我们来看一个案例: 小A是个程序员,小B是个产品经理,小A:1.事儿都是程序员干的2.产品经理不会干还指挥我们干3.还嫌程序员干的慢 ……小B:1.这个程序员水平好烂,比我编的代码还要差2.如果我不