总结
2023年3月15日,从23:13 UTC到23:50 UTC,在Pod 23上使用Zendesk Support、Chat、亚博Talk或Guide的客户要么无法登录到产品,要么被注销并无法重新登录。
时间轴
23:28 utc | 16:28 pt
我们注意到一个影响客户登录Pod 23的问题。我们仍在评估进一步的影响。下次更新30分钟后。
00:00 utc | 17:00 pt
我们正在继续调查影响Pod 23客户的登录问题。我们感谢你的耐心。我们将在30分钟内提供最新消息。
00:07 utc | 17:07 pt
我们已经回滚了一个更改,Pod 23上的客户现在应该能够登录。与此同时,我们将继续进行监测。
00:33 utc | 17:33 pt
我们已经确认,Pod 23上的客户现在可以在更改恢复后登录。我们将继续监测,并将在60分钟内提供另一个更新,或者如果我们有进一步的信息要分享。
01:24 utc | 18:24 pt
在回滚之前的更改后,Pod 23上的客户能够再次登录。这现在处于监控阶段,我们将在事件完全解决后再次更新。
04:29 utc | 21:29 pt
我们很高兴地通知您,影响Pod 23登录的问题已经解决。非常感谢你的耐心,因为我们已经到了这一点。
死后
根本原因分析
此事件是由配置错误导致的代码部署失败引起的。
决议
为了解决这个问题,对Pod 23执行了手动修复,并对软件部署平台进行了临时部署冻结,以防止同样的问题传播到其他应用程序。
修复项目
- 识别具有类似配置的所有应用程序,并开发文档以减少此类配置错误。(进行中)
- 评估自动化和其他工具以改进团队分页[计划]
了解更多信息
有关Zendesk的当前系统状态信息,请查看我们的亚博系统状态页面。我们的调查总结通常在事件结束后几天张贴在这里。如果你对这次事件有其他问题,请通过小部件内的ZBot消息发送与我们联系。
1评论
《验尸报告》发表于2023年4月4日。
文章已结束接受评论。