GitHub发布21日系统故障分析报告
刚刚GitHub通过官方博客发布了21日“挂掉”的事件分析。GitHub指出此次事件发生的原因是在10月21日22:52 UTC进行日常维护——更换发生故障的100G光学设备时导致美国东海岸网络中心与美国东海岸数据中心之间的连接断开。
更具体地，GitHub分析，虽然两地的连接在43秒内恢复，但这次短暂的中断引发了一系列事件，这才导致了长达24小时11分钟的服务降级。
为了大规模提高性能，GitHub的应用程序将直接写入每个群集的相关主数据库，但在绝大多数情况下将读取请求委派给副本服务器的子集。GitHub使用Orchestrator来管理MySQL集群拓扑并处理自动故障转移，Orchestrator在此过程中考虑了许多变量，并在Raft共识机制之上达成共识。Orchestrator可以实现应用程序无法支持的拓扑，因此必须注意将Orchestrator的配置与应用程序级别的期望保持一致。
然而21日，在上述网络分区中，Orchestrator在主数据中心中一直保持活跃，根据Raft的共识机制，它开始了一个取消领导选举的过程。美国西海岸数据中心和美国东海岸公有云Orchestrator节点能够建立合规数量并开始对群集进行故障转移，以便将写入指向美国西海岸数据中心。Orchestrator继续组织美国西海岸数据库集群拓扑，当连接恢复时，应用层立即开始将写入流量引导到西海岸站点的新当选者。
美国东海岸数据中心的数据库服务器包含一段短暂的写入时间，但尚未复制到美国西海岸的设施。由于两个数据中心中的数据库集群都包含了其它数据中心中不存在的写入，因此无法安全地将主要数据库故障转移到美国东海岸数据中心。
GitHub工程师发现问题后进行了一系列抢救措施，“最终没有用户数据丢失，但是，几秒钟的数据库写入的手动协调仍在进行中。”
GitHub对所有受影响的用户表示歉意，并表示“我们已经吸取了教训，并且采取了一系列急救措施，我们希望更好地确保不再发生类似情况。”
同时GitHub也表示接下来将解决由此导致的数据不一致问题。
以上就是金山云为您带来的GitHub发布21日系统故障分析报告的相关内容，如果您还想了解更多GitHub,系统故障,数据中心,GitHub发布21日系统故障分析报告的相关问题您可以点击页面中的链接进行具体了解。金山云提供云服务器，云主机，云存储，私有云，数据库，物理主机，RDS，KS3，SLB，KEC的全套产品服务，部分产品可以免费体验，而且会有定期的优惠、代金券等相关的活动。成立7年来，金山云始终坚持以客户为中心的服务理念，提供安全、可靠、稳定、高品质的云计算服务。以上是对GitHub发布21日系统故障分析报告相关介绍，如果觉得对您有帮助可以收藏。欢迎随时查看。相关资讯
-
金山云Q3调整后EBITDA率提升至9.8%11.202024
-
信永中和与金山云签署战略合作协议 共建企业服务新纪元11.142024
-
金山云位列赛迪2024中国MaaS市场领导者象限11.052024
-
《数智赋能，迈向医疗高质量发展新征程》研讨会顺利举行11.052024
-
金山云关系型数据库MySQL Serverless开启公测10.242024