GitHub多项服务昨日出现故障 主要为5XX错误

AI 智能摘要
GitHub 多项服务昨天出现了故障,具体表现为众多 API 都出现了 HTTP 5xx 错误,错误率上升了 1%~5%,涉及的服务包括但不限于:从事故报告页面来看,GitHub 当时的解决方案是
图片[1]-GitHub多项服务昨日出现故障 主要为5XX错误-搬主题

GitHub 多项服务昨天出现了故障,具体表现为众多 API 都出现了 HTTP 5xx 错误,错误率上升了 1%~5%,涉及的服务包括但不限于:

  • Codespaces
  • Packages
  • Webhooks
  • Git 操作
  • Pages
  • API 请求
  • Actions
  • Pull Requests

从事故报告页面来看,GitHub 当时的解决方案是将相关问题隔离到一个数据中心进行处理。

图片[2]-GitHub多项服务昨日出现故障 主要为5XX错误-搬主题

不知道 GitHub 最近频发故障是否跟升级 MySQL 有关?

在2022年3月份,GitHub 经历了多次宕机事件,导致平台的服务降级,影响了许多用户的正常使用。GitHub 团队在解决问题的同时,近日也分享了这些事件的详细情况。

据介绍,近期 GitHub 频繁宕机主要是其 mysql1 集群的资源争夺导致,这影响了 GitHub 在负载高峰期的大量服务和功能性能。虽然在过去几年 GitHub 已经进行了许多优化,例如增加集群以支持平台的增长、对主数据库进行分区等,但这不是一劳永逸的工作,直到现在他们仍在积极解决这个问题。

近期宕机事件的时间线:

  • 3 月 16 日 14:09 UTC(持续 5 小时 36 分钟)
  • 3 月 17 日 13:46 UTC(持续 2 小时 28 分钟)
  • 3 月 22 日 15:53 UTC(持续 2 小时 53 分钟)
  • 3 月 23 日 14:49 UTC(持续 2 小时 51 分钟)

为了防止将来发生此类事件,GitHub 已开始在高峰时段对该特定数据库的负载模式进行审计,并根据这些审计进行一系列性能修复。作为其中的一部分,他们正在将流量转移到其他数据库,以减少负载和加快故障转移时间,并审查我们的变更管理程序,特别是与生产环境中高负载期间相关的监控和变更。

随着平台的不断发展,他们会一直积极扩展基础设施,包括对数据库进行分片和扩展硬件。

© 版权声明
THE END
喜欢就支持一下吧
点赞13 分享
评论 抢沙发

请登录后发表评论

    暂无评论内容