2013年8月31日 11:06，科大开源软件镜像（mirrors.ustc.edu.cn）发生磁盘故障。磁盘 sda 从系统中突然消失。sda 上有 mirrors 主系统（mirrors-main）的根分区、各 LXC 虚拟机系统的根分区，sda 的消失导致 mirrors 的所有服务立即中断。

问题发生一小时后的 12:08，Stephen Zhang 在邮件列表发帖说 mirrors 挂了。收到邮件后，我们检查了服务监控系统，发现学校短信平台也很不巧地挂掉了，因此没有在第一时间收到报警短信。我们登录到 mirrors-base（mirrors-main 是 Xen 虚拟机，mirrors-base 是 Xen Domain0），发现 dmesg 中有同样的磁盘错误信息，/dev/sda 不见了。据此判断是磁盘故障。

由于此问题无法快速解决，我们采用以往的方法（所谓“启动应急预案”），将 mirrors 的 DNS 设置别名为 backup.mirrors.ustc.edu.cn，它解析到 lug.ustc.edu.cn 服务器，显示一个临时错误页，并把大部分源 HTTP 重定向到国内其他开源软件镜像。

随后，我们把 /etc 备份到其他机器上，挽救了一些尚在缓存内的配置文件。我们重新扫描了 SCSI 总线，未发现新设备。确认主管机房的张运动老师在校后，在学校的 bible 去了网络中心机房。张运动老师还说学校几百台服务器依赖 CentOS 来装软件包，让我们一定把 CentOS 源维护好。据去年统计，校内流量仅占 mirrors 总流量的1%，因此每次 mirrors 挂机，都可能影响数以万计的服务器和 PC，对此我们深感愧疚。

重新拔插硬盘、物理重启 mirrors 数次，包括使用不带 Xen 的内核，仍未在系统里发现丢失的那块磁盘。在 RAID 控制界面，发现有两块磁盘报 PD Missing 错误。我们尚未找到相关技术资料。

目前 mirrors-base（Xen Domain0）仍然在正常运行，因其根文件系统在 sdc 上。mirrors-main 连同 LXC 虚拟机系统的根分区连同那块硬盘，已经消失了。我们怀疑并不是硬盘损坏，因为两块硬盘是硬 RAID1，同时损坏的概率微乎其微；怀疑是 RAID 卡损坏，或者主板上接线松了。

本次故障由于涉及硬件问题，恢复时间未知。我们对此带来的不便深表歉意。