Mirrors在磁盘重建过程中失联

2016年9月20日20:11,维护人员在配置外部磁盘阵列的过程中,服务器负载突然快速上升,最终失联。

由于网络信息中心已下班,我们计划于21日上午进入机房查看服务器状态。

目前http、https服务会302跳转至其他镜像站,rsync.mirrors.ustc.edu.cn解析至清华tuna镜像站、ftp、git服务将无法使用。

由于外部阵列RAID6同时损失3块盘,因此需要重建阵列,此列表中的镜像恢复将会耗费较长时间。其余镜像(位于内部阵列)预计将在明日早些时候恢复。

给您带来不便,我们深表歉意。

update 2016-9-22:  经查,服务器失联是由于一个内核bug引起的,目前已更换新内核。各项恢复工作正在进行中。

update 2016-9-23: 外部阵列已可正常使用,tuna帮助寄来的硬盘也已发货,恢复软件源数据工作明后天就可进行。

update 2016-9-24: tuna的硬盘已收到,运输途中没有任何损坏,晚上找少院机器开始通过校园网拷贝。

update 2016-9-28: tuna的数据拷贝完毕,开始同步剩下的源

update 2016-9-30: 大部分源已恢复,status页面正常工作,有任何疑问请发邮件到lug AT ustc.edu.cn

Mirrors 外部磁盘阵列严重故障并将离线修复

Mirrors 外部磁盘阵列已确认多块硬盘故障,超出了阵列自动修复能力并已造成数据丢失,被迫进行离线修复。

这次故障造成部分镜像无法提供服务,恢复日期待定。其中大部分镜像已重定向至其它镜像站,但某些镜像无法提供重定向并无法访问。

对您造成的不便我们深表抱歉。我们正在进行紧张修复,并将尽力尽早恢复服务。

请参阅前一篇文章了解具体停止服务的镜像列表:
https://servers.blog.ustc.edu.cn/2016/09/mirrors-disk-failure-2/

Mirrors 外部磁盘阵列严重故障并部分停止服务

由于 Mirrors 的外部磁盘阵列发生故障, 现在正在 Rebuild, 读写性能严重下降。所以维护人员决定暂停部分镜像的下载以减轻硬盘的压力。

2016-09-20更新:外部磁盘阵列已确认多块硬盘故障,超出了阵列自动修复能力并已造成数据丢失。下列镜像将无法提供服务,恢复日期待定。其中大部分镜像已重定向至其它镜像站,但某些镜像无法提供重定向并无法访问。

对您造成的不便我们深表抱歉。我们正在进行修复,并将尽力尽早恢复服务。

涉及的镜像包括:

antergos
anthon
aosp
apache
arch-arm
archive.raspberrypi.org
backtrack
bioc
blackarch
ceph
CRAN
deepin-cd
eclipse
fedora
fink
freebsd
get.docker.com
gimp
gnome
gnu
kali
kali-images
kali-security
kde
kde-application
kernel.org
lfs
linux-2.6.git
macports
mariadb
monitoring-plugins
neurodebian
node
openelec
openvz
postgresql
puppy
pypi
python
pythonxy
qomo
raspberrypi
raspbian
rfc
rpmfusion
ruby
rubygems
sagemath
slackware
steamos
tdf
tldp
trisquel
trisquel-images
turnkeylinux
ubuntu
ubuntu-old-releases
ubuntu-ports
videolan-ftp
vim
xbmc
Xorg

如果给您带来不便, 我们感到万分抱歉. 希望能得到您的谅解.

update 2016-09-15 19:13
上述镜像会转跳到 backup.mirrors.ustc.edu.cn
注意有部分镜像没有备份站点

 

https证书换为AlphaSSL和Let’s Encrypt

WoSign最近爆出了丑闻,StartCom也受影响,为了不影响屏蔽以上CA用户的访问,现已将mirrors.ustc.edu.cn及ustclug.org等大部分域名的证书换为AlphaSSL或Let’s Encrypt。由于涉及域名众多,如有遗漏请反馈。

另,今日调整mirrors证书时nginx的reload过程带来大量负载,导致镜像站中断服务大概10分钟,深表歉意