GitLab 域名迁移

由于 LUG 网络架构变动,GitLab 域名已迁移到 git.lug.ustc.edu.cn,8 月 15 日后不再支持 git.ustclug.org 的访问,请大家尽快迁移。

远程地址可用 git remote set-url <name> git@git.lug.ustc.edu.cn:<user>/<repo> 命令变更。给大家带来不便,敬请谅解。

6 月 14 日宕机事件说明

6 月 14 日凌晨 00:40 左右,来自外部的监控显示 USTC LUG 几乎所有服务都出现了访问异常。经过我们简单的排查,虚拟机宿主机 3 号节点上所有服务器全部脱离控制,失去响应。内网网关和管理员内网入口均受到此节点宕机影响,这使得我们的恢复工作进程缓慢。目前受影响的服务已经完全恢复,部分服务进行了调整。

事件发生之前,管理员正在执行一项计划中的迁移和修复工作:此前 RAID 磁盘阵列上的文件系统损坏,需要重建,我们将磁盘阵列上储存的虚拟机文件热迁移到了一块临时硬盘(tempdisk),计划在阵列文件系统修复完成后将 tempdisk 上的虚拟机热迁移回磁盘阵列,以确保整个迁移过程不会发生服务中断。

事件发生后,经过我们调查,tempdisk 发生了严重损坏,依赖于该硬盘的虚拟机全部宕机。该管理员在选择 tempdisk 作为中转储存器时没有考虑到冗余安全性,tempdisk 是一块有着近 10 年历史的老硬盘,我们推测是突然增加的写入压力导致了这块硬盘的损坏。

在恢复服务的过程中,因为部分配置没有持久化,部分网络环境有差异,内网服务耦合度大,无法通过 SSH 登陆,数据备份中心连接不畅等诸多问题,以及维护成员最近有很多很多 DDL,恢复工作进行了约 3 天时间,目前所有服务几乎已经恢复。恢复过程中,由于本站也受到影响而无法访问,我们的所有工作进展发布在了 https://news.ustclug.org/2018/06/server-down/ 。

此次恢复过程还暴露了我们内网架构的某些单点故障问题,解决这些问题已经被纳入之后的重构计划中。

此次维护中我们还调整了以下服务:

  • 代码托管 GitLab:保留原来的域名 git.ustclug.org 解析至 2018 年 8 月 15 日,启用新域名 git.lug.ustc.edu.cn 代替,请大家及时更新仓库地址。
  • 反向代理:部分反向代理被我们解析到了新的服务器,并且近期可能会再次调整。

以下是数据丢失的情况:

  • 代码托管 GitLab git.lug.ustc.edu.cn:没有丢失数据;
  • LUG FTP ftp.ustclug.org:没有丢失数据;
  • 主页 wiki lug.ustc.edu.cn:没有数据丢失;
  • 服务器统一认证 ldap.ustclug.org:没有数据丢失;
  • 服务器监控数据 :2018/06/14 00:40~2016/06/16 21:45 的数据丢失,数据回滚至 2018/06/14 00:40;
  • 轻量网络加速服务 light.ustclug.org:2018/06/13 01:31~2018/06/14 00:40 的数据丢失,数据回滚至 2018/06/13 01:31;
  • 网络加速服务 vpn.ustclug.org:2018/06/13 01:29~2018/06/14 00:40 的数据丢失,数据回滚至 2018/06/13 01:29;

以下服务没有受到此次事件的任何影响:

此外,由于网络和缓存问题,部分用户能正常使用各项服务的时间可能会有延迟,如果使用过程中仍然持续遇到问题,欢迎及时通过 Telegram 群组,QQ 或者是邮件联系我们,给您带来的不便敬请谅解。

镜像站停机维护通知 (2018-06-04)

科大开源软件镜像站计划于 2018 年 6 月 4 日 17:30~18:30 停机维护。

维护内容:

届时,HTTP 请求将跳转至其他镜像站,rsync、ftp 服务将暂时中断。

更新:2018 年 6 月 4 日 17:32,维护完成。

镜像站停机维护通知

科大开源软件镜像站计划于2018年6月1日 16:00~18:00 停机维护。

维护内容:

  • 安装新的SSD(Intel 900P 480GB)以代替故障SSD缓存盘
  • 升级至10Gbps出口

届时,HTTP请求将跳转至其他镜像站,rsync、ftp服务将暂时中断。

update: 2018年6月1日 17:13 更换为万兆网卡,服务恢复。

由于 SSD 到货时间延迟,因此将推迟SSD更换操作。

Ubuntu Old Releases 镜像变更通知

Ubuntu Old Releases 仓库存放了已经结束生命周期的 Ubuntu 版本,包含了所有历史版本的 iso 安装文件以及所有历史版本的 apt 仓库最后状态的快照,主要用于旧版本ubuntu 升级到新版本。

根据访问日志的统计结果,这些 iso 文件鲜有使用,但占用了大量空间(约1TB)。即日起,我们决定停止镜像该仓库 /releases 目录 。受影响的文件将重定向到官方地址。

 

PGP 公钥服务域名迁移至 pgp.ustc.edu.cn

PGP 公钥服务器(原域名为 sks.ustclug.org)已迁移至 pgp.ustc.edu.cn

请大家及时更新自己的配置文件,以 gnupg 配置为例:

~/.gnupg/gpg.conf 文件中修改 keyserver 配置行,或加入新行:

keyserver hkps://pgp.ustc.edu.cn

gnupg2 用户也可以修改 ~/.gnupg/dirmngr.conf,加入:

keyserver hkps://pgp.ustc.edu.cn

然后使用 gpgconf --reload dirmngr 命令使配置生效。

GitLab进入升级状态

GitLab已进入升级状态,由于与上游版本差距较大,这段时间可能GitLab经常出现不能访问的情况,而且也请GitLab用户在这期间备份好自己的数据,升级的过程中可能出现升级失败restore的现象,数据有可能会丢失,给您带来的不便敬请谅解。

——————-2018-03-22-升级成功———————-

已迁移到postgresql,gitlab升级到10.5.6

中间由于一些原因升级拖了一段时间,给大家带来不便,希望大家能谅解