[记] Gitlab 10.4.6 无备份恢复

雨点打透心脏的1/2处 2022-10-04 15:57 116阅读 0赞

**目录**

前情回顾

故障来源

尝试方案总结

恢复过程

数据准备

服务器准备

代码恢复

--------------------

# 前情回顾 #

个人的台式机服务器 Widows Server2008 ，

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3oxMjM1NjE_size_16_color_FFFFFF_t_70][]

安装的虚拟机，激活什么的自行百度啦

![202107110750352.png][]

搭建的代码服务： 操作系统 Centos6   Gitlab-ce  10.4.3

个人习惯为有用的时候自己手起服务，再把Gitlab 启动起来，为了方便在服务器启动的时候写了个脚本自动启动虚机的镜像

开机脚本 ：

"D:\Program Files\VMware\vmrun.exe" start "F:\VMMachine\CentOS GitLab\CentOS GitLab.vmx" nogui

关机脚本：

"D:\Program Files\VMware\vmrun.exe" stop "F:\VMMachine\CentOS GitLab\CentOS GitLab.vmx" soft

设置方法：

运行中输入“gpedit.msc”,打开本地组策略编辑器  
        "用户配置” **和** "计算机配置 "-》 windows 设置 -》 脚本 -》登陆/注销  -》添加 bat 结尾的脚本文件即可

代码服务器配置，本人比较懒都用的是原始配置丝毫没有改动

# 故障场景 #

服务器之前一直都挺正常的，大概率是之前的一次停电导致的服务器异常关闭，然后杯具了

Gitlab 服务器启动后： 502

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3oxMjM1NjE_size_16_color_FFFFFF_t_70 1][]

通过命令

gitlab-ctl status

查看服务运行状态

ok: run: gitaly: (pid 4339) 1s
    ok: run: gitlab-monitor: (pid 4350) 0s
    ok: run: gitlab-workhorse: (pid 4354) 0s
    ok: run: logrotate: (pid 4372) 0s
    ok: run: nginx: (pid 4379) 0s
    ok: run: postgres-exporter: (pid 4387) 1s
    ok: run: postgresql: (pid 4396) 1s    
    ok: down: prometheus: (pid 4404) 1s  //宕掉了
    ok: run: redis: (pid 4412) 0s
    ok: run: redis-exporter: (pid 4419) 1s
    ok: run: sidekiq: (pid 4431) 1s
    ok: run: unicorn: (pid 4442) 0s

prometheus 宕掉了，想着之前也宕过，没在意等了一会，可能自己就好了。

然后等待了很长一段时间并没有！！！

用Gitlab命令 查看日志，

gitlab-ctl tail

满篇的报错信息，最主要的 Gitlab Postgresql 出错崩溃了，错误是

**" invalid page in block 8 of relation base/16385/1249 "**

# **尝试方案总结** #

这个问题那，重启多次是无法修复的，耗费时间度娘 Google 了一波，大致解决方案有

1.  备份恢复，我从来没备份，当然也没用啦
2.  设置跳过错误块， 参数zero\_damaged\_pages = true。  尝试过应为没有设置 gitpsql 的初始密码，通过命令登入后，依然是错误的。报错一样，这是个非常严重的错误
3.  度娘中有过尝试通过升级的方式在解决，尝试后一团糟，更风险的事故就来了，不仅 Postgresql 起不来 LevelDB 也报错了，心塞呀
4.  回滚镜像，大概上个版本是 一年前的快照镜像，回滚回去吧，祈祷能修复，然而事与愿违错误依然。
5.  已经回滚了那就再尝试修一修错误的pg 块吧，然后一同百度加Google 也没折腾起来
6.  修复过程中发现 **Centos6 的已无安装包镜像源了**，想 yum 安装包的话已知的已经不可行了，所以还在CentOS6 挣扎的小伙伴放弃吧吗，升级吧
7.  最后的最后 一篇神奇的博客拯救了数日辛苦无果的我   Gitlab 无备份 数据迁移

# 恢复过程 #

引入博客网址

参考链接：[https://blog.csdn.net/HITYM627/article/details/106328958][https_blog.csdn.net_HITYM627_article_details_106328958]

原文很简练，说了大致方法但实操性过程没有，本篇就补充一下

总结恢复过程大致为**通过gitlab-data数据拷贝实现数据恢复**

## ** 数据准备** ##

压缩原gitlab 的代码数据文件，后续有用需要拷贝这部分原文件，当然 用scp 命令传输也行，不过保险起见先拷出来吧，别一会儿鸡飞蛋打就无佛可拜了，

文件路径

**cd  /var/opt/gitlab/git-data/repositories **

压缩命令

**tar -cvf  repositories.jar  \***

**           ** 记得拷贝出来呀

## 服务器准备 ##

1.准备同版本的服务Gitlab服务  查看Gitlab 版本号命令

** cat /opt/gitlab/embedded/service/gitlab-rails/VERSION**

借鉴：   [https://blog.csdn.net/liumiaocn/article/details/108139228][https_blog.csdn.net_liumiaocn_article_details_108139228]

2. 安装 CentOS7 服务，看博客吧，不重复说了。当然其他版本也行 比如 CentOS8 等

地址： [https://www.runoob.com/w3cnote/vmware-install-centos7.html][https_www.runoob.com_w3cnote_vmware-install-centos7.html]

3. 安装Gitlab 服务，对应的镜像我是在清华大学的镜像网站找到的，官网也有太慢了。。。

地址：[https://mirrors.tuna.tsinghua.edu.cn/gitlab-ce/yum/el7/][https_mirrors.tuna.tsinghua.edu.cn_gitlab-ce_yum_el7]

注意：el7 对应的是CentOS 7   el8 对应的是CentOS 8

小提示：建议最小 2C 4G 推荐 2C 8G ，很多安装过程卡死问题

4. 安装过程   推荐**官网安装教程**

**              **[https://about.gitlab.com/install/\#centos-7][https_about.gitlab.com_install_centos-7]

**              **[https://blog.csdn.net/iwanghang/article/details/90271057][https_blog.csdn.net_iwanghang_article_details_90271057]

## 代码数据恢复 ##

根据博客中提示，建立相同的代码路径然后拷贝数据，新的Gitlab服务器，通过上述的过程已经准备就绪，可能代码路径较多，没办法那就一个一个建吧，知道有没有批量建的方法，暂时没有研究。我这里一一个项目的恢复为例  Container/neginx    项目nginx 研究Demo 写的一个git项目

1. 建议用自己服务代码的对应账号去创建， 对应的Group 和 代码地址，避免后续的还得代码授权

2. 新建Group  "Container"

[                http://192.168.1.10/dashboard/groups][http_192.168.1.10_dashboard_groups]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3oxMjM1NjE_size_16_color_FFFFFF_t_70 2][]

3. 新建项目 nginx

[http://192.168.1.10/Container][http_192.168.1.10_Container]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3oxMjM1NjE_size_16_color_FFFFFF_t_70 3][]

4.新建一个任何格式的文件，随便什么文件都行后续会覆盖，**挺重要的**不然后续文件出不来就很慌。。。

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3oxMjM1NjE_size_16_color_FFFFFF_t_70 4][]

[                http://192.168.1.10/Container/nginx/new/master][http_192.168.1.10_Container_nginx_new_master]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3oxMjM1NjE_size_16_color_FFFFFF_t_70 5][]

5. 关闭gitlab 服务

命令:  **gitlab-ctl stop**

6.登录**新搭建的代码服务**上 对应的路径上 组  Container  项目 nginx.git ，忽略 nginx.wiki.git

![2021071109011377.png][]

7. 放心大胆的删除它们

8. 将之前准备的 旧代码服务器中的 tar包 的对应文件拷贝进来，当然用scp 在线拷贝，之前说过

9. 启动Gitlab服务

gitlab-ctl start

10. 等待一会，gitlab 启动过程有点慢 期间会一直  502  可以通过日志看下服务启动过程

gitlab-ctl  tail

11.代码恢复了！！！！！

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3oxMjM1NjE_size_16_color_FFFFFF_t_70 6][]

可以看到 文件带的修改时间都是一年前，不是我刚创建的时间 ,nice!

其他代码一样啦，重复上述步骤啦，当然也可以偷懒

比如一个组的代码 可以先批量创建好，然后一次性拷贝进来 ，也是可以的

# 总结 #

1.   日常备份很重要， 关键时刻救命呀，看了一些gitlab 自动备份的脚本，还在学习中
2.   自己维护的服务器，关机流程得规范，否则一日错误几日崩溃
3.   新版Gitlab  不支持这种方式，尝试过安装新版的gitlab 发现对应的路径已经变了，貌似在 gitlab.rd文件可以看到，没有细究了
4.   旧版CentOS已经淘汰了，抓紧换吧

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3oxMjM1NjE_size_16_color_FFFFFF_t_70]: /images/20221004/da6db2864f9d429ca61a73b599270b59.png
[202107110750352.png]: /images/20221004/99b52b16ad8b462dac00b44b8c5c3f84.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3oxMjM1NjE_size_16_color_FFFFFF_t_70 1]: /images/20221004/21b43b701ed14b938ee34c9a3b43fc9d.png
[https_blog.csdn.net_HITYM627_article_details_106328958]: https://blog.csdn.net/HITYM627/article/details/106328958
[https_blog.csdn.net_liumiaocn_article_details_108139228]: https://blog.csdn.net/liumiaocn/article/details/108139228
[https_www.runoob.com_w3cnote_vmware-install-centos7.html]: https://www.runoob.com/w3cnote/vmware-install-centos7.html
[https_mirrors.tuna.tsinghua.edu.cn_gitlab-ce_yum_el7]: https://mirrors.tuna.tsinghua.edu.cn/gitlab-ce/yum/el7/
[https_about.gitlab.com_install_centos-7]: https://about.gitlab.com/install/#centos-7
[https_blog.csdn.net_iwanghang_article_details_90271057]: https://blog.csdn.net/iwanghang/article/details/90271057
[http_192.168.1.10_dashboard_groups]: http://192.168.1.10/dashboard/groups
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3oxMjM1NjE_size_16_color_FFFFFF_t_70 2]: /images/20221004/2ae70d8366eb4214b5920a6ff23018cd.png
[http_192.168.1.10_Container]: http://192.168.1.10/Container
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3oxMjM1NjE_size_16_color_FFFFFF_t_70 3]: /images/20221004/4cf89b9059f842c7823c5d428cb29954.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3oxMjM1NjE_size_16_color_FFFFFF_t_70 4]: /images/20221004/f0909081ae4e4368a6702f3239bc7a4f.png
[http_192.168.1.10_Container_nginx_new_master]: http://192.168.1.10/Container/nginx/new/master
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3oxMjM1NjE_size_16_color_FFFFFF_t_70 5]: /images/20221004/2a6864bb681d47a2a74ba51f95234ae6.png
[2021071109011377.png]: /images/20221004/fe29993cb9f248b4a897d069ecf19921.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3oxMjM1NjE_size_16_color_FFFFFF_t_70 6]: /images/20221004/a993d9faf50a4eb5bd15c13a0f40092b.png