harbor2.4.2尝鲜

harbor

字数统计: 2.2k阅读时长: 9 min

 2022/06/22   Share

根据harbor官方的描述，harbor高可用方案有以下几种：

通过helm chart的方式部署于kubernetes中，以多副本的形式运行，借助k8s自愈性维护自身状态，通过pvc来存储数据，连接外置的PostgreSQL和Redis集群。
多个harbor实例共享PostgreSQL、Redis及存储，上层搭建负载均衡器。
harbor组件单独部署，基于复制策略实现Artifact的一致性，通过上层负载均衡器提供统一入口，PostgreSQL和Redis的数据一致性需要用户自己解决。

可以看到第三种方式是最简单的，下面以第三种方式搭建harbor2.4.2环境。

环境描述

ip地址	系统版本	内核版本	cpu(C)	mem(G)	disk(GB)
192.168.100.10	CentOS 7.6.1810	3.10.0-957.el7.x86_64	2	4	40
192.168.100.11	CentOS 7.6.1810	3.10.0-957.el7.x86_64	2	4	40

高可用部署

以下步骤在两台测试机器分别执行。

基础环境准备

$ systemctl status firewalld
$ systemctl stop firewalld.service && systemctl disable firewalld.service
$ setenforce 0
$ sed -i 's/^SELINUX=.*/SELINUX=disabled/g' /etc/selinux/config

安装docker

$ yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo
$ yum install docker-ce-19.03.4 docker-ce-cli-19.03.4
$ mkdir /etc/docker
$ cat > /etc/docker/daemon.json <<EOF
{
  "graph": "/home/docker",
  "log-driver": "json-file",
  "exec-opts": ["native.cgroupdriver=systemd"],
  "log-opts": {
    "max-size": "50m",
    "max-file": "3"
   }
}
EOF
$ systemctl enable docker && systemctl start docker

安装docker-compose

1 2	$ curl -SL https://github.com/docker/compose/releases/download/v2.4.0/docker-compose-linux-x86_64 -o /usr/local/bin/docker-compose $ chmod +x /usr/local/bin/docker-compose

安装harbor

1 2	$ wget https://github.com/goharbor/harbor/releases/download/v2.4.2/harbor-offline-installer-v2.4.2.tgz $ tar zxvf harbor-offline-installer-v2.4.2.tgz

配置harbor

$ cd harbor
$ ls
common  common.sh  docker-compose.yml  harbor.v2.4.2.tar.gz  harbor.yml  install.sh  LICENSE  prepare
$ cp harbor.yml.tmpl harbor.yml

根据本地环境实际情况来修改harbor.yml文件。

https需要涉及到证书操作，暂时先将https部分注释掉，下面是对比原始文件修改的部分。

hostname:处改成对应节点的ip地址

$ diff harbor.yml.tmpl harbor.yml
5c5
< hostname: reg.mydomain.com
---
> hostname: 192.168.100.10
13c13
< https:
---
> #https:
15c15
<   port: 443
---
> #  port: 443
17,18c17,18
<   certificate: /your/certificate/path
<   private_key: /your/private/key/path
---
> #  certificate: /your/certificate/path
> #  private_key: /your/private/key/path
34c34
< harbor_admin_password: Harbor12345
---
> harbor_admin_password: Slions123

安装harbor

执行./prepare，下载镜像，并根据harbor.yml生成docker-compose.yml文件。

1	$ ./prepare

harbor离线包解压后，进入目录中看到的harbor.v2.4.2.tar.gz为对应组件的镜像，可提前通过docker load到本地。

执行./install.sh进行安装。

1	$ ./install.sh

使用docker-compose ps 命令可以查看容器启动情况。

$ docker-compose ps
NAME                COMMAND                  SERVICE             STATUS              PORTS
harbor-core         "/harbor/entrypoint.…"   core                running (healthy)
harbor-db           "/docker-entrypoint.…"   postgresql          running (healthy)
harbor-jobservice   "/harbor/entrypoint.…"   jobservice          running (healthy)
harbor-log          "/bin/sh -c /usr/loc…"   log                 running (healthy)   127.0.0.1:1514->10514/tcp
harbor-portal       "nginx -g 'daemon of…"   portal              running (healthy)
nginx               "nginx -g 'daemon of…"   proxy               running (healthy)   0.0.0.0:80->8080/tcp
redis               "redis-server /etc/r…"   redis               running (healthy)
registry            "/home/harbor/entryp…"   registry            running (healthy)
registryctl         "/home/harbor/start.…"   registryctl         running (healthy)

浏览器访问http:<$节点ip>:80

部署keepalived

keepalived是一个高可用软件，通过VRRP协议来防止服务单点故障。

1	$ yum install -y keepalived

按需编辑配置文件。

此次测试中，keepalived并没有加检测harbor组件状态的脚本

$ cat > /etc/keepalived/keepalived.conf <<EOF
global_defs {
  script_user root
  enable_script_security
  router_id lb_Harbor
}

vrrp_instance VI_1 {
  state BACKUP
  nopreempt
  interface ens33
  virtual_router_id 51
  priority 100
  advert_int 1
  authentication {
      auth_type PASS
      auth_pass agree123
  }
  virtual_ipaddress {
         192.168.100.100
  }
}
EOF

启动keepalived。

1	$ systemctl enable keepalived && systemctl start keepalived

此时分别查看两台测试机的网卡信息，可以看到VIP已经绑定在了一个节点上。

$ ip a|grep ens33
2: ens33: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP group default qlen 1000
    inet 192.168.100.10/24 brd 192.168.100.255 scope global noprefixroute ens33
    inet 192.168.100.100/32 scope global ens33

设置复制策略

由于 v2.0 版本中的主要 API 更改以支持OCI。您无法从 Harbor v1.x 复制到 v2.0 及更高版本，也无法将带有manifest list的artifacts 从 v2.0 及更高版本复制到 v1.x。

添加远程仓库

分别浏览器访问两台镜像仓库地址，系统管理-仓库管理-新建目标，填写目标镜像仓库信息。

设置复制策略

系统管理-复制管理-新建规则

字段	说明
复制模式	支持主动推送和基于拉取策略
资源过滤器	支持基于tag和标签的过滤（匹配/排除），资源包括all、image、artifact
仓库扁平化	在复制image时支持处理image层次结构，可选择展平的级别
触发模式	手动（删除操作不会被复制）；定时（通过定义 crontab定期复制资源，删除操作不会被复制）；事件驱动（基于推送、重新标记和删除操作）
带宽	设置每个复制任务的最大网络带宽，须注意并发执行数，每个job-service pod默认值为10