• Docker harbor私有仓库部署与管理


    目录

     Harbor 简介

    1、什么是Harbor

    2、Harbor的特性

    3、Harbor的构成

    1)Proxy

    2)Registry

    3)Core services

    4)Database(harbor-db)

    5)Job services

    6)Log collector(harbor-log)

    Harbor 部署

    1. 部署 Docker-Compose 服务

    2、部署 Harbor 服务

    1)下载或上传 Harbor 安装程序

    2)修改harbor安装的配置文件

    3、启动 Harbor

    4、查看 Harbor 启动镜像

    5、创建一个新项目

    1)浏览器访问:http://192.168.3.100 登录 Harbor WEB UI 界面

    2)输入用户名和密码登录界面后可以创建一个新项目。

    3)填写项目名称为“myproject-heitui”,点击“确定”按钮,创建新项目

    4)此时可使用 Docker 命令在本地通过 127.0.0.1 来登录和推送镜像。默认情况下,Registry 服务器在端口 80 上侦听。

    5)在 Harbor 界面 myproject-kgc 目录下可看见此镜像及相关信息

    6、在其他客户端上传镜像

    1)在 Docker 客户端配置操作

    2)下载镜像进行测试

    3)上传镜像进行测试

    4)刷新 Harbor 的 Web 管理界面进行查看,会发现 myproject-heitui 项目里面有两个镜像

    维护管理Harbor

    1、通过 Harbor Web 创建项目

    2、创建 Harbor 用户

    1)创建用户并分配权限

    2)添加项目成员

    3)在客户端上使用普通账户操作镜像

    3、查看日志

    4、修改 Harbor.yml 配置文件

    5、移除 Harbor 服务容器同时保留镜像数据/数据库,并进行迁移

    1)移除 Harbor 服务容器

    2)把项目中的镜像数据进行打包

    6、如需重新部署,需要移除 Harbor 服务容器全部数据


     Harbor 简介

    1、什么是Harbor

    Harbor 是 VMware 公司开源的企业级 Docker Registry 项目,其目标是帮助用户迅速搭建一个企业级的 Docker Registry 服务。

    Harbor以 Docker 公司开源的 Registry 为基础,提供了图形管理 UI 、基于角色的访问控制(Role Based AccessControl) 、AD/LDAP 集成、以及审计日志(Auditlogging) 等企业用户需求的功能,同时还原生支持中文。

    Harbor 的每个组件都是以 Docker 容器的形式构建的,使用 docker-compose 来对它进行部署。用于部署 Harbor 的 docker-compose 模板位于 harbor/docker-compose.yml。

    2、Harbor的特性

    1)基于角色控制:用户和仓库都是基于项目进行组织的,而用户在项目中可以拥有不同的权限。

    2)基于镜像的复制策略:镜像可以在多个Harbor实例之间进行复制(同步)。

    3)支持 LDAP/AD:Harbor 可以集成企业内部已有的 AD/LDAP(类似数据库的一张表),用于对已经存在的用户认证和管理。

    4)镜像删除和垃圾回收:镜像可以被删除,也可以回收镜像占用的空间。

    5)图形化用户界面:用户可以通过浏览器来浏览,搜索镜像仓库以及对项目进行管理。

    6)审计管理:所有针对镜像仓库的操作都可以被记录追溯,用于审计管理。

    7)支持 RESTful API:RESTful API 提供给管理员对于 Harbor 更多的操控, 使得与其它管理软件集成变得更容易。

    8)Harbor和docker registry的关系:Harbor实质上是对docker registry做了封装,扩展了自己的业务模板。

    3、Harbor的构成

    Harbor在架构上主要有Proxy、Registry、Core services、Database(Harbor-db)、Log collector(Harbor-log)、Job services 六个组件。

    1)Proxy

    Proxy是一个 nginx 的前端代理,Harbor 的 Registry、UI、Token 服务等组件,都处在 nginx 反向代理后边。

    该代理将来自浏览器、docker clients 的请求转发到后端不同的服务上。

    2)Registry

    负责储存 Docker 镜像,并处理 Docker push/pull 命令。

    由于要对用户进行访问控制,即不同用户对 Docker 镜像 有不同的读写权限,Registry 会指向一个 Token 服务,强制用户的每次 Docker pull/push 请求都要携带一个合法的 Token, Registry 会通过公钥对 Token 进行解密验证。

    3)Core services

    Harbor的核心功能,主要提供以下3个服务

    • UI(harbor-ui): 提供图形化界面,帮助用户管理 Registry 上的镜像(image), 并对用户进行授权。
    • WebHook:为了及时获取Registry 上image 状态变化的情况,在Registry 上配置 Webhook,把状态变化传递给 UI 模块。
    • Token 服务:负责根据用户权限给每个 Docker push/pull 命令签发 Token。Docker 客户端向 Registry 服务发起的请求, 如果不包含 Token,会被重定向到 Token 服务,获得 Token 后再重新向 Registry 进行请求。

    4)Database(harbor-db)

    为core services提供数据库服务,负责储存用户权限、审计日志、Docker 镜像分组信息等数据。

    5)Job services

    主要用于镜像复制,本地镜像可以被同步到远程 Harbor 实例上。

    6)Log collector(harbor-log)

    负责收集其他组件的日志到一个地方。

    Harbor 的每个组件都是以 Docker 容器的形式构建的,因此,使用 Docker Compose 来对它进行部署。
    总共分为7个容器运行,通过在docker-compose.yml所在目录中执行 docker-compose ps 命令来查看, 名称分别为:nginx、harbor-jobservice、harbor-ui、harbor-db、harbor-adminserver、registry、harbor-log。
    其中 harbor-adminserver 主要是作为一个后端的配置数据管理,并没有太多的其他功能。harbor-ui 所要操作的所有数据都通过 harbor-adminserver 这样一个数据配置管理中心来完成。

    Harbor 部署

    Harbor部署环境
    节点IP部署
    Harbor服务器192.168.3.100docker-ce、docker-compose、harbor-offline-v1.2.2
    client服务器192.168.3.101docker-ce

    1. 部署 Docker-Compose 服务

    1. //下载或者上传 Docker-Compose
    2. curl -L https://github.com/docker/compose/releases/download/1.21.1/docker-compose-`uname -s`-`uname -m` -o /usr/local/bin/docker-compose
    3. chmod +x /usr/local/bin/docker-compose
    4. docker-compose -v

    2、部署 Harbor 服务

    1)下载或上传 Harbor 安装程序

    1. Harbor的压缩包下载地址:https://github.com/goharbor/harbor/releases
    2. wget http://harbor.orientsoft.cn/harbor-1.2.2/harbor-offline-installer-v1.2.2.tgz
    3. tar zxvf harbor-offline-installer-v1.2.2.tgz -C /usr/local/

    2)修改harbor安装的配置文件

    1. vim /usr/local/harbor/harbor.yml
    2. --5行--修改,设置为Harbor服务器的IP地址或者域名
    3. hostname = 192.168.3.100
    4. --27行--指定管理员的初始密码,默认的用户名/密码是admin/Harbor12345
    5. harbor_admin_password = Harbor12345

    3、启动 Harbor

    1. cd /usr/local/harbor/
    2. 在配置好了 harbor.yml 之后,执行 ./prepare 命令,为 harbor 启动的容器生成一些必要的文件(环境)
    3. 再执行命令 ./install.sh 以 pull 镜像并启动容器

    4、查看 Harbor 启动镜像

    1. cd /usr/local/harbor/
    2. docker-compose ps
    3. docker-compose up -d #启动
    4. docker-compose stop #停止
    5. docker-compose restart #重新启动

    5、创建一个新项目

    1)浏览器访问:http://192.168.3.100 登录 Harbor WEB UI 界面

    默认的管理员用户名和密码是 admin/Harbor12345

    2)输入用户名和密码登录界面后可以创建一个新项目。

    点击“+新建项目”按钮

    3)填写项目名称为“myproject-heitui”,点击“确定”按钮,创建新项目

    4)此时可使用 Docker 命令在本地通过 127.0.0.1 来登录和推送镜像。默认情况下,Registry 服务器在端口 80 上侦听。

    1. //登录 Harbor
    2. docker login [-u admin -p Harbor12345] http://127.0.0.1
    3. //下载镜像进行测试
    4. docker pull nginx
    5. //将镜像打标签
    6. 格式:docker tag 镜像:标签 仓库IP/项目名称/镜像名:标签
    7. docker tag nginx:latest 127.0.0.1/myproject-heitui/nginx:v1
    8. //上传镜像到 Harbor
    9. docker push 127.0.0.1/myproject-heitui/nginx:v1

    5)在 Harbor 界面 myproject-kgc 目录下可看见此镜像及相关信息

    6、在其他客户端上传镜像

    以上操作都是在 Harbor 服务器本地操作。

    如果其他客户端登录到 Harbor,就会报如下错误。

    出现这问题的原因为Docker Registry 交互默认使用的是 HTTPS,但是搭建私有镜像默认使用的是 HTTP 服务,所以与私有镜像交互时出现以下错误。

    docker login -u admin -p Harbor12345 http://192.168.3.100

    1)在 Docker 客户端配置操作

    解决办法是:在 Docker server 启动的时候,增加启动参数,默认使用 HTTP 访问。

    1. vim /usr/lib/systemd/system/docker.service
    2. --13行--修改
    3. ExecStart=/usr/bin/dockerd -H fd:// --insecure-registry 192.168.3.100 --containerd=/run/containerd/containerd.sock
    4. ExecStart=/usr/bin/dockerd --insecure-registry 192.168.3.100
    5. //重启 Docker,再次登录
    6. systemctl daemon-reload
    7. systemctl restart docker
    8. docker login -u admin -p Harbor12345 http://192.168.3.100

    2)下载镜像进行测试

    docker pull 192.168.3.100/myproject-heitui/nginx:v1

    3)上传镜像进行测试

    1. docker pull cirros
    2. docker tag cirros:latest 192.168.3.100/myproject-heitui/cirros:v2
    3. docker push 192.168.3.100/myproject-heitui/cirros:v2

    4)刷新 Harbor 的 Web 管理界面进行查看,会发现 myproject-heitui 项目里面有两个镜像

    维护管理Harbor

    1、通过 Harbor Web 创建项目

    在 Harbor 仓库中,任何镜像在被 push 到 regsitry 之前都必须有一个自己所属的项目。

    单击“+项目”,填写项目名称,项目级别若设置为"私有",则不勾选。如果设置为公共仓库,则所

    人对此项目下的镜像拥有读权限,命令行中不需要执行"Docker login"即可下载镜像,镜像操作与 Docker Hub 一致。

    2、创建 Harbor 用户

    1)创建用户并分配权限

    1. 在 Web 管理界面中单击系统管理 -> 用户管理 -> +用户,
    2. 填写用户名为“heitui-zhangsan”,邮箱为“heitui-zhangsan@heitui.com”,全名为“zhangsan”,密码为“Abc123456”,注释为“ 管理员”(可省略)。
    3. 附:用户创建成功后,单击左侧“...”按钮可将上述创建的用户设置为管理员角色或进行删除操作,本例不作任何设置。

    Harbor用户介绍
    角色权限说明
    访客对于指定项目拥有只读权限
    开发人员对于指定项目拥有读写权限,但没用删除权限
    维护人员对于指定项目拥有读写权限,也能对修改其它配置,比如创建 Webhooks
    项目管理员除了读写权限,同时拥有用户管理/镜像扫描等管理权限

    2)添加项目成员

    1. 单击项目 -> myproject-heitui-> 成员 -> + 成员,填写上述创建的用户 heitui-zhangsan 并分配角色为“开发人员”。
    2. 附:此时单击左侧“...”按钮仍然可对成员角色进行变更或者删除操作

    3)在客户端上使用普通账户操作镜像

    1. //删除上述打标签的本地镜像
    2. docker rmi 192.168.3.100/myproject-heitui/cirros:v2
    3. /先退出当前用户,然后使用上述创建的账户 heitui-zhangsan 登录
    4. docker logout 192.168.3.100
    5. docker login 192.168.3.100
    6. docker login -u heitui-zhangsan -p Abc123456 http://192.168.3.100
    7. //下载和上传镜像进行测试
    8. docker pull 192.168.3.100/myproject-heitui/cirros:v2
    9. docker tag cirros:latest 192.168.3.100/myproject-heitui/cirros:v3
    10. docker push 192.168.3.100/myproject-heitui/cirros:v3

    3、查看日志

    Web 界面日志,操作日志按时间顺序记录用户相关操作

    4、修改 Harbor.yml 配置文件

    要更改 Harbor的配置文件中的可选参数时

    • 请先停止现有的 Harbor实例并更新 Harbor.yml;
    • 然后运行 prepare 脚本来填充配置;
    • 最后重新创建并启动 Harbor 的实例。
    1. 使用 docker-compose 管理 Harbor 时,必须在与 docker-compose.yml 相同的目录中运行。
    2. cd /usr/local/harbor
    3. docker-compose down -v
    4. vim harbor.yml #只能修改可选参数
    5. ./prepare
    6. docker-compose up -d
    7. //如果有以下报错,需要开启防火墙 firewalld 服务解决
    8. Creating network "harbor_harbor" with the default driver
    9. ERROR: Failed to Setup IP tables: Unable to enable SKIP DNAT rule: (iptables failed: iptables --wait -t nat -I DOCKER -i br-b53c314f45e8 -j RETURN: iptables: No chain/target/match by that name.
    10. (exit status 1))
    11. systemctl restart firewalld.service
    12. docker-compose up -d

    5、移除 Harbor 服务容器同时保留镜像数据/数据库,并进行迁移

    在Harbor服务器上操作

    1)移除 Harbor 服务容器

    1. cd /usr/local/harbor
    2. docker-compose down -v

    2)把项目中的镜像数据进行打包

    1. //持久数据,如镜像,数据库等在宿主机的/data/目录下,日志在宿主机的/var/log/Harbor/目录下
    2. ls /data/registry/docker/registry/v2/repositories/myproject-heitui
    3. cd /data/registry/docker/registry/v2/repositories/myproject-heitui
    4. tar zcvf heitui-registry.tar.gz ./*

    6、如需重新部署,需要移除 Harbor 服务容器全部数据

    1. cd /usr/local/harbor
    2. docker-compose down -v
    3. rm -r /data/database
    4. rm -r /data/registry
  • 相关阅读:
    Mybatis-Plus实现日期字段自动填充
    Linux 文件系统与inode,软硬链接
    【StreamSets】StreamSets 表达式语言篇
    正则表达式
    【CSS3】CSS3 动画 ⑤ ( 动画速度曲线 | 设置动画步长 | 动画匀速执行 | 动画分 2 步执行 | 使用动画步长实现打字机效果 )
    上周热点回顾(7.10-7.16)
    数据库Mysql三大引擎(InnoDB、MyISAM、 Memory)与逻辑架构
    C# 实例解释面向对象编程中的依赖反转原则
    基础复习——为activity补充活动信息——利用资源文件配置字符串——利用元数据传递配置信息——给页面注册快捷方式...
    【C++】string 类 ( 上)
  • 原文地址:https://blog.csdn.net/x74188/article/details/134012197