• docker registry 镜像同步


    一、Intro

    之前我们的 docker 镜像是保存在 Azure 的 Container Registry 里的,最近我们自己搭建了一个 docker registry,我们想把之前保存的 Azure 的 Container Registry 的 docker 镜像同步到我们自己的 docker registry 里

    二、实现思路

    我们的做法比较简单也比较LOW,但是基本可以满足要求,

    我们的做法是

    1. 首先获取到源 Registry 里的所有镜像列表
    2. 然后逐个获取镜像的 tags
    3. 然后依次遍历将对应的镜像拉到本地,然后 docker tag 一下,命名为新的 registry 镜像名称
    4. 然后 push docker 镜像到新的 registry
    5. 删除下载到本地的镜像和推送到新的 registry 的镜像

    后来突然想起来阿里云好像有一个镜像同步工具,https://github.com/AliyunContainerService/image-syncer image-syncer 是一个docker镜像同步工具,可用来进行多对多的镜像仓库同步,支持目前绝大多数主流的docker镜像仓库服务,看介绍还是很棒的,有需要 registry 之间同步镜像的可以试试这个工具,看介绍这个工具不会拉取到本地磁盘,从源 registry 获取镜像数据之后直接就推送到新的 registry 里了,效率会高很多

    三、Docker-Registry API

    docker registry 有一套规范,可以查阅 HTTP API V2 | Docker Documentation 了解更多

    3.1 获取所有镜像

    docker registry v2 新增了一个 _catalog 的 api 可以获取所有的镜像,v1 可以用 _search 来代替

    语法如下:

    GET /v2/_catalog
    

    默认最多返回100条记录,多余 100 可以通过参数 n 指定返回数量,分页的话可以指定另外一个参数 last指定完上一页返回的最后一个镜像,举个栗子: http://example.com/v2/_catalog?n=20&last=b

    3.2 获取镜像的 tag

    获取 docker 镜像的 tag 列表可以使用 GET /v2//tags/list 来获取,也可以分页,类似于上面获取镜像列表,可以通过 n 和 last 来实现分页加载

    四、操作示例

    在本地部署了一个测试用的 docker registry 来做演示,我这里用 httpie 来做测试

    4.1 获取镜像列表

    调用 _catalog 接口来获取镜像列表

    http :5000/v2/_catalog
    

    4.2 获取镜像的 tag 列表

    调用 tags/list 接口获取镜像的 tag

    1. http :5000/v2/busybox/tags/list
    2. http :5000/v2/redis/tags/list

    五、PowerShell 脚本

    一切不是自动化的运维都是耍流氓,很有可能以后会有类似的需求,不如写个脚本自动化的跑吧

    下面的脚本做了一些简化,因为我们的 azure container registry 上的数量不多,只有五六十个镜像,而且镜像只有 latest 的 tag,没有其他 tag ,所以把上面的步骤做了简化,并没有分页获取所有的镜像,也没有获取所有的 tag,实际使用的话还请自行修改后使用

    1. # variables
    2. $srcRegUser = "xxx"
    3. $srcRegPwd = "111111"
    4. $srcRegHost = "xxx.azurecr.cn"
    5. $destRegUser = "yyy"
    6. $destRegPwd = "222"
    7. $destRegHost = "registry.xxx.com"
    8. # get repositories from source registry
    9. # httpie
    10. $response = (http -b -a "${srcRegUser}:${srcRegPwd}" "https://${srcRegHost}/v2/_catalog") | ConvertFrom-Json
    11. # curl
    12. #$response = (curl -u "${srcRegUser}:${srcRegPwd}" "https://${srcRegHost}/v2/_catalog") | ConvertFrom-Json
    13. # repository
    14. $repositories = $response.repositories
    15. #
    16. Write-Host $repositories
    17. # login source registry
    18. docker login $srcRegHost -u $srcRegUser -p $srcRegPwd
    19. # login dest registry
    20. docker login $destRegHost -u $destRegUser -p $destRegPwd
    21. # sync
    22. foreach($repo in $repositories)
    23. {
    24. Write-Host "sync $repo begin"
    25. $srcTag = "${srcRegHost}/${repo}:latest"
    26. $destTag = "${destRegHost}/${repo}:latest"
    27. Write-Host "source image tag: $srcTag"
    28. Write-Host "dest image tag $destTag"
    29. Write-Host "docker pull $srcTag begin"
    30. docker pull $srcTag
    31. Write-Host "docker pull $srcTag completed"
    32. Write-Host "docker tag $srcTag $destTag ing"
    33. docker tag $srcTag $destTag
    34. Write-Host "docker push $destTag begin"
    35. docker push $destTag
    36. Write-Host "docker push $destTag completed"
    37. Write-Host "docker rmi $srcTag $destTag begin"
    38. docker rmi $srcTag $destTag
    39. Write-Host "docker rmi $srcTag $destTag end"
    40. Write-Host "sync $repo completed"
    41. }
    42. Write-Host "Completed..."

     

    六、More

    如果要同步的镜像比较多,考虑使用阿里云的镜像同步工具去同步

    七、Reference

  • 相关阅读:
    Windows OpenGL 图像透明度调节
    【算法基础】:(二)希尔排序
    Kubernetes基础入门(完整版)
    MySQL数据库基本操作-DQL-基本查询
    redis三(3-2)
    【HarmonyOS】【FAQ】鸿蒙问题合集3
    SPA路由实现的基本原理
    不同linux 比较
    Netty简介
    Python中列表生成器的使用
  • 原文地址:https://blog.csdn.net/zfw_666666/article/details/126268581