资源控制—Cgroup | | 创建私有仓库—registry

x33g5p2x  于2021-12-02 转载在 其他  
字(6.4k)|赞(0)|评价(0)|浏览(344)

一、创建私有仓库

1.下载registry镜像

docker pull registry

2.指定镜像仓库地址

vim /etc/docker/daemon.json
{
  "insecure-registries": ["192.168.126.13:5000"],		'//添加此段,本机IP地址'
  "registry-mirrors": ["https://q0kfjn11.mirror.aliyuncs.com"]
}

--
systemctl restart docker.service

3.创建registry容器并开放端口

docker create -it registry /bin/bash

docker start cb2298055587

docker run -d -p 5000:5000 -v /data/registry:/tmp/registry registry
'//-p指定端口,一内一外;-v表示挂载,前者是宿主机,后者是容器'

4.给镜像打标签后上传

docker tag nginx:latest 192.168.126.13:5000/nginx

docker push 192.168.126.13:5000/nginx

5.获取私有仓库列表查看是否上传成功

curl -XGET http://192.168.126.13:5000/v2/_catalog

'//若成功会返回以下值'
{"repositories":["nginx"]}

6.从私有仓库下载镜像

[root@xjj docker]# docker images
REPOSITORY                  TAG       IMAGE ID       CREATED       SIZE
192.168.126.13:5000/nginx   latest    ea335eea17ab   2 weeks ago   141MB
nginx                       latest    ea335eea17ab   2 weeks ago   141MB
registry                    latest    b8604a3fe854   2 weeks ago   26.2MB
[root@xjj docker]# docker rmi 192.168.126.13:5000/nginx:latest 
Untagged: 192.168.126.13:5000/nginx:latest
Untagged: 192.168.126.13:5000/nginx@sha256:2f14a471f2c2819a3faf88b72f56a0372ff5af4cb42ec45aab00c03ca5c9989f
[root@xjj docker]# docker images
REPOSITORY   TAG       IMAGE ID       CREATED       SIZE
nginx        latest    ea335eea17ab   2 weeks ago   141MB
registry     latest    b8604a3fe854   2 weeks ago   26.2MB
[root@xjj docker]# docker pull 192.168.126.13:5000/nginx
Using default tag: latest
latest: Pulling from nginx
Digest: sha256:2f14a471f2c2819a3faf88b72f56a0372ff5af4cb42ec45aab00c03ca5c9989f
Status: Downloaded newer image for 192.168.126.13:5000/nginx:latest
192.168.126.13:5000/nginx:latest
[root@xjj docker]# docker images
REPOSITORY                  TAG       IMAGE ID       CREATED       SIZE
192.168.126.13:5000/nginx   latest    ea335eea17ab   2 weeks ago   141MB
nginx                       latest    ea335eea17ab   2 weeks ago   141MB
registry                    latest    b8604a3fe854   2 weeks ago   26.2MB

二、资源控制 —Cgroup

1.对CPU的控制

①使用stress工具测试

[root@docker ~]# mkdir /opt/stress
[root@docker ~]# vim /opt/stress/Dockerfile
FROM centos:7
RUN yum -y install wget
RUN wget -O /etc/yum.repos.d/epel.repo http://mirrors.aliyun.com/repo/epel-7.repo		#epel源,可以使用扩展软件包(stress)
RUN yum -y install stress		#可以指定产生线程,使用循环语句,测试用'

--
[root@docker ~]# cd /opt/stress/
[root@docker ~]# systemctl restart docker.service #建议重启docker,不然下面的操作可能会失败,卡在wget
[root@docker stress]# docker build -t centos:stress . #生成镜像
...
...
Successfully built 175239ff1fce
Successfully tagged centos:stress
[root@docker stress]# docker ps -a
CONTAINER ID   IMAGE          COMMAND                  CREATED         STATUS                          PORTS     NAMES
50913883c239   8652b9f0cb4c   "/bin/sh -c 'yum -y …"   2 minutes ago   Exited (1) About a minute ago             amazing_swartz
[root@docker stress]# docker images 
REPOSITORY   TAG       IMAGE ID       CREATED          SIZE
centos       stress    175239ff1fce   18 minutes ago   456MB
centos       7         8652b9f0cb4c   4 months ago     204MB

--
#以下可以使用该镜像为基础产生的容器进行测试:'

②限制 CPU 使用周期速率

1.查看CPU的资源限制
命令格式:
cat /sys/fs/cgroup/cpu/docker/[容器ID]/cpu.cfs_quota_us

例:
[root@xjj stress]# docker run -itd --name test2 centos:7 /bin/bash
f95152f8c04241c88d0e81770b3c46a3272c85a1d17e354fba96568e39d680c4
[root@xjj stress]# cat /sys/fs/cgroup/cpu/docker/f95152f8c04241c88d0e81770b3c46a3272c85a1d17e354fba96568e39d680c4/cpu.cfs_quota_us
-1				#-1代表不进行任何限制

2.手动修改文件以实现修改CPU限制
[root@xjj stress]# echo 20000 > /sys/fs/cgroup/cpu/docker/f95152f8c04241c88d0e81770b3c46a3272c85a1d17e354fba96568e39d680c4/cpu.cfs_quota_us
[root@xjj stress]# cat /sys/fs/cgroup/cpu/docker/f95152f8c04241c88d0e81770b3c46a3272c85a1d17e354fba96568e39d680c4/cpu.cfs_quota_us20000

3.在运行容器的同时指定CPU限制条件
'以下这两个参数一般联合使用,控制容器可以分配到的CPU时钟周期'
'--cpu-period是用来指定容器对CPU的使用要在多长时间内做一次重新分配'
'--cpu-quota是用来指定在这个周期内,最多可以有多少时间来跑这个容器'

例:
'容器进程需要每秒使用单个CPU的0.2秒时间,可以将period设为1000000(1s)'
'若在多核情况下,允许容器进程完全占用两个CPU,可以将period设置为100000(0.1s)'
[root@xjj stress]# docker run -itd --name cpu01 --cpu-period=100000 --cpu-quota=200000 centos:stress
d71566bcfa58923c769bdf8183ef5efa21e84d6ca54b784f7a73630d6ee83752
[root@xjj stress]# docker exec -it d71 bash
[root@d71566bcfa58 /]# cat /sys/fs/cgroup/cpu/cpu.cfs_period_us 
100000
[root@d71566bcfa58 /]# cat /sys/fs/cgroup/cpu/cpu.cfs_quota_us 
200000

③多任务比例分享 CPU

当有多个容器任务同时运行时,很难计算 CPU 的使用率,我们可以设置 CPU 按照比例共享 CPU 资源,以实现使用率的动态调整

[root@xjj stress]# docker run -itd --name cpu1 --cpu-shares 1024 centos:stress stress -c 10 #-c 10表示产生10个子线程,测试用
624954cbbc38df08422edcd4e4e1f28708e4d098e4baceea83fe1632a17c0784
[root@xjj stress]# docker exec -it 624 bash
[root@624954cbbc38 /]# top #查看CPU使用率

--新开一个终端--
[root@xjj stress]# docker run -itd --name cpu2 --cpu-shares 2048 centos:stress stress -c 10
6d32a73b608b035f0400b5290628e3973089ca72121a2abfc277e59660be0aeb
[root@xjj stress]# docker exec -it 6d3 bash
[root@6d32a73b608b /]# top #对比CPU使用率,是1:2

④.限制 CPU 内核使用

可以通过配置,使得某些程序独享 CPU 内核,以提高其处理速度

[root@xjj ~]# cat /sys/fs/cgroup/cpuset/docker/d00a2563e936dd1198a80869efaf5d7d2b5c4d751d5bec4e80a6bdfdbbfcfd8c/cpuset.cpus
0-7
#若该服务器有8个核心,那么CPU编号为0-7,表示该容器内的进程在核心上皆可运行,这是默认配置'
#可查看/proc/cpuinfo中的CPU编号(processor)

--
[root@xjj ~]# docker run -itd --name a1 --cpuset-cpus 0-1 centos:7
#表示创建的容器只能使用0、1两个内核,其后可以使用top命令按1查看CPU使用

--
[root@xjj ~]# docker exec [容器ID] taskset -c -p 1 #表示绑定至指定CPU上运行

2.对内存使用的限制

'与操作系统类似,容器可使用的内存包括两部分:物理内存和 Swap'
'-m 或 --memory:设置内存的使用限额'
'--memory-swap:设置内存+swap 的使用限额'

--
docker run -itd -m 200M --memory-swap=300M progrium/stress --vm 1 --vm-bytes 280M
#--vm 1:启动1个内存工作线程'
#--vm-bytes 280M:每个线程分配280M内存'

--
#相应的Cgroup配置文件:/sys/fs/cgroup/memory/memory.limit_in_bytes

docker run -itd -m 200M --memory-swap=300M progrium/stress --vm 1 --vm-bytes 280M
#如果让工作线程分配的内存超过300M,分配的内存超过了限额,stress线程会报错,容器退出

--
'注意!一旦容器Cgroup使用的内存超过了限制的容量,Linux内核就会尝试收回这些内存'
'如果仍旧无法控制内存使用在这个设置的范围之内,就会杀死该进程!'

3.对磁盘 IO 资源的限制

如果实在一台服务器上进行容器的混合部署,那么可能会出现同时有几个程序写磁盘数据的情况,那么如何进行限制呢?

bps:byte per second(每秒读写的字节数)
iops:io per second(每秒IO的次数)

--
1.限制某个程序写入的bps数据量
docker run -d --device-write-bps /dev/sda:30M centos:7

2.限制读取某个程序的bps数据量
docker run -d --device-read-bps /dev/sda:30M centos:7

3.限制读取某个程序的iops次数
--device-read-iops

4.限制写入某个程序的iops次数
--device-write-iops

示例:限制容器写 /dev/sda 的速率为 5MB/s

[root@docker ~]# docker run -it --device-write-bps /dev/sda:5MB centos:stress
[root@0c729425a662 /]# dd if=/dev/zero of=test bs=1M count=1024 oflag=direct 
#dd复制,从zero拿文件test,每次拿1MB,写1024次即1GB大小
oflag=direct表示指定用direct IO 方式写文件,这样--device-write-bps才能生效
^C53+0 records in		#ctrl+c中途退出
53+0 records out
55574528 bytes (56 MB) copied, 10.6067 s, 5.2 MB/s

结果显示为5.2MB,以下再来对比测试一下不限速的

[root@0c729425a662 /]# exit
exit
[root@docker ~]# 
[root@docker ~]# docker run -it centos:stress
[root@8640cab42b0a /]# dd if=/dev/zero of=test bs=1M count=1024 oflag=direct
1024+0 records in
1024+0 records out
1073741824 bytes (1.1 GB) copied, 3.66132 s, 293 MB/s

总结

1、资源限制的主要类型

  • CPU权重shares、 quota、 cpuset
  • 磁盘BPS、 TPS限制, 指定使用哪个磁盘、磁盘分区
  • 内存 -m - swap 内存、交换分区
    大部分做的是上限的限制

2、资源限制的几种方式

  • build构建镜像时,可以指定该镜像的资源限制
  • run将镜像跑为容器的时候,可以指定容器的资源限制
  • 容器启动之后可以在宿主机对应容器的目录下,修改资源限制,然后重载
  • /sys/ fs/cgroup/* (cpu、b1k、 mem) /docker/容 器ID/ ——>修改对应的资源限制文件参数就可以

3、资源限制的状态查询

  • docker inspect 镜像ID/容器ID
  • 直接查看宿主机对应容器ID资源限制的文件

cgroup资源docker 原理之一, namespaces 6个名称空间

相关文章