docker笔记

2020-09-10

Docker常用命令

先从dockerhub 中获取镜像内容
运行镜像，查看镜像中已有环境是否满足需求
镜像管理
1
2
3
docker pull ubuntu
docker images
docker search xxx

启动停止杀死,删除容器

docker start <container-id>
docker stop <container-id>
docker restart <container-id>
docker kill <container-id>(需要先停止才能杀死)
docker rm <container-id>

宿主机内容挂载&端口映射

内容挂载：相当于在容器中访问宿主机中文件
端口映射：访问宿主机上9888端口相当于访问容器9999端口

1	docker run -dit -p 9888:9999 -v <absolute-path>:/home/test ufoym/deepo:pytorch-py27-cu90 /bin/bash

列出所有容器id

1	docker ps -aq

进入后台运行的容器

docker exec -it <container-id> /bin/bash
或者
docker attach <container-id>

镜像保存与迁移

将正在运行的容器打包成镜像

# 会覆盖同名镜像
docker commit -m "commit_info" -a "author_name" <container-id> <image-id>:tag
docker commit 661e737faf25 explain:0.2
# 保存镜像到本地
docker save -o <tar_filename> <image-id>:tag
# 载入本地镜像
docker load --input centos_nginx.tar

也可以通过dockerfile的形式自由迁移镜像

dockerfile示例

ARG IMAGE_TAG=0.97
FROM <path>:${IMAGE_TAG}
# apt-get 安装所需软件
RUN apt-get --yes update && \
    apt-get --yes install --no-install-recommends \
        vim git ssh zip wget tmux lrzsz && \
    apt-get clean && \
    rm -rf /var/lib/apt/lists/*
# 安装 redis 5.0.5
RUN cd /usr/local/ && \
    wget http://download.redis.io/releases/redis-5.0.5.tar.gz && \
    tar xzf redis-5.0.5.tar.gz && \
    cd redis-5.0.5 && \
    make
ENV PATH='/usr/local/redis-5.0.5/src':$PATH
# pip 安装必需的库
RUN /usr/local/bin/python -m pip install --upgrade pip -i https://pypi.tuna.tsinghua.edu.cn/simple && \
    pip install jupyterlab -i https://pypi.tuna.tsinghua.edu.cn/simple
RUN pip install --no-cache-dir \
        Polygon3==3.0.8 \
        timeout_decorator==0.4.1
# 设置所需的环境变量
ENV POD_NAME='pod'
ENV NODE_NAME='node'
# 设置默认的工作目录
WORKDIR /

随后在Dockerfile 指定目录下执行，其中 . 表示目录路径

1	docker build -t <image-name>:<tag-name> .

常见问题

docker中文乱码解决

locale -a查看容器所有语言环境
修改/etc/profile文件
添加 export LANG=C.UTF-8
source /etc/profile
或者在制作dockerfile中添加
ENV LANG=C.UTF-8

docker部署tf-serving

# 在docker容器里启动tensorflow serving，把8501(rest)端口映射出来
-e 设置环境变量
docker run -t --rm -p 8501:8501 \
    -v "$TESTDATA/saved_model_half_plus_two_cpu:/models/half_plus_two" \
    -e MODEL_NAME=half_plus_two \
    tensorflow/serving &

docker ADD和COPY

参考链接：https://www.cnblogs.com/sparkdev/p/9573248.html

https://yeasy.gitbook.io/docker_practice/image/dockerfile/entrypoint

# 在容器中 checkredis.py 文件就是被复制到了 WORKDIR /app 目录下
WORKDIR /app
COPY checkredis.py .
COPY check* /testdir/           # 拷贝所有 check 开头的文件
COPY check?.log /testdir/       # ? 是单个字符的占位符，比如匹配文件 check1.log
# COPY 和 ADD 命令具有相同的特点：只复制目录中的内容而不包含目录自身。
WORKDIR /app
COPY nickdir ./nickdir

ADD 命令还可以解压压缩文件并把它们添加到镜像中

1 2	WORKDIR /app ADD nickdir.tar.gz .

在使用 COPY 和 ADD 命令时，我们可以通过一些技巧来加速镜像的 build 过程。比如把那些最不容易发生变化的文件的拷贝操作放在较低的镜像层中，这样在重新 build 镜像时就会使用前面 build 产生的缓存。

1
2
3

WORKDIR /app
COPY myhc.py .
COPY check* ./

MakeFile 构建docker

MakeFile可以与Docker-compose结合使用

Docker Compose Compose 简介 Compose 是用于定义和运行多容器 Docker 应用程序的工具。通过 Compose，您可以使用 YML 文件来配置应用程序需要的所有服务。然后，使用一个命令，就可以从 YML 文件配置中创建并启动所有服务。

如果你还不了解 YML 文件配置，可以先阅读 YAML 入门教程。

Compose 使用的三个步骤：

1.使用 Dockerfile 定义应用程序的环境。

2.使用 docker-compose.yml 定义构成应用程序的服务，这样它们可以在隔离环境中一起运行。

3.最后，执行 docker-compose up 命令来启动并运行整个应用程序。

https://www.runoob.com/docker/docker-compose.html

示例：

version: '3'
services:
  <contrainer-name>:
    image: ''
    ports:
      - 8003:8000
    tty: true
    privileged: true
    runtime: nvidia
    environment:
      ENV_DEBUG: DEBUG
      PYTHONUNBUFFERED: 1
      PROCESS_NUMBER: 1
      NVIDIA_VISIBLE_DEVICES: all
      ENV_SL: ""
      ENV_BATCH_SIZE: 64
      ENV_API_PRIOR_TASK_RESP: ""
      ENV_MQ_CONSUMER_NUM: 0
      ENV_GPU: 0
#    volumes:
#      - ""

在当前目录创建一个叫做Makefile的文件。

声明变量

简单的变量赋值，比如声明name

name=ryan

声明规则Rule

Makefile文件由一系列规则（rules）构成。每条规则的形式如下。

1 2	<target> : <prerequisites> [tab] <commands>

Docker构建用的指令我常用的Makefile如下

NAME = ryan/airflow
VERSION = 1.10.4
.PHONY: build start push
build:  build-version
build-version:
        docker build -t ${NAME}:${VERSION}  .
tag-latest:
        docker tag ${NAME}:${VERSION} ${NAME}:latest
start:
        docker run -it --rm ${NAME}:${VERSION} /bin/bash
push:   build-version tag-latest
        docker push ${NAME}:${VERSION}; docker push ${NAME}:latest

构建一个版本的镜像

1	make build

构建完毕，运行一下镜像，看看内容是否正确

1	make start

最后推送到docker仓库

make push