Docker学习笔记

Docker相对于传统意义上的虚拟机最大的区别就在于传统虚拟机是虚拟出一套硬件后,再在上面运行一个完整的操作系统,再把需要运行的应用装在操作系统中运行。Docker在宿主的内核中运行应用进程,没有自己的内核,没有虚拟硬件,比起传统虚拟机更加轻快。

安装

一行代码就可完成安装:

1
2
$ curl -sSL https://get.daocloud.io/docker | sh 
$ curl -fsSL https://get.docker.com | bash -s docker --mirror Aliyun

启动 Docker

Ubuntu 12.04/14.04、Debian 7 Wheezy:

1
$ sudo service docker start

Ubuntu 16.04、Debian 8 Jessie/Stretch:

1
2
$ sudo systemctl enable docker
$ sudo systemctl start docker

建立用户组

默认情况下,docker 命令会使用 Unix socket 与 Docker 引擎通讯。而只有 root 用户和 docker 组的用户才可以访问 Docker 引擎的 Unix socket。出于安全考虑,一般 Linux 系统上不会直接使用 root 用户。因此,更好地做法是将需要使用 docker 的用户加入 docker 用户组。

建立 docker 组:

1
$ sudo groupadd docker

将当前用户加入 docker 组:

1
$ sudo usermod -aG docker $USER

Docker基本概念

  • 镜像:操作系统
  • 容器:容器是独立运行的一个或一组应用,以及它们的运行态环境,镜像和容器的关系就像是面向对象中的实例
  • 仓库:镜像需要存储和分发,仓库用来存储镜像

Docker Registry

一个Docker Registry中可以包含多个仓库

Docker Hub

最常使用的 Registry 公开服务是官方的 Docker Hub,这也是默认的 Registry。

Docker Registry 公开服务

国内访问Registry 公开服务会有些慢(原因你懂得),国内云服务商提供了针对 Docker Hub 的镜像服务(Registry Mirror),这些镜像服务被称为加速器,常见的有 阿里云加速器DaoCloud 加速器灵雀云加速器等。

配置如下:

国内也有一些云服务商提供类似于 Docker Hub 的公开服务。比如 时速云镜像仓库网易云镜像服务DaoCloud 镜像市场阿里云镜像库等。

镜像

获取镜像

1
2
$ docker pull [选项][Docker Registry地址]<仓库名>:<标签>
例如:$ docker pull ubuntu

  • Docker Registry地址:地址的格式一般是 <域名/IP>[:端口号]
    ,默认地址是 Docker Hub。
  • 仓库名:如之前所说,这里的仓库名是两段式名称,既 <用户名>/<软件名>
    。对于 Docker Hub,如果不给出用户名,则默认为 library
    ,也就是官方镜像。

运行镜像

有个镜像就可以以这个镜像运行一个容器,以上面ubuntu为例运行一个容器。

1
$ docker run -it --rm ubuntu bash

  • docker run :就是运行容器的命令
  • -it :其实是两个参数,-i:交互式操作,-t :终端
  • --rm :容器退出后随之将其删除
  • ubuntu :用 ubuntu 镜像为基础来启动容器
  • bash:放在镜像名后的是命令,这里我们希望有个交互式 Shell,因此用的是 bash

1
$ docker run -d -p 22 -p 80:8080 ubuntu/kevin /usr/sbin/sshd -D

  • -d :容器后台运行
  • -p :指定端口设置
  • -p 80:8080 :端口映射,省略80表示把容器端口8080映射到一个动态端口
  • /usr/sbin/sshd :启动 ssh 服务
  • -D :容器长时间运行

注:

  • exit:退出容器
  • docker 容器有一个运行机制,当容器内没有前台运行进程时就会自动退出,所以会有一些容器,比如 PytonJava,如果不运行一个进程就会立即退出,所有在 run 的时候需要加上 -it 参数保证容器不会自动退出

列出镜像

列出下载的镜像用docker images命令。

列表中的镜像体积综合并非实际硬盘消耗,由于 Docker 镜像是多层存储结构,并且可以继承、复用,因此不同镜像可能会因为使用相同的基础镜像,从而拥有共同的层。

虚悬镜像

镜像既没有仓库名,也没有标签,均为 <none>。此类镜像为虚悬镜像(dangling image) ,下面命令专门显示此类镜像

1
$ docker images -f dangling=true

这类镜像已经失去了存在的价值,可以随意删除,删除命令如下

1
$ docker rmi $(docker images -q -f dangling=true)

中间层镜像

为了加速镜像构建、重复利用资源,Docker 会利用 中间层镜像。所以在使用一段时间后,可能会看到一些依赖的中间层镜像。默认的 docker images 列表中只会显示顶层镜像,如果希望显示包括中间层镜像在内的所有镜像的话,需要加 -a 参数。

1
$ docker images -a

列出部分镜像

根据仓库名列出镜像

1
$ docker image ubuntu

根据仓库名和标签

1
$ docker images ubunut:16.04

除此以外,docker images 还支持强大的过滤器参数 --filter,或者简写 -f。希望看到在nginx之后建立的镜像,可以用下面的命令

1
$ docker images -f since=nginx

希望看到nginx之前建立的镜像,since换成before

保存镜像

可用下面命令保存镜像

1
2
$ docker commit [OPTIONS] CONTAINER [REPOSITORY[:TAG]]
例如:docker commit -m "commit message" CONTAINER

  • -m:保存commit信息

删除镜像

可用下面命令删除镜像

1
$ docker rmi [OPTIONS] IMAGE [IMAGE...]

导出镜像

1
$ docker save ubunut:16.04 > ubunut.tar

导入镜像

1
$ docker load < ubunut.tar

容器

启动

所需主要命令为docker run

1
$ sudo docker run -u root --name kevin -i -t --restart always ubuntu /bin/bash

  • -u:以 root 用户运行,防止权限不足
  • --name:为容器指定名称
  • -i :保证容器中STDIN是开启的
  • -t :为创建的容器分配一个伪tty终端,这样容器才能提供一个交互式shell
  • --restart :配置重启策略,默认是 no
    • no :不重启
    • on-failure :容器退出状态非0重启
    • always :始终重启
      docker start命令直接将一个已经终止的容器启动

如果没有进程在前台运行,容器会自动结束,为了避免这个问题 -it 参数是必要的

后台运行

更多的时候,需要让 Docker在后台运行而不是直接把执行命令的结果输出在当前宿主机下。此时,可以通过添加 -d 参数来实现。

获取容器的输出信息,可以通过 docker logs 命令。

查看日志

1
$ docker logs -f -t --since="2020-04-31" --tail=10 edu_web_1

  • –since:此参数指定了输出日志开始日期,即只输出指定日期之后的日志
  • -f:查看实时日志
  • -t:查看日志产生的日期
  • -tail=10:查看最后的10条日志
  • edu_web_1:容器名称

启动并进入

大多数情况,我们需要启动并且直接进入到容器里面。

1
$ docker run -it 容器名 bash

终止

可用 docker stop [OPTIONS] CONTAINER [CONTAINER...] 来终止一个运行中的容器。

注:此命令后面是CONTAINER ID或者NAME参数,可用docker ps查看

此外,当Docker容器中指定的应用终结时,容器也自动终止。 例如对于上一章节中只启动了一个终端的容器,用户通过 exit 命令或 Ctrl+d 来退出终端时,所创建的容器立刻终止。

终止状态的容器可以用 docker ps -a 命令看到。

1
$ docker rm $(docker ps -qa --no-trunc --filter "status=exited")    # 删除所有已退出容器

查看容器进程

1
$ docker top [CONTAINER]

进入容器

在使用 -d 参数时,容器启动后会进入后台。 某些时候需要进入容器进行操作

可用docker attach [OPTIONS] CONTAINER命令进入

更新容器

有时需要在启动容器后增加一些配置参数,比如给容器添加重启:

1
$ docker update --restart=always CONTAINER_NAME

导出容器

可用 docker export 命令。

1
$ docker export ubuntu:kevin > latest.tar

导入容器

可用 docker improt 命令。

注:用户既可以使用 docker load 来导入镜像存储文件到本地镜像库,也可以使用 docker import 来导入一个容器快照到本地镜像库。这两者的区别在于容器快照文件将丢弃所有的历史记录和元数据信息(即仅保存容器当时的快照状态),而镜像存储文件将保存完整记录,体积也要大。此外,从容器快照文件导入时可以重新指定标签等元数据信息。

删除容器

可用 docker rm 来删除一个处于终止状态的容器

docker ps -a 命令可以查看所有已经创建的包括终止状态的容器,如果数量太多要一个个删除可能会很麻烦,用 docker rm $(docker ps -a -q) 可以全部清理掉。

仓库

仓库(Repository)是集中存放镜像的地方。

搜索

用户无需登录即可通过 docker search 命令来查找官方仓库中的镜像,并利用 docker pull 命令来将它下载到本地。

另外,查找的时候通过 -s N 参数可以指定仅显示评价为 N 星以上的镜像(已经过时,不推荐使用),最新版本使用

--filter过滤查找。

利用下面命令下载到本地

1
$ sudo docker pull centos

数据管理

容器中管理数据主要有两种方式:

  • 数据卷(Data volumes)
  • 数据卷容器(Data volume containers)

数据卷

数据卷是一个可供一个或多个容器使用的特殊目录,它绕过 UFS,可以提供很多有用的特性:

  • 数据卷可以在容器之间共享和重用
  • 对数据卷的修改会立马生效
  • 对数据卷的更新,不会影响镜像
  • 数据卷默认会一直存在,即使容器被删除

注意:数据卷的使用,类似于 Linux 下对目录或文件进行 mount,镜像中的被指定为挂载点的目录中的文件会隐藏掉,能显示看的是挂载的数据卷。

容器和主机之间拷贝数据

拷贝容器文件到主机

1
2
3
$ docker cp [OPTIONS] CONTAINER:SRC_PATH DEST_PATH

例如:docker cp CONTAINER:/usr/local/tomcat/webapps/ROOT/index.html index.html

拷贝主机文件到容器

1
2
3
$ docker cp [OPTIONS] SRC_PATH|- CONTAINER:DEST_PATH

例如:docker cp index.html CONTAINER:/usr/local/tomcat/webapps/ROOT/index.html

网络

网络模式

1
2
3
4
5
# host模式
$ docker run -d --net=host ubuntu:14.04 tail -f /dev/null

# bridge模式
$ docker run -d -P --net=bridge nginx:1.9.1

Docker Machine 是一个 docker 管理工具,主要解决两个问题:

  • docker 只能运行在 Linux 上
  • docker 只能管理运行本机的 docker 镜像

由于之前配置了 使用Docker Machine管理阿里云ECS ,Docker Machine使用一直不成功,报错信息如下:

1
Error setting machine configuration from flags provided: --engine-install-url cannot be used with the virtualbox driver, use --virtualbox-boot2docker-url instead

原因在于配置了阿里的一些参数,其中包括了MACHINE_DOCKER_INSTALL_URL,这个是报错的主要原因,查了半天的资料终于爬出坑了

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
# 列出所有 docker 主机
$ docker-machine ls

# 查看 docker 主机参数
$ docker-machine env default
export DOCKER_TLS_VERIFY="1"
export DOCKER_HOST="tcp://192.168.99.100:2376"
export DOCKER_CERT_PATH="/Users/Kevin/.docker/machine/machines/default"
export DOCKER_MACHINE_NAME="default"
# Run this command to configure your shell:
# eval $(docker-machine env default)

# 查看主机参数后,已经有很明显的提示告诉你怎么配置shell
$ eval $(docker-machine env default)

# 执行过后是不是没发现有什么变化,执行下面命令可以查看出区别
$ docker version

# 本地 docker 主机
Client:
Version: 17.03.1-ce
API version: 1.27
Go version: go1.7.5
Git commit: c6d412e
Built: Tue Mar 28 00:40:02 2017
OS/Arch: darwin/amd64
# 连接的 docker 主机
Server:
Version: 17.05.0-ce
API version: 1.29 (minimum version 1.12)
Go version: go1.7.5
Git commit: 89658be
Built: Thu May 4 21:43:09 2017
OS/Arch: linux/amd64
Experimental: false

# 不想关闭终端设置本地 docker
$ eval $(docker-machine env -u)

如果想要导入已有 Docker 主机到 docker-machine,需要配置 SSH 免密登录才能进行下一步,SSH 的配置网上教程有很多,不再赘述,Machine 所支持的驱动,下面是关于 Generic 驱动的一个例子:

1
docker-machine create --driver generic --generic-ip-address=1.1.1.1 --generic-ssh-key ~/.ssh/id_rsa_ali [name]

  • —generic-ip-address:指定远程 Docker 主机 IP
  • —generic-ssh-key:SSH 密钥
  • —engine-storage-driver:指定Docker Engine使用的存储驱动程序为overlay
  • name:在 docker-machine 中的名字,自定义

Error creating machine: Error checking the host: Error checking and/or regenerating the certs: There was an error validating certificates for host “0.0.0.0:2376”: tls: DialWithDialer timed out

如果遇到上面的错误,优先排查服务器 2376 端口是否可以正常访问,阿里云新买的服务器需要配置安全组规则才能正常访问这个端口

mount 本地磁盘

docker machine下如果需要mount本地磁盘,需要用到sshfs,macOS 可以使用brew安装:

1
2
$ brew cask install osxfuse
$ brew install sshfs

接着需要把远程主机的上的目录映射到本机:

1
2
3
4
5
6
$ mkdir foo
$ docker-machine ssh dev mkdir foo
$ docker-machine mount dev:/home/docker/foo foo
$ touch foo/bar
$ docker-machine ssh dev ls foo
bar

这样就把远程主机的目录映射到了本机,本机操作该目录同样会同步到远程主机上:

1
2
3
4
5
6
7
$ eval $(docker-machine env dev)
$ docker run -v /home/docker/foo:/tmp/foo busybox ls /tmp/foo
bar
$ touch foo/baz
$ docker run -v /home/docker/foo:/tmp/foo busybox ls /tmp/foo
bar
baz

Push本地镜像到DockerHub

首先镜像名称格式需要是DockerHubName/RepositoryName,例如kevinlovedev/tomcat,可用docker commit命令保存镜像,/前面是DockerHub昵称,/后面是DockerHub仓库名。

保存镜像成功之后,需要用docker login命令登陆到DockerHub。

最后用docker push命令提交本地镜像到DockerHub仓库。

Dockerfile

MAINTAINER:设置该镜像的作者。语法如下:

1
MAINTAINER kevin "[email protected]"

build

使用了 docker build 命令进行镜像构建。其格式为:

1
2
$ docker build -t ubuntu:kevin .
$ docker build -t ubuntu:kevin -f myDockerfile

-t 指定了最终镜像的名称 ubuntu:kevin
-f 指定构建文件

常用

MySQL

1
$ docker run --name some-mysql -e MYSQL_ROOT_PASSWORD=my-secret-pw  -p 3306:3306 -d mysql --default-authentication-plugin=mysql_native_password

--default-authentication-plugin=mysql_native_password 是为了避免客户端不支持默认加密方式 caching_sha2_password,不加出现以下报错:

1
mysql 2059 - Authentication plugin 'caching_sha2_password' cannot be loaded: dlopen(../Frameworks/caching_sha2_password.so, 2): image not found

删除无用资源

docker 提供了删除无用资源的指令:

1
$ docker system prune [OPTIONS]

常见问题

无法删除一

1
Error response from daemon: conflict: unable to delete e4b9e4f71238 (must be forced) - image is being used by stopped container 1e359ad4363d

该容器是终止状态,需要将此容器从终止状态删除,然后再删除镜像

1
2
$ docker rm 1e359ad4363d    # 删除终止容器
$ docker rmi e4b9e4f71238 # 删除镜像

无法删除二

1
Error response from daemon: conflict: unable to delete 1dc4f730b414 (cannot be forced) - image has dependent child images

先删除依赖,如果 IMAGE ID 相同的话,根据 TAG 删除

1
$ docker rm REPOSITORY:TAG    # 根据TAG删除容器

无法删除三

1
Error response from daemon: Driver overlay failed to remove root filesystem 1dc4f730b414... device or rresource busy

在 CentOS 环境下重启 Docker 服务即可:

1
$ sudo service docker restart

语法错误

1
Error response from daemon: Unknown instruction: RUNCMD

can’t initialize iptables

1
can't initialize iptables table `filter': Permission denied (you must be root)

启动容器时加入参数 --privileged=true

WARNING: IPv4 forwarding is disabled. Networking will not work.

需要开启 IPv4 转发

1
2
3
4
5
# 检测是否开启了 ipv4 转发
$ sysctl net.ipv4.ip_forward
# net.ipv4.ip_forward = 0 0:关闭 1:开启
# 检测是否能连接到外网
$ docker run busybox ping lovedev.org

Dockerfile 中 apt-get update 特别慢

在京东云上一个用 Dockerfile 构建一个镜像,一个问题困扰了很久,就是 apt-get update 的时候要么失败,要么很久很久都没有反应,换成国内镜像也有同样的问题,在网上看到文章说是 Docker 网卡的 MTU 值和宿主机网卡的 MTU 不一致导致的,不得不说京东云客服还是很给力的,修改一致后恢复正常

容器自动退出的解决办法

Docker容器后台运行,就必须有一个前台进程.容器运行的命令如果不是那些一直挂起的命令(比如运行top,tail),就是会自动退出的
在启动脚本里面增加一个执行进程:

1
tail -f /dev/null

如果是别人的镜像你不想修改:

1
2
3
4
# 用-dit参数
docker run -dit --name ubuntu2 ubuntu
# 或者增加运行指令
docker run -d --name ubuntu ubuntu /bin/bash -c "tail -f /dev/null"

参考资料

Http缓存机制 Markdown简单语法说明

评论

Your browser is out-of-date!

Update your browser to view this website correctly. Update my browser now

×