<p>以 Docker 为代表的容器技术在云计算领域正扮演着越来越重要的角色，甚至一度被认为是虚拟化技术的替代品。企业级的容器应用常常需要将重要的数据持久化，方便在不同容器间共享。为了能够持久化数据以及共享容器间的数据，Docker 提出了 Volume 的概念。单机环境的数据卷难以满足 Docker 集群化的要求，因此需要引入分布式文件系统。目前开源的分布式文件系统有许多，例如 GFS，Ceph，HDFS，FastDFS，GlusterFS 等。GlusterFS 因其部署简单、扩展性强、高可用等特点，在分布式存储领域被广泛使用。本文主要介绍了如何利用 GlusterFS 为 Docker 集群提供可靠的分布式文件存储。</p>    <h2>GlusterFS 分布式文件系统简介</h2>    <h3>GlusterFS 概述</h3>    <p>GlusterFS (Gluster File System) 是一个开源的分布式文件系统，主要由 Z RESEARCH 公司负责开发。GlusterFS 是 Scale-Out 存储解决方案 Gluster 的核心，具有强大的横向扩展能力，通过扩展能够支持数PB存储容量和处理数千客户端。GlusterFS 借助 TCP/IP 或 InfiniBand RDMA 网络将物理分布的存储资源聚集在一起，使用单一全局命名空间来管理数据。GlusterFS 基于可堆叠的用户空间设计，可为各种不同的数据负载提供优异的性能。</p>    <p>GlusterFS 总体架构与组成部分如图1所示，它主要由存储服务器（Brick Server）、客户端以及 NFS/Samba 存储网关组成。不难发现，GlusterFS 架构中没有元数据服务器组件，这是其最大的设计这点，对于提升整个系统的性能、可靠性和稳定性都有着决定性的意义。</p>    <ul>     <li>GlusterFS 支持 TCP/IP 和 InfiniBand RDMA 高速网络互联。</li>     <li>客户端可通过原生 GlusterFS 协议访问数据，其他没有运行 GlusterFS 客户端的终端可通过 NFS/CIFS 标准协议通过存储网关访问数据（存储网关提供弹性卷管理和访问代理功能）。</li>     <li>存储服务器主要提供基本的数据存储功能，客户端弥补了没有元数据服务器的问题，承担了更多的功能，包括数据卷管理、I/O 调度、文件定位、数据缓存等功能，利用 FUSE（File system in User Space）模块将 GlusterFS 挂载到本地文件系统之上，实现 POSIX 兼容的方式来访问系统数据。</li>    </ul>    <p>图1. GlusterFS 总体架构</p>    <p style="text-align: center;"><img src="https://simg.open-open.com/show/2aafd04b3a6421b7c5de4f48ffb6bed2.png"></p>    <p style="text-align: center;"><img src="https://simg.open-open.com/show/4b421b3eca4f057a8f475d6c5a5b9ed0.png" alt="基于 GlusterFS 实现 Docker 集群的分布式存储" width="550" height="314"></p>    <p>如图 1 中 GlusterFS 有非常多的术语，理解这些术语对理解 GlusterFS 的动作机理是非常重要的，表1给出了 GlusterFS 常见的名称及其解释。</p>    <p>表1. GlusterFS 常见术语</p>    <table>     <thead>      <tr>       <th>名称</th>       <th>解释</th>      </tr>     </thead>     <tbody>      <tr>       <td>Brick</td>       <td>最基本的存储单元，表示为trusted storage pool中输出的目录，供客户端挂载用。</td>      </tr>      <tr>       <td>Volume</td>       <td>一个卷。在逻辑上由N个bricks组成。</td>      </tr>      <tr>       <td>FUSE</td>       <td>Unix-like OS上的可动态加载的模块，允许用户不用修改内核即可创建自己的文件系统。</td>      </tr>      <tr>       <td>Glusterd</td>       <td>Gluster management daemon，要在trusted storage pool中所有的服务器上运行。</td>      </tr>      <tr>       <td>POSIX</td>       <td>一个标准，GlusterFS兼容。</td>      </tr>     </tbody>    </table>    <h3>GlusterFS卷类型</h3>    <p>为了满足不同应用对高性能、高可用的需求，GlusterFS 支持 7 种卷，即 distribute 卷、stripe 卷、replica 卷、distribute stripe 卷、distribute replica 卷、stripe Replica 卷、distribute stripe replica 卷。其实不难看出，GlusterFS 卷类型实际上可以分为 3 种基本卷和 4 种复合卷，每种类型的卷都有其自身的特点和适用场景。</p>    <p>基本卷：</p>    <p>(1) distribute volume 分布式卷</p>    <p>基于 Hash 算法将文件分布到所有 brick server，只是扩大了磁盘空间，不具备容错能力。由于distribute volume 使用本地文件系统，因此存取效率并没有提高，相反会因为网络通信的原因使用效率有所降低，另外本地存储设备的容量有限制，因此支持超大型文件会有一定难度。图2 是 distribute volume 示意图。</p>    <p>图2. Distribute volume示意图</p>    <p style="text-align: center;"><img src="https://simg.open-open.com/show/4fd9ca5a320623d0427bd685980cf39a.jpg"></p>    <p style="text-align: center;"><img src="https://simg.open-open.com/show/db649f3f405030f723757aac9f541524.jpg" alt="基于 GlusterFS 实现 Docker 集群的分布式存储" width="550" height="301"></p>    <p>(2) stripe volume 条带卷</p>    <p>类似 RAID0，文件分成数据块以 Round Robin 方式分布到 brick server 上，并发粒度是数据块，支持超大文件，大文件的读写性能高。图3 是 stripe volume 示意图。</p>    <p>图3. Stripe volume示意图</p>    <p style="text-align: center;"><img src="https://simg.open-open.com/show/47124161a78f0030ebbc9b56417ab5f0.jpg"></p>    <p style="text-align: center;"><img src="https://simg.open-open.com/show/b74d1a68904ba3b262224d78966374da.jpg" alt="基于 GlusterFS 实现 Docker 集群的分布式存储" width="550" height="304"></p>    <p>(3) replica volume 复制卷</p>    <p>文件同步复制到多个 brick 上，文件级 RAID1，具有容错能力，写性能下降，读性能提升。Replicated 模式，也称作 AFR（Auto File Replication），相当于 RAID1，即同一文件在多个镜像存储节点上保存多份，每个 replicated 子节点有着相同的目录结构和文件，replica volume 也是在容器存储中较为推崇的一种。图4 是 replica volume 示意图。</p>    <p>图4 . Replica volume示意图</p>    <p style="text-align: center;"><img src="https://simg.open-open.com/show/a3b3dfa465f8c68a73a72de9a459b9f1.jpg"></p>    <p style="text-align: center;"><img src="https://simg.open-open.com/show/df213b1479b57d5ebe460f64db836e6e.jpg" alt="基于 GlusterFS 实现 Docker 集群的分布式存储" width="550" height="303"></p>    <p>复合卷：</p>    <p>(4) distribute stripe volume 分布式条带卷</p>    <p>Brick server 数量是条带数的倍数，兼具 distribute 和 stripe 卷的特点。分布式的条带卷，volume 中 brick 所包含的存储服务器数必须是 stripe 的倍数(>=2倍)，兼顾分布式和条带式的功能。每个文件分布在四台共享服务器上，通常用于大文件访问处理，最少需要 4 台服务器才能创建分布条带卷。图5 是distribute stripe volume 示意图。</p>    <p>图5 . Distribute stripe volume 示意图</p>    <p style="text-align: center;"><img src="https://simg.open-open.com/show/34084efa51539c7f17b656c0bed1fd91.jpg"></p>    <p style="text-align: center;"><img src="https://simg.open-open.com/show/fc61c8f2f51b7a9732ad045606d0ff75.jpg" alt="基于 GlusterFS 实现 Docker 集群的分布式存储" width="550" height="335"></p>    <p>(5) distribute replica volume 分布式复制卷</p>    <p>Brick server 数量是镜像数的倍数，兼具 distribute 和 replica 卷的特点,可以在 2 个或多个节点之间复制数据。分布式的复制卷，volume 中 brick 所包含的存储服务器数必须是 replica 的倍数(>=2倍)，兼顾分布式和复制式的功能。图6 是 distribute replica volume 示意图。</p>    <p>图6 . Distribute replica volume 示意图</p>    <p style="text-align: center;"><img src="https://simg.open-open.com/show/9c4c7656494116cdfbae62c80a09d326.jpg"></p>    <p style="text-align: center;"><img src="https://simg.open-open.com/show/6804c9c1512b0626472ae6f64bb208b3.jpg" alt="基于 GlusterFS 实现 Docker 集群的分布式存储" width="550" height="333"></p>    <p>(6) stripe replica volume 条带复制卷</p>    <p>类似 RAID 10，同时具有条带卷和复制卷的特点。图7 是 distribute replica volume 示意图。</p>    <p>图7 . Stripe replica volume 示意图</p>    <p style="text-align: center;"><img src="https://simg.open-open.com/show/72c9e6d245e1a4dcddcb50c1b790e787.png"></p>    <p style="text-align: center;"><img src="https://simg.open-open.com/show/0f2e24baee0c0d035333c999ef100f92.png" alt="基于 GlusterFS 实现 Docker 集群的分布式存储" width="550" height="350"></p>    <p>(7) distribute stripe replica volume：分布式条带复制卷</p>    <p>三种基本卷的复合卷，通常用于类 Map Reduce 应用。图8 是 distribute stripe replica volume 示意图。</p>    <p>图8 . Distribute stripe replica volume 示意图</p>    <p style="text-align: center;"><img src="https://simg.open-open.com/show/6f32a9bec1c5d4db0779bb1727313996.png"></p>    <p style="text-align: center;"><img src="https://simg.open-open.com/show/9bb8d4b839b60daa797288b2bd5040e9.png" alt="基于 GlusterFS 实现 Docker 集群的分布式存储" width="550" height="383"></p>    <h3>GlusterFS 常用命令</h3>    <p>GlusterFS 客户端提供了非常丰富的命令用来操作节点、卷，表2给出了常用的一些命令。在与容器对接过程中，通过我们需要创建卷、删除卷，以及设定卷的配额等功能，并且后续这些功能也需要 REST API 化，方便通过HTTP请求的方式来操作卷。</p>    <p>表2. GlusterFS 客户端常用命令</p>    <table>     <thead>      <tr>       <th>命令</th>       <th>功能</th>      </tr>     </thead>     <tbody>      <tr>       <td>gluster peer probe</td>       <td>添加节点</td>      </tr>      <tr>       <td>gluster peer detach</td>       <td>移除节点</td>      </tr>      <tr>       <td>gluster volume create</td>       <td>创建卷</td>      </tr>      <tr>       <td>gluster volume start</td>       <td>启动卷</td>      </tr>      <tr>       <td>gluster volume stop</td>       <td>停止卷</td>      </tr>      <tr>       <td>gluster volume delete</td>       <td>删除卷</td>      </tr>      <tr>       <td>gluster volume quota enable</td>       <td>开启卷配额</td>      </tr>      <tr>       <td>gluster volume quota enable</td>       <td>关闭卷配额</td>      </tr>      <tr>       <td>gluster volume quota limit-usage</td>       <td>设定卷配额</td>      </tr>     </tbody>    </table>    <h2>GlusterFS 分布式文件系统安装与配置</h2>    <h3>GlusterFS 集群搭建</h3>    <p>本文将以 Ubuntu14.04.3 LTS Server 为例安装 2 个节点的 GlusterFS 集群。每个服务节点需要有一个额外的盘符。具体请参考下面步骤：</p>    <p>清单1. 搭建 GlusterFS 集群</p>    <pre>  # (1). 格式化磁盘  fdisk /dev/sdb  命令行提示下输入【m】  输入命令【n】添加新分区  输入命令【p】创建主分区  输入【回车】，选择默认大小，这样不浪费空间  输入【回车】，选择默认的start cylinder  输入【w】，保持修改    # (2). 添加gluster源  cat >>/etc/apt/sources.list <<EOF  deb http://ppa.launchpad.net/gluster/glusterfs-3.7/ubuntu trusty main  deb-src http://ppa.launchpad.net/gluster/glusterfs-3.7/ubuntu trusty main  EOF    # (3). 安装glusterfs  apt-get install xfsprogs glusterfs-server -y  mkfs.xfs -i size=512 /dev/sdb1  mkdir -p /glusterfs/brick  #挂载点  echo '/dev/sdb1 /glusterfs/brick xfs defaults 1 2' >> /etc/fstab #设置自动挂载  mount -a && mount  gluster volume set all cluster.op-version 30710    # (4). 配置peer  gluster peer probe <IP|HOSTNAME>  gluster peer status    # (5). 当出现下列信息时表示集群搭建成功  gluster peer status  Number of Peers: 1    Hostname: 192.168.1.101  Uuid: 8d836e09-f217-488b-971c-be9206a197f6  State: Peer in Cluster (Connected)    # (6). 创建Volume  gluster volume create <VOLUME_NAME> replica 2 \  node1: /glusterfs/brick/<VOLUME_NAME> \  node2: /glusterfs/brick/<VOLUME_NAME>    # (7). 启动Volume  gluster volume start <VOLUME_NAME></pre>    <h3>GlusterFS 客户端配置</h3>    <p>清单2. GlusterFS 客户端配置</p>    <pre>  # (1). 添加gluster源  cat >>/etc/apt/sources.list <<EOF  deb http://ppa.launchpad.net/gluster/glusterfs-3.7/ubuntu trusty main  deb-src http://ppa.launchpad.net/gluster/glusterfs-3.7/ubuntu trusty main  EOF    # (2). 安装glusterfs client  apt-get install glusterfs-client -y    # (3). 挂载gluster卷  glusterfs node1:<VOLUME_NAME> /mnt/local-volume</pre>    <p>至此，我们就挂载好了GlusterFS集群中的一个Replica类型的卷，所有写入该卷中的数据都会在集群中有两份拷贝。</p>    <h2>Docker GlusterFS Volume 插件</h2>    <p>接下来，我们再来看GlusterFS如何作为Docker的存储。Docker Volume是一种可以将容器以及容器生产的数据分享开来的数据格式，我们可以使用宿主机的本地存储作为Volume的提供方，也可以使用Volume Plugin接入许多第三方的存储。 GitHub就有一个 Docker GlusterFS Volume Plugin ，方便我们将GlusterFS挂载到容器中。具体步骤如下：</p>    <p>清单3. 安装 Docker GlusterFS Volume 插件</p>    <pre>  # (1). 获取docker-volume-glusterfs  go get github.com/calavera/docker-volume-glusterfs  考虑到搭建golang环境有一定的复杂性，我们也可以采用golang容器来获取该应用    # (2). 拷贝docker-volume-glusterfs至/usr/bin  cp ./docker-volume-glusterfs /usr/bin  chmod 777 /usr/bin/docker-volume-glusterfs    # (3). 声明gluster服务集群  docker-volume-glusterfs -servers node1:node2    # (4). 指定volume  docker run --volume-driver glusterfs --volume datastore:/data alpine touch /data/hello  这里的datastore即我们在glusterfs集群中创建的volume，但需要事先手动创建</pre>    <h2>GlusterFS REST API 服务搭建</h2>    <p>上述步骤虽然实现了 GlusterFS 作为 Docker 存储方案，但 GlusterFS 卷仍需要手动创建。为了自动化地管理 GlusterFS 卷，我们将卷操作封装成 REST API。 GitHub上的 <a href="/misc/goto?guid=4959746422736479522" rel="nofollow,noindex">glusterfs-rest</a> 将 GlusterFS 基础操作使用 Python 封装成了 REST API，但是它没有将 Volume 容量限制等功能封装起来，而我们项目中这个功能又是必须的，不过稍加修改后就可以实现容量限制的功能。</p>    <p>清单4. 添加 Volume 容量限制功能</p>    <pre>  # (1). 克隆代码  git clone <a href="/misc/goto?guid=4959746422830892868">https://github.com/aravindavk/glusterfs-rest.git</a>    # (2). 修改glusterfs-rest/glusterfsrest/cli/ volume.py create方法  def create(name, bricks, replica=0, stripe=0, transport='tcp', force=False,             start_volume=False,limit=False,quota=1):      cmd = VOLUME_CMD + ["create", name]      if stripe > 0:          cmd += ["stripe", str(stripe)]        if replica > 0:          cmd += ["replica", str(replica)]        cmd += ["transport", transport]        cmd += bricks        if force:          cmd += ["force"]        # If volume needs to be started, then run create command without      # decorator else return create command and status zero true      # decorator will take care of running cmd      if start_volume:          utils.checkstatuszero(cmd)          if limit:              enable_cmd = VOLUME_CMD + ["quota",name,"enable"]              quota_cmd = VOLUME_CMD +["quota",name,"limit-usage","/",str(quota)+"GB"]              start(name, force=True)              utils.checkstatuszero(enable_cmd)              return utils.checkstatuszero(quota_cmd)          else:              return start(name, force=True)      else:          return utils.checkstatuszero(cmd)  # (3). 修改glusterfs-rest/glusterfsrest/doc/api-1.0.yml Create内容  # -----------------------------------------------------------------------------  # Create Gluster Volume  # -----------------------------------------------------------------------------      - title: Create Gluster Volume        auth: true        url: volume/:name        category: volume        method: POST        params:          - name: bricks            type: string            required: true            example: "bricksserver1:/exports/bricks/b1"            desc: Comma seperated Brick paths            - name: replica            type: int            required: false            example: 1            desc: Replica Count            default: 0            - name: stripe            type: int            required: false            example: 1            desc: Stripe Count            default: 0            - name: transport            type: int            required: false            example: tcp            desc: Transport Type, available types "tcp", "rdma", "tcp,rdma"            default: tcp            - name: force            type: int            required: false            example: 1            desc: Volume create force            default: 0            - name: start            type: int            required: false            example: 1            desc: Start volume after create            default: 0            - name: limit            type: int            required: false            example: 1            desc: Limit volume after start            default: 0            - name: quota            type: int            required: false            example: 1            desc: Set Quota if limit            default: 1        example: |            curl -X POST http://admin:secret123@localhost:9000/api/1.0/volume/gv1 -d \          "bricks=bricksserver1:/exports/bricks/b1,bricksserver2:/exports/bricks/b2&start=1&replica=2&limit=1&quota=2"          response: |            Success example:          {              "data": true,              "ok": true          }            Failure example:            {              "error": "volume create: gv1: failed: Volume gv1 already exists",              "ok": false          }    # (4). 安装依赖  apt-get install python-setuptools    # (5). 启动服务  cd glusterfs-rest  python setup.py install  glusterrest install # (Reinstall also available, sudo glusterrest reinstall)    # (6). 拷贝gunicorn  cp /usr/local/bin/gunicorn /usr/bin/  chmod 777 /usr/bin/gunicorn    # (7). 启动服务  glusterrest port 80  sudo glusterrest useradd root -g glusterroot -p root  glusterrestd</pre>    <p>服务启动后，我们可以通过 http://<node_ip>/ api/1.0/doc 访问 API 的具体使用方法，主要封装的 API 见表 3。</p>    <p>表3. Gluster-rest 封装 API</p>    <table>     <thead>      <tr>       <th>功能描述</th>       <th>HTTP请求方法</th>       <th>URL</th>      </tr>     </thead>     <tbody>      <tr>       <td>查看卷列表</td>       <td>GET</td>       <td>/api/1.0/volumes</td>      </tr>      <tr>       <td>查看单独卷信息</td>       <td>GET</td>       <td>/api/1.0/volume/:name</td>      </tr>      <tr>       <td>创建卷</td>       <td>POST</td>       <td>/api/1.0/volume/:name</td>      </tr>      <tr>       <td>删除卷</td>       <td>DELETE</td>       <td>/api/1.0/volume/:name</td>      </tr>      <tr>       <td>启动卷</td>       <td>PUT</td>       <td>/api/1.0/volume/:name/start</td>      </tr>      <tr>       <td>停止卷</td>       <td>PUT</td>       <td>/api/1.0/volume/:name/stop</td>      </tr>      <tr>       <td>重启卷</td>       <td>PUT</td>       <td>/api/1.0/volume/:name/restart</td>      </tr>      <tr>       <td>获取集群节点信息</td>       <td>GET</td>       <td>/api/1.0/peers</td>      </tr>      <tr>       <td>添加节点</td>       <td>POST</td>       <td>/api/1.0/peer/:hostname</td>      </tr>      <tr>       <td>删除节点</td>       <td>DELETE</td>       <td>/api/1.0/peer/:hostname</td>      </tr>     </tbody>    </table>    <h2>基于 GlusterFS 实现数据持久化案例</h2>    <p>接下来，用 MYSQL 数据库容器来展示 GlusterFS 如何实现数据持久化。</p>    <h3>非持久化MYSQL数据库容器</h3>    <p>清单5. 创建非持久化MYSQL 数据库容器</p>    <pre>  # (1). 创建mysql_1  docker run --name mysql_1 -e MYSQL_ROOT_PASSWORD=password -d -p 3306:3306 mysql    # (2). 登录mysql_1  docker exec -it mysql_1 /bin/bash  root@4320a6f596fe:/# mysql -uroot    # (3). 创建database  mysql> create database mydb;  Query OK, 1 row affected (0.00 sec)    # (4). 列出database  mysql>show databases;  +--------------------+  | Database           |  +--------------------+  | information_schema |  | mydb               |  | mysql              |  | performance_schema |  | test               |  +--------------------+  5 rows in set (0.00 sec)    # (5). 退出mysql及容器  mysql> exit  root@4320a6f596fe:/# exit    # (6). 删除容器  docker stop mysql_1 && docker rm mysql_1    # (7). 创建msqyl_2  docker run --name mysql_2 -e MYSQL_ROOT_PASSWORD=password -d -p 3306:3306 mysql    # (8). 登录mysql_2  docker exec -it mysql_2 /bin/bash  root@fe32ea420460:/# mysql -uroot    # (9). 列出database  mysql>show databases;  +--------------------+  | Database           |  +--------------------+  | information_schema |  | mysql              |  | performance_schema |  | test               |  +--------------------+  4 rows in set (0.00 sec)</pre>    <p>这里我们可以看到新创建的容器并没有包含我们先前创建的 mydb 数据库，这是因为非执久化的容器所有数据都在内存中，数据会随着容器的删除一起删除。</p>    <h3>持久化 MYSQL 数据库容器</h3>    <p>下面我们再用 GlusterFS 卷来实现数据持久化的效果。</p>    <p>清单6. 创建持久化 MYSQL 数据库容器</p>    <pre>  # (1). 创建Volume  curl -X POST http://root:root@192.168.1.101/api/1.0/volume/gluster_volume -d \  "bricks=bricksserver1:/exports/bricks/gluster_volume,bricksserver2:/exports/bricks/ gluster_volume&start=1&replica=2&limit=1&quota=2"    # (2). 创建mysql_3  docker run --name mysql_3 --volume-driver glusterfs \  --volume gluster_volume:/var/lib/mysql \  -e MYSQL_ROOT_PASSWORD=password -d -p 3306:3306 mysql    # (3). 登录mysql_3  docker exec -it mysql_1 /bin/bash  root@b3f71265a066:/# mysql -u root    # (4). 创建database  mysql> create database mydb;  Query OK, 1 row affected (0.00 sec)    # (5). 列出database  mysql>show databases;  +--------------------+  | Database           |  +--------------------+  | information_schema |  | mydb               |  | mysql              |  | performance_schema |  | test               |  +--------------------+  5 rows in set (0.00 sec)    # (6). 退出mysql及容器  mysql>exit  root@b3f71265a066:/# exit    # (7). 删除容器  docker stop mysql_3 && docker rm mysql_3    # (8). 创建msqyl_4  docker run --name mysql_4 --volume-driver glusterfs \  --volume gluster_volume:/var/lib/mysql \  -e MYSQL_ROOT_PASSWORD=password -d -p 3306:3306 mysql    # (9). 登录mysql_4  docker exec -it mysql_4 /bin/bash  root@1aafc1734abb:/# mysql -u root    # (10). 列出database  Mysql > show databases;  +--------------------+  | Database           |  +--------------------+  | information_schema |  | mydb               |  | mysql              |  | performance_schema |  | test               |  +--------------------+  5 rows in set (0.02 sec)</pre>    <p>这里我们可以看到新创建的容器包含了之前创建的数据库 mydb，也就实现了我们说的数据持久化效果。</p>    <h2>小结</h2>    <p>GlusterFS 作为一种开源分布式存储组件，具有非常强大的扩展能力，同时也提供了非常丰富的卷类型，能够轻松实现PB级的数据存储。本文基于 docker glusterfs volume 插件和 gluster-rest API 封装，实现了容器的集群分布式存储功能。Docker 本身提供了本地存储的方案，但无法跨越主机，因此容器一旦被销毁后，如果不是落在先前的宿主机上运行也就意味着数据丢失。本文实现的 GlusterFS 存储方案，卷信息不随 Docker 宿主机的变更而发生变化，因此能够方便实现 Docker 集群的横向扩展。本文为 Docker 集群提供持久化的功能，例如关系型数据、文件服务等，提供了非常有价值的参考。</p>    <p> </p>    <p>来自：http://www.ibm.com/developerworks/cn/opensource/os-cn-glusterfs-docker-volume/index.html?ca=drs-</p>    <p> </p>