docker数据卷的管理

MySQL据库 同时被 2 个专栏收录
3 篇文章 2 订阅
17 篇文章 2 订阅

说明

  • 关于容器数据卷,这做一下简单说明
    容器层是数据是临时的,当我们删除了容器的话,对应的容器层数据是会被一起删除掉。
    所以这样的默认机制是不安全的,比如某个容器运行了一段时间,里面已经挺多数据了,但不小心将容器删除了,那么里面的数据也会被跟着删除。 所以我们需要将容器的数据同步到主机上,这样的容器数据才是安全的。【下面 会说步骤的】

  • 数据同步到主机上就是在创建的时候加一个参数: -v file
    然后容器存储在file里面的文件就会被保留在主机上了==【注,仅仅是-v 后面的file文件中的数据会被同步到主机上,其他数据随着容器被删除而消失】==,保留到主机上的目录有2种方式,一种是默认生成的目录,一种是自定义目录,见下面。

主机默认生成存储目录

说明

  • 当我们创建容器的时候 -v 指定一个容器中的目录后,同时在本地会响应的生成一个随机ID的文件用来临时存储这个文件。
  • 注,容器存储id不是固定的,即使使用同样的参数创建容器,每次创建容器都会生成不同的存储ID。
  • 创建参数说明:-v file【这个file是容器中的存储文件夹,是文件夹!】

查看容器默认生成的存储ID

  • 命令:docker inspect NAMES |egrep -B 1 volume【docker ps查看names】
    如:下面中Name后面跟的就是默认生成的存储id了
[root@ccx volumes]# docker inspect d1 | egrep -B 1 volume
            {
                "Type": "volume",
                "Name": "da83526212497c34ed7eddcb803d192f80dab0812bf20957b961a605faf6dd3d",
                "Source": "/var/lib/docker/volumes/da83526212497c34ed7eddcb803d192f80dab0812bf20957b961a605faf6dd3d/_data",
[root@ccx volumes]# 

主机上查看默认路径

  • 需要先知道上面查询到的某容器生成的存储id
  • 主机默认存储路径:/var/lib/docker/volumes/ID/_data/ 【ID就是上面查询到的ID】
  • 其实这个/var/lib/docker/volumes/路径中的id内容是可以通过命令查看的
    命令是:docker volume list这里面显示的内容和上面路径中的内容一样
[root@ccx ~]# cd /var/lib/docker/volumes/
[root@ccx volumes]# ls
1a357f1b653a6425db41e623941831617ef8cc8d6346141bf54456da6c9e7e0a
3e3709b327a2221a40db1da5632c4323e493fa4cfed9d1619a0aab4434340520
7d514798b27d6d29e626592e51d5c31c68f1b3332a4e6a4fac3dd8f6e5af8a10
854e6f5d053ebe6b759baf488a9a2656d2528954b58b4b295e292ad20853227c
bfd01afaff30e2040931a49fa46b7b118448e92f52bae935162dcff9fe973a7c
da83526212497c34ed7eddcb803d192f80dab0812bf20957b961a605faf6dd3d
metadata.db
[root@ccx volumes]# docker volume list
DRIVER              VOLUME NAME
local               1a357f1b653a6425db41e623941831617ef8cc8d6346141bf54456da6c9e7e0a
local               3e3709b327a2221a40db1da5632c4323e493fa4cfed9d1619a0aab4434340520
local               7d514798b27d6d29e626592e51d5c31c68f1b3332a4e6a4fac3dd8f6e5af8a10
local               854e6f5d053ebe6b759baf488a9a2656d2528954b58b4b295e292ad20853227c
local               bfd01afaff30e2040931a49fa46b7b118448e92f52bae935162dcff9fe973a7c
local               da83526212497c34ed7eddcb803d192f80dab0812bf20957b961a605faf6dd3d
[root@ccx volumes]# 

创建测试

  • 如:我现在新建一个容器的时候,指定一个容器中存储目录 /ccx ,在里面随便写几个文件测试
[root@ccx ~]# docker run -dit --restart=always --name=d1 -v /ccx hub.c.163.com/library/centos
cf0548fc5a3e0808c70f0c41b2e9360f8bb8a034749f622320901ce639a5fc65
[root@ccx ~]# docker attach d1
[root@cf0548fc5a3e /]# touch /ccx/111.txt
[root@cf0548fc5a3e /]# touch /ccx/222.txt
[root@cf0548fc5a3e /]# ls /ccx
111.txt  222.txt
[root@cf0548fc5a3e /]# 
  • 然后我们到主机看下默认的存储文件
    可以看到在容器中创建的文件这儿已经能看到了
[root@ccx _data]# pwd
/var/lib/docker/volumes/da83526212497c34ed7eddcb803d192f80dab0812bf20957b961a605faf6dd3d/_data
[root@ccx _data]# ls
111.txt  222.txt
[root@ccx _data]# 
  • 当我们删除了容器,这个id里面的文件依然是存在的
[root@ccx _data]# pwd
/var/lib/docker/volumes/da83526212497c34ed7eddcb803d192f80dab0812bf20957b961a605faf6dd3d/_data
[root@ccx _data]# ls
111.txt  222.txt
[root@ccx _data]# docker ps
CONTAINER ID        IMAGE                          COMMAND             CREATED             STATUS              PORTS               NAMES
cf0548fc5a3e        hub.c.163.com/library/centos   "/bin/bash"         10 minutes ago      Up 11 seconds                           d1
[root@ccx _data]# docker rm d1 -f
d1
[root@ccx _data]# pwd
/var/lib/docker/volumes/da83526212497c34ed7eddcb803d192f80dab0812bf20957b961a605faf6dd3d/_data
[root@ccx _data]# ls
111.txt  222.txt
[root@ccx _data]#

主机指定存储目录

特别说明【重要】

  • 服务器的selinux一定要修改配置文件,改为disabled模式并重启服务器。
    如果不修改的话,会出现下面两种问题。 如果不想关闭selinux,可以使用下面创建数据卷的方式,那个对selinux没有限制。
[root@ccx ~]# cat /etc/selinux/config |grep SELINUX=
# SELINUX= can take one of these three values:
SELINUX=disabled
[root@ccx ~]# 
  • 如果selinux没有设置为disabled模式,可能会出现下面2种问题:

  • 1、创建容器以后,在容器中写入文件权限错误

[root@ccx ~]# docker run -it --name=d1 --rm -v /date:/ccx:rw hub.c.163.com/library/centos
[root@fdd812c31dc8 /]# touch /ccx/1    
touch: cannot touch '/ccx/1': Permission denied
[root@fdd812c31dc8 /]# 
  • 2、如果事先在主机目录上创建一个文件夹并写入文件,那么创建容器后会出现查看目录报 权限错误
[root@ccx ~]# mkdir /date
[root@ccx ~]# touch /date/hero.txt
[root@ccx ~]# touch /date/superhero.txt
[root@ccx ~]# docker run -it --restart=always --name=c1 -v /date:/ccx hub.c.163.com/library/centos
[root@f7c89ba1174f /]# cd /ccx
[root@f7c89ba1174f ccx]# ls
ls: cannot open directory .: Permission denied
[root@f7c89ba1174f ccx]# ls
ls: cannot open directory .: Permission denied
[root@f7c89ba1174f ccx]# exit
exit

说明

  • 就是创建容器的时候指定一个主机目录用来存储容器中的文件目录
  • 创建参数说明:-v 主机文件:容器文件:rw【权限默认是rw,可以不写,但如果想指定为ro,就需要加上去了】【这个文件是容文件夹,是文件夹!】
  • 这种指定就相当于mount挂载【下面展示的信息是我已经创建好容器的内容】
    可以查看的,d1是容器的NAMES
[root@ccx ~]# docker inspect d1 | egrep -A 4 Mounts
        "Mounts": [
            {
                "Type": "bind",
                "Source": "/date",
                "Destination": "/ccx",
[root@ccx ~]# 

创建测试

  • 如:我现在新建一个容器的时候,指定一个容器中存储目录 /ccx 并让其存储在本地的/date目录中】,在里面随便写几个文件测试
    • 我先在主机上创建一个/date并随便写入几个文件【这个文件可以不用手动创建,创建容器的时候会自动创建
    • 然后我去容器中查看目录,能看到我在主机上创建的文件
    • 然后我再容器中创建几个文件,可以在主机上的这个目录看到这些文件
[root@ccx ~]# mkdir /date
[root@ccx ~]# touch /date/hero.txt /date/superhero.txt
[root@ccx ~]# docker run -it --restart=always --name=d1 -v /date:/ccx:rw hub.c.163.com/library/centos
[root@305175003c1d /]# cd /ccx
[root@305175003c1d ccx]# ls
hero.txt  superhero.txt
[root@305175003c1d ccx]# touch test.txt
[root@305175003c1d ccx]# exit
exit
[root@ccx ~]# cd /date
[root@ccx date]# ls
hero.txt  superhero.txt  test.txt
[root@ccx date]# 

创建数据卷并挂载到容器

这种和指定存储目录比起来,可能会更专业点吧。

创建一个数据卷

  • 命令:docker volume create 自定义卷名称
  • 查看卷:docker volume list
  • 如下:我创建了一个v1的数据卷
[root@ccx ~]# docker volume create v1
v1
[root@ccx ~]# 
[root@ccx ~]# docker volume list |  tail -n 2
local               da83526212497c34ed7eddcb803d192f80dab0812bf20957b961a605faf6dd3d
local               v1
[root@ccx ~]# 

查看数据卷的默认路径

  • 这个默认路径与默认卷处于同一目录,只是这个v1不会改变,原理其实和我们指定存储目录一样,只是路径变了而已。
  • 如下v1卷的默认路径为:Mountpoint项
[root@ccx ~]# docker volume inspect v1
[
    {
        "Driver": "local",
        "Labels": {},
        "Mountpoint": "/var/lib/docker/volumes/v1/_data",
        "Name": "v1",
        "Options": {},
        "Scope": "local"
    }
]
[root@ccx ~]#

创建容器时指定数据卷

  • 这个和主机指定存储目录挂载的方式是一样的,只是主机路径变成之前创建的卷名了而已。
  • 如:我讲主机的v1卷挂在到容器中的/ccx目录,并在里面创建一个文件,然后回到主机上查看这个卷的内容,发现同步的。
[root@ccx ~]# docker run -it --restart=always --name=d1 -v v1:/ccx hub.c.163.com/library/centos
[root@2c7ff6e87a94 /]# touch /ccx/hero.txt
[root@2c7ff6e87a94 /]# exit
exit
[root@ccx ~]# ls /var/lib/docker/volumes/v1/_data/
hero.txt
[root@ccx ~]# 

指定主机目录的特别使用场景

  • 上面中:主机指定存储目录和创建数据卷并挂载到容器方法均一样

  • 容器之间数据同步 【也就这一个使用方式比较特殊罢了】
    比如将多个容器的数据目录均使用同一个数据卷,那么容器间看到的数据都是一样的。

- 将数据写入到主机目录后,容器中的这个目录内容会同步变化,这个需要了解一下。

  • 数据持久化

mysql数据备份特别说明

流程

  • 因为mysql的默认存放路径为:/var/lib/mysql
    所以我们只需要在创建的时候将数据卷同步到上面路径上,即可实现mysql的数据自动同步了

  • 如,我创建mysql容器的时候将本地的/date【建议手动mkdir创建好该文件】同步到容器中的/var/lib/mysql目录,这样创建的时候数据就会自动同步到本地的/date目录中了
    注:本地的目录中必须是空的,如果有内容先执行:rm -rf /date1/*

[root@ccx date]# rm -rf /date/*
[root@ccx date]# docker run -dit --restart=always --name=db -e MYSQL_ROOT_PASSWORD=passwd -v /date:/var/lib/mysql/:rw hub.c.163.com/library/mysql
8d27c14f23c60e7cee5a34ac135f3c1e09fbfca31e378d632b9fb383953f705a
[root@ccx date]# ls
auto.cnf        ibdata1      ib_logfile1  mysql               sys
ib_buffer_pool  ib_logfile0  ibtmp1       performance_schema
[root@ccx date]# 
  • 后续登陆这个容器的方法和测试见下面
    先在客户端上装 mysql,查看容器的ip,然后就可以登陆了
    如果密码是p开头,那么是不能直接-p后面跟密码的,如我密码是passwd,如果我用-ppasswd登陆就会报错,必须-p然后手动输入密码才行。
    我下面就是登陆进容器以后,创建了一个aa表再里面写如数据后退出并查看本地文件,确实aa表有出现了。
[root@ccx date]# docker inspect db | grep ipaddress -i
            "SecondaryIPAddresses": null,
            "IPAddress": "172.17.0.3",
                    "IPAddress": "172.17.0.3",
[root@ccx date]# cd
[root@ccx ~]# mysql -uroot -ppasswd -h 127.17.0.3
ERROR 2003 (HY000): Can't connect to MySQL server on '127.17.0.3' (111)
[root@ccx ~]# mysql -uroot -h 172.17.0.3
ERROR 1045 (28000): Access denied for user 'root'@'172.17.0.1' (using password: NO)
[root@ccx ~]# mysql -uroot -h 172.17.0.3 -p
Enter password: 
Welcome to the MariaDB monitor.  Commands end with ; or \g.
Your MySQL connection id is 4
Server version: 5.7.18 MySQL Community Server (GPL)

Copyright (c) 2000, 2018, Oracle, MariaDB Corporation Ab and others.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

MySQL [(none)]> show datebash;
ERROR 1064 (42000): You have an error in your SQL syntax; check the manual that corresponds to your MySQL server version for the right syntax to use near 'datebash' at line 1
MySQL [(none)]> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| mysql              |
| performance_schema |
| sys                |
+--------------------+
4 rows in set (0.00 sec)

MySQL [(none)]> create database aa;
Query OK, 1 row affected (0.00 sec)

MySQL [(none)]> use aa;
Database changed
MySQL [aa]> create table aa(id int,name varchar(10));
Query OK, 0 rows affected (0.01 sec)

MySQL [aa]> insert into aa values (1,'ccx');
Query OK, 1 row affected (0.01 sec)

MySQL [aa]> show tables;
+--------------+
| Tables_in_aa |
+--------------+
| aa           |
+--------------+
1 row in set (0.00 sec)

MySQL [aa]> select * from aa;
+------+------+
| id   | name |
+------+------+
|    1 | ccx  |
+------+------+
1 row in set (0.00 sec)

MySQL [aa]> exit
Bye
[root@ccx ~]# cd /date
[root@ccx date]# ls
aa          ca.pem           ib_buffer_pool  ib_logfile1  performance_schema  server-cert.pem
auto.cnf    client-cert.pem  ibdata1         ibtmp1       private_key.pem     server-key.pem
ca-key.pem  client-key.pem   ib_logfile0     mysql        public_key.pem      sys
[root@ccx date]#
  • 如果要进入mysql容器中查看路径,需要新增一个bash进程,流程如下
    我顺便在这进入到容器中的/var/lib/mysql目录中,对比主机的/date目录,可以看到文件内容确实一模一样的。
[root@ccx aa]# docker exec -it db bash
root@8d27c14f23c6:/# cd /var/lib/mysql
root@8d27c14f23c6:/var/lib/mysql# ls
aa          ca.pem           ib_buffer_pool  ibdata1  performance_schema  server-cert.pem
auto.cnf    client-cert.pem  ib_logfile0     ibtmp1   private_key.pem     server-key.pem
ca-key.pem  client-key.pem   ib_logfile1     mysql    public_key.pem      sys
root@8d27c14f23c6:/var/lib/mysql# exit
exit
[root@ccx aa]# cd /date
[root@ccx date]# ls
aa          ca.pem           ib_buffer_pool  ib_logfile1  performance_schema  server-cert.pem
auto.cnf    client-cert.pem  ibdata1         ibtmp1       private_key.pem     server-key.pem
ca-key.pem  client-key.pem   ib_logfile0     mysql        public_key.pem      sys
[root@ccx date]# 

备份意义及使用

  • 通过上面的备份完毕以后,这么做的好处就是,如果不小心误删了该容器,可以新建一个一摸一样的容器出来,这样里面的数据都还在
    • 注:必须参数要一模一样,特别是密码,如果变动了以后,就登不上了,报错内容是:ERROR 1045 (28000): Access denied for user 'root'@'172.17.0.1' (using password: YES)
    • 这个数据库是不能共享到其他容器上面的,登陆报错和上面一样
  • 如,我删掉db这个容器,新建一个一摸一样的,可以看到之前新建的aa库还在。
[root@ccx ~]# docker rm -f db
db
[root@ccx ~]# docker run -dit --restart=always --name=db -e MYSQL_ROOT_PASSWORD=passwd -v /date:/var/lib/mysql/ hub.c.163.com/library/mysql
83817192b3ad981916fbd4a5233f6938ed39fadbe397e808ce6fe9cae2d3ef37
[root@ccx ~]# mysql -uroot -p -h 172.17.0.3 
Enter password: 
Welcome to the MariaDB monitor.  Commands end with ; or \g.
Your MySQL connection id is 3
Server version: 5.7.18 MySQL Community Server (GPL)

Copyright (c) 2000, 2018, Oracle, MariaDB Corporation Ab and others.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

MySQL [(none)]> show datebases;
ERROR 1064 (42000): You have an error in your SQL syntax; check the manual that corresponds to your MySQL server version for the right syntax to use near 'datebases' at line 1
MySQL [(none)]> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| aa                 |
| mysql              |
| performance_schema |
| sys                |
+--------------------+
5 rows in set (0.00 sec)

MySQL [(none)]> 
  • 2
    点赞
  • 1
    评论
  • 2
    收藏
  • 一键三连
    一键三连
  • 扫一扫,分享海报

相关推荐
<p> <span style="font-size:14px;color:#337FE5;">【为什么学爬虫?】</span> </p> <p> <span style="font-size:14px;">       1、爬虫入手容易,但是深入较难,如何写出高效率爬虫,如何写出灵活性高可扩展爬虫都是一项技术活。另外在爬虫过程中,经常容易遇到被反爬虫,比如字体反爬、IP识别、验证码等,如何层层攻克难点拿到想要数据,这门课程,你都能学到!</span> </p> <p> <span style="font-size:14px;">       2、如果是作为一个其他行业开发者,比如app开发,web开发,学习爬虫能让你加强对技术认知,能够开发出更加安全软件和网站</span> </p> <p> <br /> </p> <span style="font-size:14px;color:#337FE5;">【课程设计】</span> <p class="ql-long-10663260"> <span> </span> </p> <p class="ql-long-26664262" style="font-size:11pt;color:#494949;"> 一个完整爬虫程序,无论大小,总体来说可以分成三个步骤,分别是: </p> <ol> <li class="" style="font-size:11pt;color:#494949;"> 网络请求:模拟浏览器行为从网上抓取数据。 </li> <li class="" style="font-size:11pt;color:#494949;"> 数据解析:将请求下来数据进行过滤,提取我们想要数据。 </li> <li class="" style="font-size:11pt;color:#494949;"> 数据存储:将提取到数据存储到硬盘或者内存中。比如用mysql数据库或者redis等。 </li> </ol> <p class="ql-long-26664262" style="font-size:11pt;color:#494949;"> 那么本课程也是按照这几个步骤循序渐进进行讲解,带领学生完整掌握每个步骤技术。另外,因为爬虫多样性,在爬取过程中可能会发生被反爬、效率低下等。因此我们又增加了两个章节用来提高爬虫程序灵活性,分别是: </p> <ol> <li class="" style="font-size:11pt;color:#494949;"> 爬虫进阶:包括IP代理,多线程爬虫,图形验证码识别、JS加密解密、动态网页爬虫、字体反爬识别等。 </li> <li class="" style="font-size:11pt;color:#494949;"> Scrapy和分布式爬虫:Scrapy框架、Scrapy-redis组件、分布式爬虫等。 </li> </ol> <p class="ql-long-26664262" style="font-size:11pt;color:#494949;"> 通过爬虫进阶知识点我们能应付大量反爬网站,而Scrapy框架作为一个专业爬虫框架,使用他可以快速提高我们编写爬虫程序效率和速度。另外如果一台机器不能满足你需求,我们可以用分布式爬虫让多台机器帮助你快速爬取数据。 </p> <p style="font-size:11pt;color:#494949;">   </p> <p class="ql-long-26664262" style="font-size:11pt;color:#494949;"> 从基础爬虫到商业化应用爬虫,本套课程满足您所有需求! </p> <p class="ql-long-26664262" style="font-size:11pt;color:#494949;"> <br /> </p> <p> <br /> </p> <p> <span style="font-size:14px;background-color:#FFFFFF;color:#337FE5;">【课程服务】</span> </p> <p> <span style="font-size:14px;">专属付费社群+定期答疑</span> </p> <p> <br /> </p> <p class="ql-long-24357476"> <span style="font-size:16px;"><br /> </span> </p> <p> <br /> </p> <p class="ql-long-24357476"> <span style="font-size:16px;"></span> </p>
©️2020 CSDN 皮肤主题: 博客之星2020 设计师:CY__ 返回首页
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、C币套餐、付费专栏及课程。

余额充值