当前位置:网站首页 > Java教程 > 正文

java容器教程视频



docker官网:https://www.docker.com/
docker官方文档:https://docs.docker.com/ Docker的文档是超级详细的!
帮助文档:https://docs.docker.com/reference/
DockerHub:https://hub.docker.com/

使用docker:https://labs.play-with-docker.com/

《三体》弱小和无知不是生存的障碍,傲慢才是。

授人以渔!学习我的思想 !-- 狂神

即使再小的帆也能远航 。-- 狂神

只要学不死,就往死里学!-- 狂神

Docker笔记:https://www.warlock.live/archives.html

狂神说B站视频:https://www.bilibili.com/video/BV1og4y1q7M4?p=1

Docker容器学习笔记二(狂神说Java):https://blog.csdn.net/_/article/details/ 141

学习docker:https://www.runoob.com/docker/docker-tutorial.html 使用docker:https://labs.play-with-docker.com/

多看官网学习

单独的容器没什么意义,有意义的是容器编排!

Dockerfile build run 手动操作,单个容器!

微服务: 管理维护100个微服务!依赖关系

Docker Compose 来轻松高效的管理容器。定义、运行多个容器。

官方介绍

定义、运行多个容器。

YAML文件

命令有哪些?

作用:批量容器编排

我自己的理解

Compose是Docker官方的开源项目。需要单独安装!

Dockerfile让程序可以在任何地方运行。Web 服务, redis, mysql,nginx....多个容器,挨个手动去启动管理太麻烦了!!

Compose的重要的概念:

  • 服务services: 容器,应用(例如,单个的web,redis,mysql....)
  • 项目project:一组关联的容器。(例如, 博客: web, mysql)

Linux 需要单独安装,windows安装docker desktop之后自带

1 下载

 

2 授权

 

3 测试安装成功

 

https://docs.docker.com/compose/gettingstarted/

python应用,计数器

1 应用

2 Dockerfile 应用打包为镜像

3 Docker-compose yaml文件(定义整个服务,需要的环境。 web, redis)完整的上线服务!

4 启动项目compose(docker-compose up)

Compose is a tool for defining and running multi-container Docker applications. With Compose, you use a YAML file to configure your application’s services. Then, with a single command, you create and start all the services from your configuration. To learn more about all the features of Compose, see the list of features.

Compose works in all environments: production, staging, development, testing, as well as CI workflows. You can learn more about each case in Common Use Cases.

Using Compose is basically a three-step process:

  1. Define your app’s environment with a so it can be reproduced anywhere.

    Dockerfile保证我们的项目可以在任何地方运行。

  2. Define the services that make up your app in so they can be run together in an isolated environment.

    service--什么是服务

  3. Run and Compose starts and runs your entire app.

    启动项目

A looks like this:

 

集群的方式部署,购买4台阿里云服务器

点击”创建实例“

image-20201225192929540

在这里插入图片描述
在这里插入图片描述

批量容器编排
在这里插入图片描述

在这里插入图片描述

 

安装成功
在这里插入图片描述
因为调用了redis
在这里插入图片描述

跟着官网做https://docs.docker.com/compose/gettingstarted/

在Dockerfile文件第二行加入国内镜像

 

如果docker-compose up报错在这里插入图片描述
在这里插入图片描述

 

感谢提功解决https://blog.csdn.net/yubo_725/article/details/?utm_medium=distribute.pc_relevant.none-task-blog-BlogCommendFromMachineLearnPai2-2.channel_param&depth_1-utm_source=distribute.pc_relevant.none-task-blog-BlogCommendFromMachineLearnPai2-2.channel_param
启动结果
在这里插入图片描述
启动的容器
在这里插入图片描述
没访问一次 会加一
在这里插入图片描述

总结
在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

 

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

官方文档

docker-compose.yaml核心
三层
在这里插入图片描述

在这里插入图片描述

https://docs.docker.com/compose/wordpress/

在这里插入图片描述
操作

 

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

 

导致我就不打算继续学了 直接学k8s

一款产品: 开发–-上线 两套环境!应用环境,应用配置!

开发 ---- 运维。 问题:我在我的电脑上可以运行!版本更新,导致服务不可用!对于运维来说。考验十分大?

开发即运维!

环境配置是十分的麻烦,每一个机器都要部署环境(集群Redis、ES、Hadoop…) !费事费力。

发布一个项目( jar + (Redis MySQL JDK ES) ),项目能不能带上环境安装打包!

之前在服务器配置一个应用的环境 Redis MySQL JDK ES Hadoop 配置超麻烦了,不能够跨平台。

开发环境Windows,最后发布到Linux!

传统:开发jar,运维来做!

现在:开发打包部署上线,一套流程做完!

安卓流程: java — apk —-----------发布(应用商店)-----------------------------------------------------张三使用apk------------安装即可用!

docker流程: java-----jar(环境) ----打包项目帯上环境(镜像)-- ( Docker仓库:商店)-----下载我们发布的镜像--直接运行即可!

Docker给以上的问题,提出了解决方案!

image-20201219222427365

Docker的思想就来自于集装箱!

JRE – 多个应用(端口冲突) – 原来都是交叉的!

隔离:Docker核心思想!打包装箱!每个箱子是互相隔离的。

Docker通过隔离机制,可以将服务器利用到极致!

本质:所有的技术都是因为出现了一些问题,我们需要去解决,才去学习!

了解一项技术的历史才是真的了解了这项技术,跟别人才有的聊。

2010年,几个搞IT的年轻人,就在美国成立了一家公司

做一些pass的云计算服务!LXC(Linux Container容器)有关的容器技术!

imgLinux Container容器是一种内核虚拟化技术,可以提供轻量级的虚拟化,以便隔离进程和资源。

他们将自己的技术(容器化技术)命名就是 Docker。

Docker刚刚延生的时候,没有引起行业的注意!dotCloud,就活不下去!

开放源代码!

2013年,Docker开源!

越来越多的人发现docker的优点!火了。Docker每个月都会更新一个版本!

2014年4月9日,Docker1.0发布!

docker为什么这么火?十分的轻巧!

在容器技术出来之前,我们都是使用虚拟机技术!

虚拟机:在window中装一个VMware,通过这个软件我们可以虚拟出来一台或者多台电脑!笨重!

虚拟机也属于虚拟化技术,Docker容器技术,也是一种虚拟化技术!

 

到现在,所有开发人员都必须要会Docker!

聊聊Docker

Docker基于Go语言开发的!开源项目!

docker官网:https://www.docker.com/

文档:https://docs.docker.com/ Docker的文档是超级详细的!

仓库:https://hub.docker.com/

了解一项技术的途径:

官网

百度百科

它产生的历史

之前的虚拟机技术

image-20201220095313338

虚拟机技术的缺点:

1、资源占用十分多

2、 冗余步骤多

3、启动很慢!

容器化技术

image-20201220095838278

容器和技术不是模拟一个完整的系统

比较Docker和虚拟机技术的不同:

img传统虚拟机,虚拟出一套硬件,运行一个完整的操作系统,然后在这个系统上安装和运行软件

img容器内的应用直接运行在宿主机的内容,容器是没有自己的内核的,也没有虚拟我们的硬件,所以就轻便了

img每个容器间是互相隔离的,每个容器内都有一个属于自己的文件系统,互不影响

应用更快速的交付和部署

传统:一堆帮助文档,安装程序。

Docker:打包镜像,发布测试,一键运行。

更便捷的升级和扩缩容

使用了 Docker之后,我们部署应用就和搭积木一样!

项目打包为一个镜像,扩展 服务器A!服务器B

更简单的系统运维

在容器化之后,我们的开发、测试环境都是高度一致的。

更高效的计算资源利用

Docker是内核级别的虚拟化,可以在一个物理机上可以运行很多的容器实例!服务器的性能可以被压榨到极致。

百度:Docker的架构图

img

image-20201220100716214

- 镜像(image)

docker镜像就好比是一个模板,可以通过这个模板来创建容器服务,tomcat镜像=>run=>tomcat01容器(提供服务的),

通过这个镜像可以创建多个容器(最终服务运行或者项目运行就是在容器中的)。

- 容器(container)

Docker利用容器技术,独立运行一个或者一组应用,通过镜像来创建的。

启动,停止,删除,基本命令!

目前就可以把这个容器理解为就是一个简易的 Linux系统。

- 仓库 (repository)

仓库就是存放镜像的地方!

仓库分为公有仓库和私有仓库。(很类似git)

Docker Hub是国外的。(默认是国外的)

阿里云…都有容器服务器(配置镜像加速!)

环境准备

1、 需要一点点的Linux的基础

2、CentOS 7

3、我们使用Xshell连接远程服务器进行操作

环境查看

Linux要求内核3.10以上

image-20201220102010573

系统版本

image-20201220102051386

安装

帮助文档: https://docs.docker.com/engine/install

 
 

img阿里云镜像加速

1、登录阿里云找到容器服务

2、找到镜像加速器

img

3、配置使用

 

imgHelloWorld

image-20201222143758207

image-20201222143823567

imgDocker是怎么工作的

Docker是一个Client-Server结构的系统,Docker的守护进程运行在主机上。通过Socket从客户端访问!

Docker-Server接收到Docker-Client的指令,就会执行这个命令!

img

为什么Docker比VM快

img1、docker有着比虚拟机更少的抽象层。由于docker不需要Hypervisor实现硬件资源虚拟化,运行在

docker容器上的程序直接使用的都是实际物理机的硬件资源。因此在CPU、内存利用率上docker将会在 效率上有明显优势。

2、docker利用的是宿主机的内核,而不需要Guest OS。GuestOS: VM(虚拟机)里的的系统(OS);

HostOS:物理机里的系统(OS);

img

因此,当新建一个 容器时,docker不需要和虚拟机一样重新加载一个操作系统内核。然而避免引导、加载操作系统内核是个比较费时费资源的过程,当新建一个虚拟机时,虚拟机软件需要加载GuestOS,返个新建过程是分钟级别的。

而docker直接利用宿主机的操作系统,则省略了这个复杂的过程,因此 新建一个docker容器只需要几秒钟。

image-20201222144551225

之后学习完毕所有的命令,再回过头来看这段理论,就会很清晰!

image-20201222145411738

 
docker images 查看所有本地的主机上的镜像
 
 
docker pull 下载镜像
 
docker rmi 删除镜像
 
 
 

说明:我们有了镜像才可以创建容器,Linux,下载centos镜像来学习

新建容器并启动
 
列出所有运行的容器
 
退出容器
 
删除容器
 
启动和停止容器的操作
 
后台启动命令
 
查看日志
 
查看容器中进程信息 ps
 
查看镜像的元数据
 
进入当前正在运行的容器
 
 
 
 
从容器内拷贝到主机上

image-20201222155631260

 

学习方式:将所有笔记敲一遍,自己记录笔记!

img

 

三个作业:作业1告诉我们暴露端口的重要性;作业2告诉我们进入容器的重要性;作业3告诉我们查看当前容器状态的重要性,如何修改容器运行的环境。

作业1:Docker 安装Nginx--暴露端口

 

端口暴露示意图

image-20201222165730946

思考问题:我们每次改动nginx配置文件,都需要进入容器内部?十分的麻烦,要是可以在容器外部提供一个映射路径,达到在容器修改文件名,容器内部就可以自动修改? -v 数据卷!

作业2:docker 来装一个tomcat--进入容器查看

 

思考问题:我们以后要部署项目,如果每次都要进入容器是不是十分麻烦?要是可以在容器外部提供一 个映射路径,webapps,我们在外部放置项目,就自动同步到内部就好了!

作业3:部署es+kibana--容器的内存状态和修改

 
 

问题: 限制了内存对于es的运行有什么不良影响吗 ?

 

image-20201222172451928

作业:使用kibana连接es?思考网络如何才能连接。

  • portainer(先用这个)
  • Rancher(CI/CD再用)

什么是portainer?

Docker图形化界面管理工具!提供一个后台面板供我们操作!

 

访问:http://ip:8088/

通过portainer来访问:

image-20201222173658971

image-20201222173746676

image-20201222173841750

img镜像是什么

镜像是一种轻量级、可执行的独立软件保,用来打包软件运行环境和基于运行环境开发的软件,他包含运行某个软件所需的所有内容,包括代码、运行时、库、环境变量和配置文件

将所有的应用和环境,直接打包为docker镜像,就可以直接运行。

如何得到镜像?

  • 从远程仓库下载
  • 朋友拷贝给你
  • 自己制作一个镜像 DockerFile

imgUnionFs (联合文件系统)

我们下载的时候看到一层层的下载就是这个。

UnionFs(联合文件系统):Union文件系统(UnionFs)是一种分层、轻量级并且高性能的文件系统,他支持对文件系统的修改作为一次提交来一层层的叠加,同时可以将不同目录挂载到同一个虚拟文件系统下( unite several directories into a single virtual filesystem)。Union文件系统是 Docker镜像的基础。镜像可以通过分层来进行继承,基于基础镜像(没有父镜像),可以制作各种具体的应用镜像。

特性:一次同时加载多个文件系统,但从外面看起来,只能看到一个文件系统,联合加载会把各层文件系统叠加起来,这样最终的文件系统会包含所有底层的文件和目录。

image-20201222174501141

image-20201222174553009

imgDocker镜像加载原理

黑屏--(加载)--开机进入系统

rootfs(root file system),在 bootfs之上。包含的就是典型 Linux系统中的/dev,/proc,/bin,/etc等标准目录和文件。 rootfs就是各种不同的操作系统发行版,比如 Ubuntu, Centos等等。

image-20201222174956992

image-20201222174924450

image-20201222174759824

image-20201222175124769

img平时我们安装进虚拟机的CentOS都是好几个G,为什么Docker这里才200M?

对于个精简的OS,rootfs可以很小,只需要包合最基本的命令,工具和程序库就可以了,因为底层直接用Host的kernel,自己只需要提供rootfs就可以了。由此可见对于不同的Linux发行版, boots基本是一致的, rootfs会有差別,因此不同的发行版可以公用bootfs.

虚拟机是分钟级别,容器是秒级!

 

我们可以去下载一个镜像,注意观察下载的日志输出,可以看到是一层层的在下载 。

img

img思考:为什么Docker镜像要采用这种分层的结构呢?

最大的好处,我觉得莫过于资源共享了!比如有多个镜像都从相同的Base镜像构建而来,那么宿主机只需在磁盘上保留一份base镜像,同时内存中也只需要加载一份base镜像,这样就可以为所有的容器服务了,而且镜像的每一层都可以被共享。

查看镜像分层的方式可以通过docker image inspect 命令

image-20201222175841775

 
理解:

所有的 Docker镜像都起始于一个基础镜像层,当进行修改或培加新的内容时,就会在当前镜像层之上,创建新的镜像层。

举一个简单的例子,假如基于 Ubuntu Linux16.04创建一个新的镜像,这就是新镜像的第一层;如果在该镜像中添加 Python包,

就会在基础镜像层之上创建第二个镜像层;如果继续添加一个安全补丁,就会创健第三个镜像层该像当 前已经包含3个镜像层,如下图所示(这只是一个用于演示的很简单的例子)。

img

在添加额外的镜像层的同时,镜像始终保持是当前所有镜像的组合,理解这一点非常重要。下图中举了 一个简单的例子,每个镜像层包含3个文件,而镜像包含了来自两个镜像层的6个文件。

img

上图中的镜像层跟之前图中的略有区別,主要目的是便于展示文件

下图中展示了一个稍微复杂的三层镜像,在外部看来整个镜像只有6个文件,这是因为最上层中的文件7 是文件5的一个更新版

image-20201222180226063

image-20201222180316543

img

这种情況下,上层镜像层中的文件覆盖了底层镜像层中的文件。这样就使得文件的更新版本作为一个新 镜像层添加到镜像当中。

Docker通过存储引擎(新版本采用快照机制)的方式来实现镜像层堆栈,并保证多镜像层对外展示为统一的文件系统。

Linux上可用的存储引撃有AUFS、 Overlay2、 Device Mapper、Btrfs以及ZFS。顾名思义,每种存储引擎都基于 Linux中对应的。

件系统或者块设备技术,井且每种存储引擎都有其独有的性能特点。

Docker在 Windows上仅支持 windowsfilter 一种存储引擎,该引擎基于NTFS文件系统之上实现了分层和CoW [1]。

下图展示了与系统显示相同的三层镜像。所有镜像层堆并合井,对外提供统一的视图。

img

特点

Docker 镜像都是只读的,当容器启动时,一个新的可写层加载到镜像的顶部!

这一层就是我们通常说的容器层,容器之下的都叫镜像层!

image-20201222180952309

image-20201222181143631

 

实战测试

 

image-20201222181832868

如果你想要保存当前容器的状态,就可以通过commit来提交,获得一个镜像,就好比我们我使用虚拟机的时候,快照!

学习方式说明: 先理解概念,但是一定要实践,最后实践和理论相结合,一次搞定这个知识。

学到这里,才算是入门docker!!

入门成功!!!!

Docker的精髓: 容器数据卷,DockerFile,Docker网络

企业实践: Docker compose, Docker swarm

docker的理念回顾

将应用和环境打包成一个镜像!

数据?如果数据都在容器中,那么我们容器删除,数据就会丢失!需求:数据可以持久化

MySQL,容器删除了,删库跑路!需求:MySQL数据可以存储在本地!

容器之间可以有一个数据共享的技术!Docker容器中产生的数据,同步到本地! 这就是卷技术!目录的挂载,将我们容器内的目录,挂载到Linux上面!

image-20201222183009288

总结一句话:容器的持久化和同步操作!容器间也是可以数据共享的!

img方式一 :直接使用命令挂载 -v

 

image-20201222193250346

测试文件的同步

image-20201222193424559

再来测试!

1、停止容器

2、宿主机修改文件

3、启动容器

4、容器内的数据依旧是同步的

好处:我们以后修改只需要在本地修改即可,容器内会自动同步!

image-20201222194126859

img思考:MySQL的数据持久化的问题
 

假设我们将容器删除 :

发现,我们挂载到本地的数据卷依旧没有丢失,这就实现了容器数据持久化功能!

 

image-20201222200517626

image-20201222200816835

image-20201222201044066

image-20201222201142570

所有的docker容器内的卷,没有指定目录的情况下都是在下

如果指定了目录,docker volume ls 是查看不到的。

我们通过具名挂载可以方便的找到我们的一个卷,大多数情况都使用具名挂载。

如何确定是具名挂载还是匿名挂载,指定路径挂载?

 

拓展:

 

Dockerfile 就是用来构建docker镜像的构建文件!命令脚本!先体验一下! 通过这个脚本可以生成镜像,镜像是一层一层的,脚本是一个一个命令,一个命令就是一层。

image-20201222203723501

注意:

镜像名的部分不能有/ (把改成)

不要漏写当前目录的

image-20201222203253383

image-20201222203423553

启动自己写的镜像

image-20201222203841294

这个卷和外部一定有一个同步的目录。

image-20201222203947628

查看一下卷挂载。, 查看Mounts

image-20201222204054927

image-20201222204538731

测试一下刚才的文件是否同步出去了!

这种方式使用的十分多,因为我们通常会构建自己的镜像!

假设构建镜像时候没有挂载卷,要手动镜像挂载 -v 卷名:容器内路径!

多个MySQL同步数据! 命名的容器挂载数据卷!

image-20201222204906683

数据卷容器是一个容器,但是他是提供数据的,给别的容器提供数据共享。也叫他父容器。

 

image-20201222205151179

image-20201222205230751

image-20201222205725610

image-20201222205815979

img

测试:可以删除docker01,查看一下docker02和docker03是否可以访问这个文件

测试结果: 测试依旧可以访问

双向拷贝

image-20201222210230394

img多个mysql实现数据共享

image-20201222210423995

image-20201222210521399

img结论

容器之间配置信息的传递,数据卷容器的生命周期一直持续到没有容器使用它为止。

但是一旦你持久化到了本地(也就是第一个父容器通过 -v 挂到了本地的文件系统),这个时候,本地的数据是不会删除的!

  1. -v : 具名挂载 匿名挂载
  2. dockerfile: 在生成镜像的时候直接挂载
  3. 容器数据卷直接的挂载--实现数据共享和同步

dockerfile 是用来构建docker镜像的文件!命令参数脚本!

构建步骤:

1、 编写一个dockerfile文件

2、 docker build 构建称为一个镜像

3、 docker run运行镜像

4、 docker push发布镜像(DockerHub 、阿里云仓库)

但是很多官方镜像都是基础包,很多功能没有,我们通常会自己搭建自己的镜像!

查看一下官方是怎么做的,官方既然可以制作镜像,那我们也可以!

自己学习的方法:百度Dockerfile命令(图片)

基础知识:

1、每个保留关键字(指令)都是必须是大写字母

2、执行从上到下顺序

3、#表示注释

4、每一个指令都会创建提交一个新的镜像层,并提交!

image-20201222211740456

Dockerfile是面向开发的,我们以后要发布项目,做镜像,就需要编写dockerfile文件,这个文件十分简单!

Docker镜像逐渐成企业交付的标准,必须要掌握!

DockerFile:构建文件,定义了一切的步骤,源代码

DockerImages:通过DockerFile构建生成的镜像,最终发布和运行产品。 ---传统是用jar包,war包

Docker容器:容器就是镜像运行起来提供服务。

image-20201222211938829

步骤:开发,部署,运维缺一不可!

DockerFile的指令

image-20201222212202171

 

Docker Hub中99%镜像都是从这个基础镜像过来的, FROM scratch,

img创建一个自己的centos

 

3、测试运行

直接就进入了工作目录

在这里插入图片描述

对比:之前原生的

image-20201223095136921

我们增加之后的镜像

image-20201223095045769

查看镜像的生成过程 docker history

我们平时拿到一个镜像,可以研究一下它是怎么做出来的了!

image-20201223095313143

imgCMD 和 ENTRYPOINT区别

测试CMD
 

image-20201223100101750

测试ENTRYPOINT
 

自己学习: Dockerfile中很多命令都十分的相似,我们需要了解它们的细微区别,我们最好的学习就是对比他们然后测试效果!

1、准备镜像文件--tomcat的压缩包 和 jdk的压缩包

准备tomcat 和 jdk到当前目录,编写好README 。

image-20201223100712405

image-20201223100732436

2、编写dockerfile, 官方命名是 ,build的时候会自动寻找这个文件,就不需要-f去指定了!

 

3、构建镜像

 

4、启动镜像

 

5、访问测试

6、发布项目(由于做了卷挂载,我们直接在本地编写项目就可以发布了!)

image-20201223102738495

发现:项目部署成功,可以直接访问!

我们以后开发的步骤:需要掌握Dockerfile的编写!我们之后的一切都是使用docker镜像来发布运行!

1、地址 https://hub.docker.com/ 注册自己的账号

2、确定这个账号可以登录

3、我们的服务器上提交自己镜像

先命令行登录docker hub

image-20201223103143267

image-20201223103157069

imgimg

4、登录完毕后,就提交 push镜像

发布到docker hub上

自己发布的镜像,尽量带上版本号

image-20201223103411035

image-20201223103427894

image-20201223103642769

image-20201223103505377

image-20201223103535426

提交的时候也是按照层级来进行提交的!

发布到阿里云镜像服务上

参考阿里云容器镜像的官方文档

image-20201223104312625

image-20201223104230288

image-20201223104245070

自己的操作:

image-20201223105616212

 
 

用于登录的用户名为阿里云账号全名,密码为开通服务时设置的密码。

您可以在访问凭证页面修改凭证密码。

 
 
 
 

请根据实际镜像信息替换示例中的[ImageId]和[镜像版本号]参数。

从ECS推送镜像时,可以选择使用镜像仓库内网地址。推送速度将得到提升并且将不会损耗您的公网流量。

如果您使用的机器位于VPC网络,请使用 registry-vpc.cn-beijing.aliyuncs.com 作为Registry的域名登录。

使用"docker tag"命令重命名镜像,并将它通过专有网络地址推送至Registry。

 
 

使用 "docker push" 命令将该镜像推送至远程。

 

image-20201223104723234

img

img

清空所有镜像和容器,方便理解

测试: ip addr 命令查看所有网络

三个网络

image-20201224110729068

image-20201224110857497

问题: docker 是如果处理容器网络访问的?

image-20201224111003617

 

image-20201224113134199

原理:

192.168.0.1 路由器IP

192.168.0.2 手机的IP

同一个网段, 可以互相ping通

1、我们每启动一个docker容器,docker就会给docker容器分配一个ip。

我们只要安装了docker, 就会有一个网卡docker0, 桥接模式,使用的技术是veth-pair技术

Linux 虚拟网络设备 veth-pair 详解,看这一篇就够了

猿大白@公众号「Linux云计算网络」

  1. 再次测试ip addr

image-20201224114124973

2 、再启动一个容器测试,发现又多了一对网络

image-20201224114319097

image-20201224114421299

我们发现这个容器带来的网卡,都是一对对的。

veth-pair 就是一对的虚拟设备接口,他们都是成对出现的,一端连着协议,一端彼此相连。

正因为有这个特性 veth-pair 充当一个桥梁,连接各种虚拟网络设备的

OpenStac,Docker容器之间的连接,OVS的连接,都是使用evth-pair技术

image-20201224142043204

3、我们来测试下tomcat01和tomcat02是否可以ping通?

结论是可以!

 

image-20201224142841536

结论: tomcat01,tomcat02共同使用了 一个路由器,也就是docker0。

所有的docker容器不指定网络的情况下,都是docker0路由的。docker 会给我们的容器分配一个默认的可用IP。

0~255??

A B C类

255.255.0.1/16

00000000.00000000.00000000.00000000

表示255.255. xxx.xxx是一个网

共有多少个IP地址?

255255 减去0.0.0.0和255.255.255.255这两个

也就是255255--1-1 = 65535个

255.255.0.1/24

表示表示255.255. 255.xxx是一个网络

又例如:

192.168.1.0/24 给出了IP地址和子网掩码的位数,

24个1即...00000000 转为10进制是255.255.255.0,

如果改用新的子网掩码255.255.255.224 转为二进制是... 第四个段有三位是1,2的3次方是8:即问题中的可划分为子网数是8

第四个段剩5个零,子网内主机数是2的5次方减2(减2是因为减去全零的网络地址和全1的广播地址):即每个有效子网主机数是30

小结:

Docker使用的是Linux的桥接,宿主机是一个Docker容器的网桥,也就是docker0

Docker中所有网络接口都是虚拟的,虚拟的转发效率高(内网传递文件)

只要容器删除,对应的一对veth网卡就没了!

image-20201224144453520

思考一个场景:

我们编写了一个微服务,database url=ip: , 项目不重启,数据库ip换了,我们希望可以处理这个问题,可以通过名字来进行访问容器或服务?

服务名不变,但是每次重启之后IP都会变。怎么能通过名字来访问服务?不通过ping ip地址,而是通过ping容器名

实现高可用!

可以使用--link

 

探究:

 

image-20201224150253736

docker network inspect 网络id 网段相同

 

我用tomcat03 --link tomcat01,在中能看到如下图的信息

image-20201224150614916

其实这个tomcat03就是在本地配置了tomcat01的配置

查看tomcat03里面的/etc/hosts发现有tomcat01的配置

 
 

本质探究: -–link 本质就是在hosts配置中添加一个映射

之前是ping IP地址 , 现在ping tomcat01就会转化成ping IP地址

tomcat01就没有使用--link去做类似的配置,所以在tomcat01中无法直接使用ping tomcat03。

现在玩Docker已经不建议使用–link了!

自定义网络,不使用docker0!

docker0问题:不支持容器名连接访问!

查看所有的docker网络

image-20201224160213501

网络模式

bridge :桥接 docker(默认模式,自己创建也是用bridge模式) 0.2--0.1--0.3

none :不配置网络,一般不用

host :和所主机共享网络

container :容器网络连通(用得少!局限很大)

测试
  1. 删除所有容器和镜像,得到一个干净的环境
 
  1. 查看用法
 
  1. 创建自己的网络
 
 

自定义网络的好处:

 

在自定义的网络下,服务可以互相ping通,不必使用-–link

我们自定义的网络docker当我们维护好了对应的关系,推荐我们平时这样使用网络!

好处:

redis -不同的集群使用不同的网络,保证集群是安全和健康的

mysql-不同的集群使用不同的网络,保证集群是安全和健康的

img

image-20201224165913636

 
 
 
结论:假设要跨网络操作别人,就需要使用docker network connect 连通!

image-20201224172223527

 
 

docker搭建redis集群完成!

我们使用docker之后,所有的技术都会慢慢变得简单起来!

1、构建SpringBoot项目

2、打包运行

3、编写dockerfile

4、构建镜像

5、发布运行

以后我们使用了Docker之后,给别人交付就是一个镜像即可!

Docker定义:Docker 是一个开源的应用容器引擎,它可以让开发者打包他们的应用以及依赖包到一个轻量级、可移植的容器中,然后发布到任何流行的 Linux 机器上,也可以实现虚拟化。容器是完全使用沙箱机制( 沙箱是一个虚拟系统程序,沙箱提供的环境相对于每一个运行的程序都是独立的,而且不会对现有的系统产生影响 ),相互之间不会有任何接口,更重要的是容器性能开销极低。

Docker的优点

Docker应用场景

Web 应用的自动化打包和发布。

自动化测试和持续集成、发布。

在服务型环境中部署和调整数据库或其他的后台应用。

从头编译或者扩展现有的 OpenShift 或 Cloud Foundry 平台来搭建自己的 PaaS 环境。

我们用的传统虚拟机如 VMware之类的需要模拟整台机器包括硬件,每台虚拟机都需要有自己的操作系统,虚拟机一旦被开启,预分配给它的资源将全部被占用。每一台虚拟机包括应用,必要的二进制和 库,以及一个完整的用户操作系统。

而容器技术是和我们的宿主机共享硬件资源及操作系统,可以实现资源的动态分配。容器包含应用和其 所有的依赖包,但是与其他容器共享内核。容器在宿主机操作系统中,在用户空间以分离的进程运行。

容器技术是实现操作系统虚拟化的一种途径,可以让您在资源受到隔离的进程中运行应用程序及其依赖 关系。通过使用容器,我们可以轻松打包应用程序的代码、配置和依赖关系,将其变成容易使用的构建 块,从而实现环境一致性、运营效率、开发人员生产力和版本控制等诸多目标。容器可以帮助保证应用 程序快速、可靠、一致地部署,其间不受部署环境的影响。容器还赋予我们对资源更多的精细化控制能 力,让我们的基础设施效率更高。

Docker 属于 Linux 容器的一种封装,提供简单易用的容器使用接口。它是目前最流行的 Linux容器解决方案。

Docker 将应用程序与该程序的依赖,打包在一个文件里面。运行这个文件,就会生成一个虚拟容器。程序在这个虚拟容器里运行,就好像在真实的物理机上运行一样。有了 Docker ,就不用担心环境问题。

总体来说, Docker 的接口相当简单,用户可以方便地创建和使用容器,把自己的应用放入容器。容器还可以进行版本管理、复制、分享、修改,就像管理普通的代码一样。

Docker的几个重要概念,如下图所示:

镜像就类似于在创建虚拟机前需要下载的系统镜像文件,比如iso文件、img文件等一些镜像文件。

容器可以类比于正在运行中的虚拟机。

你可以将你的镜像save为一个tar文件,别人就可以通过load来获取你的镜像。

仓库中则保存了很多公共的常用的镜像,比如常用的JDK镜像、MySQL镜像、tomcat镜像、Ubuntu镜像、ngnix镜像等等。你可以通过pull来拉取获得这些镜像,你也可以自定义一些镜像通过push推送到仓库中。

Dockerfile就是一个build镜像的文件,它描述并指定了应该如何构建一个镜像。

  1. Docker 容器使用获取镜像

启动容器查看容器

启动已经停止的容器后台运行

停止一个容器进入容器

退出容器导出容器导入容器容器快照删除容器

清理掉所有处于终止状态的容器

  1. Docker Web应用运行一个web应用

以端口5000开启端口关闭web应用

重启web应用移除web应用

  1. Docker 镜像应用列出镜像列表

获取镜像

  1. Dockerfile

构建镜像

step1:添加Docker的maven的插件,配置Dockerfile的path;

step2:在配置的Dockerfile的path处添加Dockerfile文件;

Step3:文件中添加配置:

Step4:mvn clean package -Dmaven.test.skip=true (表示不执行测试用例,也不编译测试用例类。)

step5:mvn package docker:build 打镜像

step6:docker images 查看镜像

step7:docker run -p 8081:8081 -t springboot/web-app-template 运行

step8:查看运行结果:http://localhost:8081/....

step9:docker push

自己学习:所有的都去官网学习

docker容器内无法联网问题解决,本人centos8

 

image-20201224171126927

前面这篇文章介绍了 tap/tun 设备之后,大家应该对虚拟网络设备有了一定的了解,本文来看另外一种虚拟网络设备 veth-pair。

顾名思义,veth-pair 就是一对的虚拟设备接口,和 tap/tun 设备不同的是,它都是成对出现的。一端连着协议栈,一端彼此相连着。如下图所示:

img

正因为有这个特性,它常常充当着一个桥梁,连接着各种虚拟网络设备,典型的例子像“两个 namespace 之间的连接”,“Bridge、OVS 之间的连接”,“Docker 容器之间的连接” 等等,以此构建出非常复杂的虚拟网络结构,比如 OpenStack Neutron。

我们给上图中的 veth0 和 veth1 分别配上 IP:10.1.1.2 和 10.1.1.3,然后从 veth0 ping 一下 veth1。理论上它们处于同网段,是能 ping 通的,但结果却是 ping 不通。

抓个包看看,

 
 

可以看到,由于 veth0 和 veth1 处于同一个网段,且是第一次连接,所以会事先发 ARP 包,但 veth1 并没有响应 ARP 包。

经查阅,这是由于我使用的 Ubuntu 系统内核中一些 ARP 相关的默认配置限制所导致的,需要修改一下配置项:

 
 

完了再 ping 就行了。

 
 

我们对这个通信过程比较感兴趣,可以抓包看看。

对于 veth0 口:

 
 

对于 veth1 口:

 
 

奇怪,我们并没有看到 ICMP 的 包,那它是怎么 ping 通的?

其实这里 走的是 localback 口,不信抓个包看看:

 
 

为什么?

我们看下整个通信流程就明白了。

  1. 首先 ping 程序构造 ICMP ,通过 socket 发给协议栈。
  2. 由于 ping 指定了走 veth0 口,如果是第一次,则需要发 ARP 请求,否则协议栈直接将数据包交给 veth0。
  3. 由于 veth0 连着 veth1,所以 ICMP request 直接发给 veth1。
  4. veth1 收到请求后,交给另一端的协议栈。
  5. 协议栈看本地有 10.1.1.3 这个 IP,于是构造 ICMP reply 包,查看路由表,发现回给 10.1.1.0 网段的数据包应该走 localback 口,于是将 reply 包交给 lo 口(会优先查看路由表的 0 号表, 查看)。
  6. lo 收到协议栈的 reply 包后,啥都没干,转手又回给协议栈。
  7. 协议栈收到 reply 包之后,发现有 socket 在等待包,于是将包给 socket。
  8. 等待在用户态的 ping 程序发现 socket 返回,于是就收到 ICMP 的 reply 包。

整个过程如下图所示:

img

namespace 是 Linux 2.6.x 内核版本之后支持的特性,主要用于资源的隔离。有了 namespace,一个 Linux 系统就可以抽象出多个网络子系统,各子系统间都有自己的网络设备,协议栈等,彼此之间互不影响。

如果各个 namespace 之间需要通信,怎么办呢,答案就是用 veth-pair 来做桥梁。

根据连接的方式和规模,可以分为“直接相连”,“通过 Bridge 相连” 和 “通过 OVS 相连”。

直接相连是最简单的方式,如下图,一对 veth-pair 直接将两个 namespace 连接在一起。

img

给 veth-pair 配置 IP,测试连通性:

 
 

Linux Bridge 相当于一台交换机,可以中转两个 namespace 的流量,我们看看 veth-pair 在其中扮演什么角色。

如下图,两对 veth-pair 分别将两个 namespace 连到 Bridge 上。

img

同样给 veth-pair 配置 IP,测试其连通性:

 
 

OVS 是第三方开源的 Bridge,功能比 Linux Bridge 要更强大,对于同样的实验,我们用 OVS 来看看是什么效果。

如下图所示:

img

同样测试两个 namespace 之间的连通性:

 
 

veth-pair 在虚拟网络中充当着桥梁的角色,连接多种网络设备构成复杂的网络。

veth-pair 的三个经典实验,直接相连、通过 Bridge 相连和通过 OVS 相连。

http://www.opencloudblog.com/?p=66

https://segmentfault.com/a/51098

image-20201224195408199

syntax error near unexpected token `docker

参考 https://www.todocker.cn/2451.html

image-20201223133420620

docker build -t 镜像名 镜像名要用小写

docker build xxxx . 最后要加一个.,代表当前目录

image-20201223150301694

image-20201223150314472

 
 

apt-get install -y openjdk-8-jdk

&& apt-get install -y build-essential cmake wget libzip-dev libgl1-mesa-dev

&& apt-get install -y python3.8

&& apt-get install -y python3-pip

&& pip3 install pytest

 

docker run -it -v /home/yundao/buildpythonimage/automation:/usr/local myubut:6.0

如果有官方镜像,就用官方的镜像。但是怎么选择版本?

如果没有官方镜像,比如pytest,需要我自己build一个镜像 pip install

安装python

http://c.biancheng.net/view/4162.html

https://www.cnblogs.com/lgqboke/p/10756736.html

https://zhuanlan.zhihu.com/p/

为啥要设置软连接?不需要设置在PATH中python路径吗?

 

yum

wget

image-20201223160810906

python 3.6??我不确定会不会有问题

没找到pytest模块?明明之前安装过了

image-20201223162028791

经过小测试, pytest是可用的

image-20201223163129173

直接输入pytest 是可以的,python main_test.py 就不行,具体原因不清楚。

image-20201223163949009

locust

https://www.cnblogs.com/keyou1/p/11268241.html

  • 上一篇: java语音爬虫教程
  • 下一篇: java heritrix 教程
  • 版权声明


    相关文章:

  • java语音爬虫教程2025-01-27 12:26:01
  • java教程 中软2025-01-27 12:26:01
  • java应用开发教程 pdf2025-01-27 12:26:01
  • java免费课程教程2025-01-27 12:26:01
  • 超级玛丽java教程2025-01-27 12:26:01
  • java heritrix 教程2025-01-27 12:26:01
  • mac版Java教程2025-01-27 12:26:01
  • java全彩版教程2025-01-27 12:26:01
  • 新版java编程教程2025-01-27 12:26:01
  • java秒杀系统教程2025-01-27 12:26:01