大数据开发：虚拟化技术与Docker

wy168 发表于 2024-1-5 23:28:23

众所周知，人们为了提高系统及硬件资源的利用率而引入了虚拟化技术。虚拟化是一种资源管理技术，它可以各种实体资源抽像后再分隔，从而打破实体结构的限制，最大程度的提高资源的利用率。从实现形式来分，虚拟化技术分为硬件虚拟化技术和软件虚拟化技术。而Docker属于软件虚拟化技术中的操作系统层虚拟化技术，它是基于LXC实现的一个应用容器引擎，Docker让开发者可以打包他们的应用及依赖环境到一个可移植的容器中，然后可以将这个容器快速部署开发、测试或生产环境中。本篇文章将具体对虚拟化技术与Docker进行分析。
<h1 style="text-align: left; margin-bottom: 10px;">一．虚拟化技术</h1>
1. 什么是虚拟化
在计算机技术中，虚拟化（Virtualization）是一种资源管理技术。它是将计算机的各种实体资源，如：服务器、网络、内存及存储等，予以抽象、转换后呈现出来，打破实体结构间的不可切割的障碍，使用户可以用更好的方式来利用这些资源。
虚拟化的目的是为了在同一个主机上运行多个系统或应用，从而提高系统资源的利用率，并带来降低成本、方便管理和容错容灾等好处。
<h1 style="text-align: left; margin-bottom: 10px;">2.虚拟化技术分类</h1>
从实现形式来分，虚拟化技术可分为基于硬件的虚拟化和基于软件的虚拟化。
硬件虚拟化
硬件虚拟化就是硬件物理平台本身提供了对特殊指令的截获和重定向的支持。支持虚拟化的硬件，也是一些基于硬件实现软件虚拟化技术的关键。在基于硬件实现软件虚拟化的技术中，在硬件是实现虚拟化的基础，硬件(主要是CPU)会为虚拟化软件提供支持，从而实现硬件资源的虚拟化。
支持虚拟化的硬件有：
Intel-VT-(Intel Virtualization Technology)，Intel公司为解决纯软件虚拟化解决方案在可靠性、安全性和性能上的不足而引进的技术。它可以让一个CPU工作起来像多个CPU在并行运行，从而使得在一部电脑内同时运行多个操作系统成为可能
AMD-V-(AMD Virtualization)，是AMD公司的虚拟化技术。它是对x86处理器系统架构的一组硬件扩展和硬件辅助虚拟化技术，可以简化纯软件的虚拟化解决方案，改进VMM（虚拟机监视器）的设计，更充分地利用硬件资源，提高服务器和数据中心的虚拟化效率
软件虚拟化
软件虚拟化就是利用软件技术，在现有的物理平台上实现对物理平台访问的截获和模拟。在软件虚拟化技术中，有些技术不需要硬件支持，如：QEMU；而有些软件虚拟化技术，则依赖硬件支持，如：VMware、KVM。
对软件虚拟化进行细分，又可以分为以下几类：
完全虚拟化：（Full Virtualization）虚拟机模拟完整的底层硬件环境和特权指令的执行过程，使客户机操作系统可以独立运行。支持完全虚拟化的软件有：Parallels Workstation、VirtualBox、Virtual Iron、Oracle VM、Virtual PC、Virtual Server、Hyper-V、VMware Workstation、QEMU等
硬件辅助虚拟化：（Hardware-assisted Virtualization）是指通过硬件辅助支持模拟运行环境，使客户机操作系统可以独立运行，实现完全虚拟化的功能。支持硬件辅助虚拟化的软件有：Linux KVM、VMware Workstation、VMware Fusion、Virtual PC、Xen、VirtualBox、Parallels Workstation等
部分虚拟化：（Partial Virtualization）只针对部分硬件资源进行虚拟化，虚拟机模拟部分底层硬件环境，特别是地址空间。这样的环境支持资源共享和线程独立，但是不允许建立独立的客户机操作系统。
平行虚拟化：（Para-Virtualization）虚拟机不需要模拟硬件，而是将部分硬件接口以软件的形式提供给客户机操作系统。如：早期的Xen。
操作系统层虚拟化：（OS-level virtualization）这种技术将操作系统内核虚拟化，可以允许使用者空间软件实例被分割成几个独立的单元，在内核中运行，而不是只有一个单一实例运行。这个软件实例，也被称为是一个容器（containers）、虚拟引擎（Virtualization engine）、虚拟专用服务器（virtual private servers）。每个容器的进程是独立的，对于使用者来说，就像是在使用自己的专用服务器。
Docker容器技术就是属于操作系统层虚拟化的范畴。
<h1 style="text-align: left; margin-bottom: 10px;">二、什么是Docker</h1>
Docker是一个开源项目，诞生于 2013 年初，最初是 dotCloud 公司内部的一个业余项目。它基于 Google 公司推出的 Go 语言实现。项目后来加入了 Linux 基金会，遵从了 Apache 2.0 协议，项目代码在 GitHub 上进行维护。
Docker 自开源后受到广泛的关注和讨论，以至于 dotCloud 公司后来都改名为 Docker Inc。Redhat 已经在其 RHEL6.5 中集中支持 Docker；Google 也在其 PaaS 产品中广泛应用。
Docker 项目的目标是实现轻量级的操作系统虚拟化解决方案。 Docker 的基础是 Linux 容器（LXC）等技术。
在 LXC 的基础上 Docker 进行了进一步的封装，让用户不需要去关心容器的管理，使得操作更为简便。用户操作 Docker 的容器就像操作一个快速轻量级的虚拟机一样简单。
<h1 style="text-align: left; margin-bottom: 10px;">三．Docker虚拟化特点</h1>
跟传统VM比较具有以下优点：
操作启动快：
运行时的性能可以获取极大提升，管理操作（启动，停止，开始，重启，等等）都是以秒或毫秒为单位的。
轻量级虚拟化：
你会拥有足够的“操作系统”，仅需添加或减小镜像即可。在一台服务器上可以布署100~1000个Containers容器。但是传统虚拟化，你虚拟10-20个虚拟机就不错了。
开源免费：
开源的，免费的，低成本的。由现代Linux内核支持并驱动。注* 轻量的Container必定可以在一个物理机上开启更多“容器”，注定比VMs要便宜。
前景及云支持：
正在越来越受欢迎，包括各大主流公司都在推动docker的快速发展，性能有很大的优势
跟传统VM比较具有以下缺点：
目前知道的人比较少；
相关的中文技术资料欠缺；
<h1 style="text-align: left; margin-bottom: 10px;">四．Docker虚拟化入门简介</h1>
1）Docker技术类似于集装箱。Docker是一个开源的应用容器引擎，让开发者可以打包他们的应用以及依赖包到一个可移植的容器中，然后发布到任何流程的Linux机器上，也可以实现虚拟化。
2）容器是完全使用沙箱机智，相互之间不会有任何接口。几乎没有性能开销，可以很容易的在机器和数据中心运行。最重要的是，他们不依赖于任何语言、框架或包括系统。
3）Docker项目的目标是实现轻量级的操作系统虚拟化解决方案。Docker的基础是Linux容器（LXC）等技术。在LXC的基础上，Docker进行了进一步的封装，让用户不需要去关心容器的管理，使得操作更为简单，用户操作Docker的容器就像操作一个快速轻量级的虚拟机。
4）Docker和传统虚拟化（KVM、XEN等）方式不同之处，Docker容器是在操作系统层面上实现虚拟化，直接复用本地主机的操作系统，而传统方式则是在硬件的基础上，虚拟出自己的系统，再在系统上部署相关的APP应用。
下图为传统虚拟化方案——需要部署Nginx,先部署OS系统，基于OS系统再部署Nginx
<div style="text-align: left; margin-bottom: 10px;"><img src="https://p3-sign.toutiaoimg.com/pgc-image/658efb5336af4e5ba7cc93a66fed4b04~noop.image?_iz=58558&from=article.pc_detail&lk3s=953192f4&x-expires=1704568944&x-signature=2dodflcOyYc8sg2RpFxtLabG5tE%3D" style="width: 100%; margin-bottom: 20px;"></div>
如下为Docker虚拟化方案——需要部署Nginx，无需部署OS系统，基于Docker引擎直接部署Nginx；
<div style="text-align: left; margin-bottom: 10px;"><img src="https://p3-sign.toutiaoimg.com/pgc-image/c22b704bf3e24d36a2a3a5bac9b651cf~noop.image?_iz=58558&from=article.pc_detail&lk3s=953192f4&x-expires=1704568944&x-signature=rVE3SYo2XyHfwjhat%2BuN3XCMRdE%3D" style="width: 100%; margin-bottom: 20px;"></div>
Docker虚拟化有三个概念需要理解，分别是镜像、容器、仓库。
镜像：Docker的镜像其实就是模板，跟我们常见的IOS镜像类似，是一个模板。
容器：使用镜像常见的应用或者系统，我们称之为一个容器。
仓库：仓库是存放镜像的地方，分为公开仓库（Public）和私有仓库（Private）两种形式。
<div style="text-align: left; margin-bottom: 10px;"><img src="https://p3-sign.toutiaoimg.com/pgc-image/1eb920311ccb4043bb41476eaa36cf04~noop.image?_iz=58558&from=article.pc_detail&lk3s=953192f4&x-expires=1704568944&x-signature=ZS1dUzRTiH6pBR94VjYWHVRFjHs%3D" style="width: 100%; margin-bottom: 20px;"></div>

页: [1]

泓嘉网创's Archiver

大数据开发：虚拟化技术与Docker