太全了｜萬字詳解Docker架構原理、功能及使用

一、簡介

1、了解Docker的前生LXC

LXC為Linux Container的簡寫。可以提供輕量級的虛擬化，以便隔離進程和資源，而且不需要提供指令解釋機制以及全虛擬化的其他復雜性。相當于C++中的NameSpace。容器有效地將由單個操作系統管理的資源劃分到孤立的組中，以更好地在孤立的組之間平衡有沖突的資源使用需求。

與傳統虛擬化技術相比，它的優勢在于：

（1）與宿主機使用同一個內核，性能損耗小；

（2）不需要指令級模擬；

（3）不需要即時(Just-in-time)編譯；

（4）容器可以在CPU核心的本地運行指令，不需要任何專門的解釋機制；

（5）避免了準虛擬化和系統調用替換中的復雜性；

（6）輕量級隔離，在隔離的同時還提供共享機制，以實現容器與宿主機的資源共享。

總結：Linux Container是一種輕量級的虛擬化的手段。

Linux Container提供了在單一可控主機節點上支持多個相互隔離的server container同時執行的機制。Linux Container有點像chroot，提供了一個擁有自己進程和網絡空間的虛擬環境，但又有別于虛擬機，因為lxc是一種操作系統層次上的資源的虛擬化。

2、LXC與docker什么關系？

docker并不是LXC替代品，docker底層使用了LXC來實現，LXC將linux進程沙盒化，使得進程之間相互隔離，并且能夠課哦內閣制各進程的資源分配。

在LXC的基礎之上，docker提供了一系列更強大的功能。

3、什么是docker

docker是一個開源的應用容器引擎，基于go語言開發并遵循了apache2.0協議開源。

docker可以讓開發者打包他們的應用以及依賴包到一個輕量級、可移植的容器中，然后發布到任何流行的linux服務器，也可以實現虛擬化。

容器是完全使用沙箱機制，相互之間不會有任何接口（類iphone的app），并且容器開銷極其低。

4、docker官方文檔

https://docs.docker.com/

5、為什么docker越來越受歡迎

官方話語：

• 容器化越來越受歡迎，因為容器是：

• 靈活：即使是最復雜的應用也可以集裝箱化。

• 輕量級：容器利用并共享主機內核。

• 可互換：您可以即時部署更新和升級。

• 便攜式：您可以在本地構建，部署到云，并在任何地方運行。

• 可擴展：您可以增加并自動分發容器副本。

• 可堆疊：您可以垂直和即時堆疊服務。

• 鏡像和容器（contalners）

通過鏡像啟動一個容器，一個鏡像是一個可執行的包，其中包括運行應用程序所需要的所有內容包含代碼，運行時間，庫、環境變量、和配置文件。

容器是鏡像的運行實例，當被運行時有鏡像狀態和用戶進程，可以使用docker ps 查看。

• 容器和虛擬機

容器時在linux上本機運行，并與其他容器共享主機的內核，它運行的一個獨立的進程，不占用其他任何可執行文件的內存，非常輕量。

虛擬機運行的是一個完成的操作系統，通過虛擬機管理程序對主機資源進行虛擬訪問，相比之下需要的資源更多。

6、docker版本

Docker Community Edition（CE）社區版

Enterprise Edition(EE) 商業版

7、docker和openstack的幾項對比

8、容器在內核中支持2種重要技術

docker本質就是宿主機的一個進程，docker是通過namespace實現資源隔離，通過cgroup實現資源限制，通過寫時復制技術（copy-on-write）實現了高效的文件操作（類似虛擬機的磁盤比如分配500g并不是實際占用物理磁盤500g）

1）namespaces 名稱空間

2）control Group 控制組

cgroup的特點是：　

• cgroup的api以一個偽文件系統的實現方式，用戶的程序可以通過文件系統實現cgroup的組件管理

• cgroup的組件管理操作單元可以細粒度到線程級別，另外用戶可以創建和銷毀cgroup，從而實現資源載分配和再利用

• 所有資源管理的功能都以子系統的方式實現，接口統一子任務創建之初與其父任務處于同一個cgroup的控制組

四大功能：

• 資源限制：可以對任務使用的資源總額進行限制

• 優先級分配：通過分配的cpu時間片數量以及磁盤IO帶寬大小，實際上相當于控制了任務運行優先級

• 資源統計：可以統計系統的資源使用量，如cpu時長，內存用量等

• 任務控制：cgroup可以對任務執行掛起、恢復等操作

9、了解docker三個重要概念

1）image鏡像

docker鏡像就是一個只讀模板，比如，一個鏡像可以包含一個完整的centos，里面僅安裝apache或用戶的其他應用，鏡像可以用來創建docker容器，另外docker提供了一個很簡單的機制來創建鏡像或者更新現有的鏡像，用戶甚至可以直接從其他人那里下周一個已經做好的鏡像來直接使用

2）container容器

docker利用容器來運行應用，容器是從鏡像創建的運行實例，它可以被啟動，開始、停止、刪除、每個容器都是互相隔離的，保證安全的平臺，可以吧容器看做是要給簡易版的linux環境（包括root用戶權限、鏡像空間、用戶空間和網絡空間等）和運行再其中的應用程序

3）repostory倉庫

倉庫是集中存儲鏡像文件的滄桑，registry是倉庫主從服務器，實際上參考注冊服務器上存放著多個倉庫，每個倉庫中又包含了多個鏡像，每個鏡像有不同的標簽（tag）

倉庫分為兩種，公有參考，和私有倉庫，最大的公開倉庫是docker Hub，存放了數量龐大的鏡像供用戶下周，國內的docker pool，這里倉庫的概念與Git類似，registry可以理解為github這樣的托管服務

10、docker的主要用途

官方就是Bulid 、ship、run any app/any where，編譯、裝載、運行、任何app/在任意地放都能運行。

就是實現了應用的封裝、部署、運行的生命周期管理只要在glibc的環境下，都可以運行。

運維生成環境中：docker化。

• 發布服務不用擔心服務器的運行環境，所有的服務器都是自動分配docker，自動部署，自動安裝，自動運行

• 再不用擔心其他服務引擎的磁盤問題，cpu問題，系統問題了

• 資源利用更出色

• 自動遷移，可以制作鏡像，遷移使用自定義的鏡像即可遷移，不會出現什么問題

• 管理更加方便了

11、docker改變了什么

• 面向產品：產品交付

• 面向開發：簡化環境配置

• 面向測試：多版本測試

• 面向運維：環境一致性

• 面向架構：自動化擴容（微服務）

二、docker架構

1、總體架構

• distribution 負責與docker registry交互，上傳洗澡鏡像以及v2 registry 有關的源數據

• registry負責docker registry有關的身份認證、鏡像查找、鏡像驗證以及管理registry mirror等交互操作

• image 負責與鏡像源數據有關的存儲、查找，鏡像層的索引、查找以及鏡像tar包有關的導入、導出操作

• reference負責存儲本地所有鏡像的repository和tag名，并維護與鏡像id之間的映射關系

• layer模塊負責與鏡像層和容器層源數據有關的增刪改查，并負責將鏡像層的增刪改查映射到實際存儲鏡像層文件的graphdriver模塊

• graghdriver是所有與容器鏡像相關操作的執行者

2、docker架構2

如果覺得上面架構圖比較亂可以看這個架構：

從上圖不難看出，用戶是使用Docker Client與Docker Daemon建立通信，并發送請求給后者。

而Docker Daemon作為Docker架構中的主體部分，首先提供Server的功能使其可以接受Docker Client的請求；而后Engine執行Docker內部的一系列工作，每一項工作都是以一個Job的形式的存在。

Job的運行過程中，當需要容器鏡像時，則從Docker Registry中下載鏡像，并通過鏡像管理驅動graphdriver將下載鏡像以Graph的形式存儲；當需要為Docker創建網絡環境時，通過網絡管理驅動networkdriver創建并配置Docker容器網絡環境；當需要限制Docker容器運行資源或執行用戶指令等操作時，則通過execdriver來完成。

而libcontainer是一項獨立的容器管理包，networkdriver以及execdriver都是通過libcontainer來實現具體對容器進行的操作。當執行完運行容器的命令后，一個實際的Docker容器就處于運行狀態，該容器擁有獨立的文件系統，獨立并且安全的運行環境等。

3、docker架構3

再來看看另外一個架構，這個個架構就簡單清晰指明了server/client交互，容器和鏡像、數據之間的一些聯系。

這個架構圖更加清晰了架構

docker daemon就是docker的守護進程即server端，可以是遠程的，也可以是本地的，這個不是C/S架構嗎，客戶端Docker client 是通過rest api進行通信。

docker cli 用來管理容器和鏡像，客戶端提供一個只讀鏡像，然后通過鏡像可以創建多個容器，這些容器可以只是一個RFS（Root file system根文件系統），也可以ishi一個包含了用戶應用的RFS，容器再docker client中只是要給進程，兩個進程之間互不可見。

用戶不能與server直接交互，但可以通過與容器這個橋梁來交互，由于是操作系統級別的虛擬技術，中間的損耗幾乎可以不計。

三、docker架構2各個模塊的功能（帶完善）

主要的模塊有：Docker Client、Docker Daemon、Docker Registry、Graph、Driver、libcontainer以及Docker container。

1、docker client

docker client 是docker架構中用戶用來和docker daemon建立通信的客戶端，用戶使用的可執行文件為docker，通過docker命令行工具可以發起眾多管理container的請求。

docker client可以通過一下三宗方式和docker daemon建立通信：tcp://host:port;unix:path_to_socket;fd://socketfd。，docker client可以通過設置命令行flag參數的形式設置安全傳輸層協議(TLS)的有關參數，保證傳輸的安全性

docker client發送容器管理請求后，由docker daemon接受并處理請求，當docker client 接收到返回的請求相應并簡單處理后，docker client 一次完整的生命周期就結束了，當需要繼續發送容器管理請求時，用戶必須再次通過docker可以執行文件創建docker client。

2、docker daemon

docker daemon 是docker架構中一個常駐在后臺的系統進程，功能是：接收處理docker client發送的請求。該守護進程在后臺啟動一個server，server負載接受docker client發送的請求；接受請求后，server通過路由與分發調度，找到相應的handler來執行請求。

docker daemon啟動所使用的可執行文件也為docker，與docker client啟動所使用的可執行文件docker相同，在docker命令執行時，通過傳入的參數來判別docker daemon與docker client。

docker daemon的架構可以分為：docker server、engine、job。daemon

3、docker server

docker server在docker架構中時專門服務于docker client的server，該server的功能時：接受并調度分發docker client發送的請求，架構圖如下：

在Docker的啟動過程中，通過包gorilla/mux（golang的類庫解析），創建了一個mux.Router，提供請求的路由功能。在Golang中，gorilla/mux是一個強大的URL路由器以及調度分發器。該mux.Router中添加了眾多的路由項，每一個路由項由HTTP請求方法（PUT、POST、GET或DELETE）、URL、Handler三部分組成。

若Docker Client通過HTTP的形式訪問Docker Daemon，創建完mux.Router之后，Docker將Server的監聽地址以及mux.Router作為參數，創建一個httpSrv=http.Server{}，最終執行httpSrv.Serve()為請求服務。

在Server的服務過程中，Server在listener上接受Docker Client的訪問請求，并創建一個全新的goroutine來服務該請求。在goroutine中，首先讀取請求內容，然后做解析工作，接著找到相應的路由項，隨后調用相應的Handler來處理該請求，最后Handler處理完請求之后回復該請求。

需要注意的是：Docker Server的運行在Docker的啟動過程中，是靠一個名為”serveapi”的job的運行來完成的。原則上，Docker Server的運行是眾多job中的一個，但是為了強調Docker Server的重要性以及為后續job服務的重要特性，將該”serveapi”的job單獨抽離出來分析，理解為Docker Server。

4、engine

Engine是Docker架構中的運行引擎，同時也Docker運行的核心模塊。它扮演Docker container存儲倉庫的角色，并且通過執行job的方式來操縱管理這些容器。

在Engine數據結構的設計與實現過程中，有一個handler對象。該handler對象存儲的都是關于眾多特定job的handler處理訪問。舉例說明，Engine的handler對象中有一項為：{“create”: daemon.ContainerCreate,}，則說明當名為”create”的job在運行時，執行的是daemon.ContainerCreate的handler。

5、job

一個Job可以認為是Docker架構中Engine內部最基本的工作執行單元。Docker可以做的每一項工作，都可以抽象為一個job。例如：在容器內部運行一個進程，這是一個job；創建一個新的容器，這是一個job，從Internet上下載一個文檔，這是一個job；包括之前在Docker Server部分說過的，創建Server服務于HTTP的API，這也是一個job，等等。

Job的設計者，把Job設計得與Unix進程相仿。比如說：Job有一個名稱，有參數，有環境變量，有標準的輸入輸出，有錯誤處理，有返回狀態等。

6、docker registry

Docker Registry是一個存儲容器鏡像的倉庫。而容器鏡像是在容器被創建時，被加載用來初始化容器的文件架構與目錄。

在Docker的運行過程中，Docker Daemon會與Docker Registry通信，并實現搜索鏡像、下載鏡像、上傳鏡像三個功能，這三個功能對應的job名稱分別為”search”，”pull” 與 “push”。

其中，在Docker架構中，Docker可以使用公有的Docker Registry，即大家熟知的Docker Hub，如此一來，Docker獲取容器鏡像文件時，必須通過互聯網訪問Docker Hub；同時Docker也允許用戶構建本地私有的Docker Registry，這樣可以保證容器鏡像的獲取在內網完成。

7、Graph

Graph在Docker架構中扮演已下載容器鏡像的保管者，以及已下載容器鏡像之間關系的記錄者。一方面，Graph存儲著本地具有版本信息的文件系統鏡像，另一方面也通過GraphDB記錄著所有文件系統鏡像彼此之間的關系。

Graph的架構如下：

其中，GraphDB是一個構建在SQLite之上的小型圖數據庫，實現了節點的命名以及節點之間關聯關系的記錄。它僅僅實現了大多數圖數據庫所擁有的一個小的子集，但是提供了簡單的接口表示節點之間的關系。

同時在Graph的本地目錄中，關于每一個的容器鏡像，具體存儲的信息有：該容器鏡像的元數據，容器鏡像的大小信息，以及該容器鏡像所代表的具體rootfs。

8、driver

Driver是Docker架構中的驅動模塊。通過Driver驅動，Docker可以實現對Docker容器執行環境的定制。由于Docker運行的生命周期中，并非用戶所有的操作都是針對Docker容器的管理，另外還有關于Docker運行信息的獲取，Graph的存儲與記錄等。因此，為了將Docker容器的管理從Docker Daemon內部業務邏輯中區分開來，設計了Driver層驅動來接管所有這部分請求。

在Docker Driver的實現中，可以分為以下三類驅動：graphdriver、networkdriver和execdriver。

graphdriver主要用于完成容器鏡像的管理，包括存儲與獲取。即當用戶需要下載指定的容器鏡像時，graphdriver將容器鏡像存儲在本地的指定目錄；同時當用戶需要使用指定的容器鏡像來創建容器的rootfs時，graphdriver從本地鏡像存儲目錄中獲取指定的容器鏡像。

在graphdriver的初始化過程之前，有4種文件系統或類文件系統在其內部注冊，它們分別是aufs、btrfs、vfs和devmapper。而Docker在初始化之時，通過獲取系統環境變量”DOCKER_DRIVER”來提取所使用driver的指定類型。而之后所有的graph操作，都使用該driver來執行。

graphdriver的架構如下：

networkdriver的用途是完成Docker容器網絡環境的配置，其中包括Docker啟動時為Docker環境創建網橋；Docker容器創建時為其創建專屬虛擬網卡設備；以及為Docker容器分配IP、端口并與宿主機做端口映射，設置容器防火墻策略等。networkdriver的架構如下：

execdriver作為Docker容器的執行驅動，負責創建容器運行命名空間，負責容器資源使用的統計與限制，負責容器內部進程的真正運行等。在execdriver的實現過程中，原先可以使用LXC驅動調用LXC的接口，來操縱容器的配置以及生命周期，而現在execdriver默認使用native驅動，不依賴于LXC。具體體現在Daemon啟動過程中加載的ExecDriverflag參數，該參數在配置文件已經被設為”native”。這可以認為是Docker在1.2版本上一個很大的改變，或者說Docker實現跨平臺的一個先兆。execdriver架構如下：

9、libcontainer

libcontainer是Docker架構中一個使用Go語言設計實現的庫，設計初衷是希望該庫可以不依靠任何依賴，直接訪問內核中與容器相關的API。

正是由于libcontainer的存在，Docker可以直接調用libcontainer，而最終操縱容器的namespace、cgroups、apparmor、網絡設備以及防火墻規則等。這一系列操作的完成都不需要依賴LXC或者其他包。libcontainer架構如下：

另外，libcontainer提供了一整套標準的接口來滿足上層對容器管理的需求。或者說，libcontainer屏蔽了Docker上層對容器的直接管理。又由于libcontainer使用Go這種跨平臺的語言開發實現，且本身又可以被上層多種不同的編程語言訪問，因此很難說，未來的Docker就一定會緊緊地和Linux捆綁在一起。而于此同時，Microsoft在其著名云計算平臺Azure中，也添加了對Docker的支持，可見Docker的開放程度與業界的火熱度。

暫不談Docker，由于libcontainer的功能以及其本身與系統的松耦合特性，很有可能會在其他以容器為原型的平臺出現，同時也很有可能催生出云計算領域全新的項目。

10、docker container

Docker container（Docker容器）是Docker架構中服務交付的最終體現形式。

Docker按照用戶的需求與指令，訂制相應的Docker容器：

• 用戶通過指定容器鏡像，使得Docker容器可以自定義rootfs等文件系統；

• 用戶通過指定計算資源的配額，使得Docker容器使用指定的計算資源；

• 用戶通過配置網絡及其安全策略，使得Docker容器擁有獨立且安全的網絡環境；

• 用戶通過指定運行的命令，使得Docker容器執行指定的工作。

四、docker簡單使用

1、安裝

注意：啟動前應當設置源

這里設置阿里的，注冊阿里云賬戶號每個用戶都有：

2、docker版本查詢

3、搜索下載鏡像

4、查看已經下載的鏡像

5、導出鏡像

6、刪除鏡像

7、導入鏡像

8、默認配置文件

如果更改存儲目錄就添加

如果更改DNS——默認采用宿主機的dns

9、運行hello world

這里用centos鏡像echo一個hello word

10、運行一個容器-run

后臺運行（-d后臺運行）（--name添加一個名字）

還有一種-rm參數，ctrl+c后就刪除，可以測試環境用，生成環境用的少

11、如何進入容器

三種方法，上面已經演示了一種

第一種，需要容器本身的pid及util-linux，不推薦，暫時不演示了

第二種，不分配bash終端的一種實施操作，不推薦，這種操作如果在開一個窗口也能看到操作的指令，所有人都能看到

第三種：exec方式，終端時分開的，推薦

12、查看docker進程及刪除容器

上面已經演示：

13、查看容器詳細信息

并不需要進入到容器里面，通過查看詳細信息看到了剛才運行的nginx，宿主機curl ip地址訪問一下運行情況。

14、查看日志

-f 掛起這個終端，動態查看日志

[root@web1?~]#?docker?logs?-f?mynginx

歡迎工作一到五年的Java工程師朋友們加入我的個人粉絲群Java填坑之路：659655594群內提供免費的Java架構學習資料（里面有高可用、高并發、高性能及分布式、Jvm性能調優、Spring源碼，MyBatis，Netty,Redis,Kafka,Mysql,Zookeeper,Tomcat,Docker,Dubbo,Nginx等多個知識點的架構資料）合理利用自己每一分每一秒的時間來學習提升自己，不要再用"沒有時間“來掩飾自己思想上的懶惰！趁年輕，使勁拼，給未來的自己一個交代！