從苦逼到牛逼！2019年最全最新Linux運維工程師必備技能圖譜……

運維工程師在前期是一個很苦逼的工作，在這期間可能干著修電腦、掐網線、搬機器的活，顯得沒地位!時間也很碎片化，各種零碎的瑣事圍繞著你，很難體現個人價值，漸漸的對行業很迷茫，覺得沒什么發展前途。

這些枯燥無味工作的確會使人匱乏，從技術層面講這些其實都是基本功，對后期的運維工作會無形中帶來一定的幫助，因為我也是這么過來的，能深刻體會到。所以在這個時期一定要保持積極向上的心態，持續的學習。在未來的某一天，相信會回報給你的!

好了，進入正題，根據我多年的運維工作經驗，給大家分享下高級運維工程師學習路線。

初級

1、Linux基礎

剛開始階段需要熟悉Linux/Windows操作系統安裝，目錄結構、啟動流程等。

2、系統管理

主要學習Linux系統，生產環境中基本都在字符界面完成工作，所以要掌握常用的幾十個基本管理命令，包括用戶管理、磁盤分區、軟件包管理、文件權限、文本處理、進程管理、性能分析工具等。

3、網絡基礎

OSI和TCP/IP模型一定要熟悉。基本的交換機、路由器概念及實現原理要知道。

4、Shell腳本編程基礎

掌握Shell基本語法結構，能編寫簡單的腳本即可。

中級

1、網絡服務

最常用的網絡服務一定得會部署，比如vsftp、nfs、samba、bind、dhcp等。

代碼版本管理系統少不了，可以學習下主流的SVN和GIT，能部署和簡單使用就可以了。

經常在服務器之間傳輸數據，所以要會使用：rsync和scp。

數據同步：inotify/sersync。

重復性完成一些工作，可寫成腳本定時去運行，所以得會配置Linux下的定時任務服務crond。

2、Web服務

每個公司基本都會有網站，能讓網站跑起來，就需要搭建Web服務平臺了。

如果是用PHP語言開發的，通常搭建LAMP、LNMP網站平臺，這是一個技術名詞組合的拼寫，分開講就是得會部署Apache、Nginx、MySQL和PHP。

如果是JAVA語言開發的，通常使用Tomcat運行項目，為了提高訪問速度，可以使用Nginx反向代理Tomcat，Nginx處理靜態頁面，Tomcat處理動態頁面，實現動靜分離。

不是會部署這么簡單，還要知道HTTP協議工作原理、簡單的性能調優。

3、數據庫

數據庫選擇MySQL，它是世界上使用最為廣泛的開源數據庫。學它準沒錯!也要會一些簡單的SQL語句、用戶管理、常用存儲引擎、數據庫備份與恢復。

想要深入點，必須會主從復制、性能優化、主流集群方案：MHA、MGR等。NoSQL這么流行當然也少不了，學下Redis、MongoDB這兩個就好了。

4、安全

安全很重要，不要等到系統被入侵了，再做安全策略，此時已晚!所以，當一臺服務器上線后應馬上做安全訪問控制策略，比如使用iptables限制只允許信任源IP訪問，關閉一些無用的服務和端口等。

一些常見的攻擊類型一定得知道啊，否則怎么對癥下藥呢!比如CC、DDOS、ARP等。

5、監控系統

監控必不可少，是及時發現問題和追溯問題的救命稻草。可以選擇學習主流的Zabbix開源監控系統，功能豐富，能滿足基本的監控需求。監控點包括基本服務器資源、接口狀態、服務性能、PV/UV、日志等方面。

也可以弄個儀表盤展示幾個實時關鍵的數據，比如Grafana，會非常炫酷。

6、Shell腳本編程進階

Shell腳本是Linux自動完成工作的利器，必須得熟練編寫，所以得進一步學習函數、數組、信號、發郵件等。

文本處理三劍客(grep、sed、awk)得玩6啊，Linux下文本處理就指望它們了。

7、Python開發基礎

Shell腳本只能完成一些基本的任務，想要完成更復雜些的任務，比如調用API、多進程等。就需要學高級語言了。

Python是運維領域使用最多的語言，簡單易用，學它準沒錯!此階段掌握基礎就可以了，例如基本語法結構、文件對象操作、函數、迭代對象、異常處理、發郵件、數據庫編程等。

高級

1、Web靜態緩存

用戶老喊著訪問網站慢，看看服務器資源還很富裕啊!網站訪問慢也許不是服務器資源飽和導致的，影響因素很多，例如網絡、轉發層數等。

對于網絡，存在南北通信問題，之間訪問會慢，這個可以使用CDN解決，同時緩存靜態頁面，盡可能將請求攔截在最上層響應，減少后端請求和響應時間。

如果不用CDN，也可以使用Squid、Varnish、Nginx這樣的緩存服務實現靜態頁面緩存，放到流量入口處。

2、集群

單臺服務器終究資源有限，抵抗高訪問量肯定是無法支撐的，解決此問題最關鍵的技術就是采用負載均衡器，水平擴展多臺Web服務器，同時對外提供服務，這樣就成倍擴展性能了。負載均衡器主流開源技術有LVS、HAProxy和Nginx。一定要熟悉一兩個!

Web服務器性能瓶頸解決了，數據庫更為關鍵，還是采用集群，就拿學的MySQL來說，可以一主多從架構，在此基礎上讀寫分離，主負責寫，多從負責讀，從庫可水平擴展，前面再來個四層負載均衡器，承載千萬級PV，妥妥的!

高可用軟件也得會，避免單點的利器，主流的有Keepalived、Heartbeat等。

網站圖片咋這么多呢!NFS共享存儲支撐不過了，處理很慢，好弄!上分布式文件系統，并行處理任務，無單點，高可靠，高性能等特性，主流的有FastDFS、MFS、HDFS、Ceph、GFS等。初期的話我建議學習下FastDFS，能滿足中小規模需求。

3、虛擬化

硬件服務器資源利用率很低，甚是浪費!可以把空閑多的服務器虛擬化，弄成很多個的虛擬機，每個虛擬機就是一個完整的操作系統。可以很大程度提高資源利用率。建議學習開源的KVM+OpenStack云平臺。

虛擬機作為基礎平臺還可以，但應用業務彈性伸縮也太重量了吧!啟動好幾分鐘，文件又這么大，快速擴展太費勁了!

好說，上容器，容器主要特點就是快速部署和環境隔離。一個服務封裝到鏡像中，分分鐘鐘可創建幾百個容器。

主流的容器技術非Docker莫屬了。

當然，生產環境單機Docker大多數情況下是無法滿足業務需求的，可以部署Kubernetes、Swarm集群化管理容器，形成一個大的資源池，集中管理，為基礎架構提供有力的支撐。

4、自動化

反反復復重復的工作，不但提高不了效率，價值也得不到體現。

一切運維工作標準化，例如環境版本、目錄結構、操作系統等統一。在標準化基礎上才能更方面的自動化，點點鼠標或者敲幾個命令即可完成一項復雜的工作任務，爽哉爽哉!

因此，所有的操作盡可能自動化，減少人為失誤，提高工作效率。

主流服務器集中管理工具：Ansible、Saltstack

這兩個選擇任意一個就行。

持續集成工具：Jenkins

5、Python開發進階

可以再深入學習下Python開發，掌握面向對象編程。

最好也掌學習一個Web框架開發網站，例如Django、Flask，主要是開發運維管理系統，將一些復雜的流程寫到平臺中，再集成集中管理工具，可打造一個屬于運維自己的管理平臺。

6、日志分析系統

日志也很重要，定期的分析，可發現潛在隱患，提煉出有價值的東西。

開源的一套日志系統：ELK

學會部署使用，給開發提供日志查看需求。

7、性能優化

只會部署是遠遠不夠的，性能優化能最大化提升服務承載量。

這塊也是比較難的，也是高薪的關鍵點之一，為了錢也得下點功夫學習啊!

可以從硬件層、操作系統層、軟件層和架構層維度展開思考。

意識

1、堅持

學習是一個很漫長的過程，是我們每個人需要用一生去堅持的事業。

貴在堅持，難在堅持，成在堅持!

2、目標

沒有目標的不叫工作，沒有量化的不叫目標。

每到一個階段，制定一個目標。

比如：先定一個能達到的小目標，掙它一個億!

3、分享

學會分享，技術的價值在于能有效地將知識傳遞到外界，讓更多的人知道它。

只要人人都拿出一點東西來，想想會變成什么樣?

方向對了，就不怕路遠了!

十項Linux常識

1、GNU和GPL

GNU計劃(又稱革奴計劃)，是由Richard Stallman(理查德·斯托曼)在1983年9月27日公開發起的自由軟件集體協作計劃。它的目標是創建一套完全自由的操作系統。GNU也稱為自由軟件工程項目。

GPL是GNU的通用公共許可證(GNU General Public License，GPL)，即“反版權”概念，是GNU協議之一，目的是保護GNU軟件可以自由的使用、復制、研究、修改和發布。同時要求軟件必須以源代碼的形式發布。

GNU系統與Linux內核結合構成一個完整的操作系統：一個基于Linux的GNU系統，該操作系統在通常情況下稱為“GNU/Linux”，或簡稱Linux。

2、Linux發行版

一個典型的Linux發行版包括：Linux內核，一些GNU程序庫和工具，命令行shell，圖形界面的X Window系統和相應的桌面環境，如KDE或GNOME，并包含數千種從辦公套件，編譯器，文本編輯器到科學工具的應用軟件。

主流的發行版：

Red Hat Enterprise Linux、CentOS、SUSE、Ubuntu、Debian、Fedora、Gentoo

3、Unix和Linux

Linux是基于Unix的，屬于Unix類，Uinx操作系統支持多用戶、多任務、多線程和支持多種CPU架構的操作系統。Linux繼承了Unix以網絡為核心的設計思想，是一個性能穩定的多用戶網絡操作系統。

4、Swap分區

Swap分區，即交換區，系統在物理內存不夠時，與Swap進行交換。即當系統的物理內存不夠用時，把硬盤中一部分空間釋放出來，以供當前運行的程序使用。當那些程序要運行時，再從Swap分區中恢復保存的數據到內存中。那些被釋放內存空間的程序一般是很長時間沒有什么操作的程序。

Swap空間一般應大于或等于物理內存的大小，同時最小不應小于64M，最大應該是物理內存的兩倍。

5、GRUB的概念

GNU GRUB(GRand Unified Bootloader簡稱“GRUB”)是一個來自GNU項目的多操作系統啟動引導管理程序。

GRUB是一個支持多種操作系統的啟動引導管理器，在一臺有多個操作系統的計算機中，可以通過GRUB在計算機啟動時選擇用戶希望運行的操作系統。同時GRUB可以引導Linux系統分區上的不同內核，也可用于向內核傳遞啟動參數，如進入單用戶模式。

6、Buffer和Cache

Cache(緩存)位于CPU與內存之間的臨時存儲器，緩存容量比內存小的多但交換速度比內存要快得多。Cache通過緩存文件數據塊，解決CPU運算速度與內存讀寫速度不匹配的矛盾，提高CPU和內存之間的數據交換速度。Cache緩存越大，CPU處理速度越快。

Buffer(緩沖)高速緩沖存儲器，通過緩存磁盤(I/O設備)數據塊，加快對磁盤上數據的訪問，減少I/O，提高內存和硬盤(或其他I/O設備)之間的數據交換速度。Buffer是即將要被寫入磁盤的，而Cache是被從磁盤中讀出來的。

7、TCP三次握手

(1)請求端發送SYN(SYN=A)數據包，等待響應端確認

(2)響應端接收SYN，并返回SYN(A+1)和自己的ACK(K)包給請求端

(3)請求端接收到響應端的SYN+ACK包，再次向響應端發送確認包ACK(K+1)

請求端和響應端建立TCP連接，完成三次握手，開始進行數據傳輸。

8、linux系統目錄結構

Linux文件系統采用帶鏈接的樹形目錄結構，即只有一個根目錄(通常用“/”表示)，其中含有下級子目錄或文件的信息;子目錄中又可含有更下級的子目錄或者文件的信息。

/：第一層次結構的根，整個文件系統層次結構的根目錄。即文件系統的入口，最高一級目錄。

/boot：包含Linux內核及系統引導程序所需的文件，例如kernel、initrd;grub系統引導管理器也在這個目錄下。

/bin：基本系統所需要的命令,功能和"/usr/bin"類似,這個目錄下的文件都是可執行的.普通用戶也是可以執行的。

/sbin：基本的系統維護命令,只能由超級用戶使用。

/etc：所有的系統配置文件。

/dev：設備文件存儲目錄.像終端、磁盤、光驅等。

/var：存放經常變動的數據,像日志、郵件等。

/home：普通用戶的目錄默認存儲目錄。

/opt：第三方軟件的存放目錄，比如用戶自定義軟件包和編譯的軟件包就安裝到這個目錄中。

/lib：庫文件和內核模塊存放目錄，包含系統程序所需要的所有共享庫文件。

9、硬鏈接和軟鏈接

硬鏈接(Hard Link)：硬鏈接是使用同一個索引節點(inode號)的鏈接， 即可以允許多個文件名指向同一個文件索引節點(硬鏈接不支持目錄鏈接，不能跨分區鏈接)，刪除一個硬鏈接，不會影響該索引節點的源文件以及其下的多個硬鏈接。

ln source new-link

軟連接(符號鏈接，Symbolic Link)：符號鏈接是以路徑的形式創建的鏈接，類似于windows的快捷方式鏈接，符號鏈接允許創建多個文件名鏈接到同一個源文件，刪除源文件，其下的所有軟連接將不可用。(軟連接支持目錄，支持跨分區、跨文件系統)

ln -s source new-link

10、RAID技術

磁盤陣列(Redundant Arrays of independent Disks,RAID),廉價冗余(獨立)磁盤陣列。

RAID是一種把多塊獨立的物理硬盤按不同的方式組合起來形成一個硬盤組(邏輯硬盤)，提供比單個硬盤更高的存儲性能和數據備份技術。RAID技術，可以實現把多個磁盤組合在一起作為一個邏輯卷提供磁盤跨越功能;可以把數據分成多個數據塊(Block)并行寫入/讀出多個磁盤以提高訪問磁盤的速度;可以通過鏡像或校驗操作提供容錯能力。具體的功能以不同的RAID組合實現。

在用戶看來，RAID組成的磁盤組就像是一個硬盤，可以對它進行分區、格式化等操作。RAID的存儲速度比單個硬盤高很多，并且可以提供自動數據備份，提供良好的容錯能力。

RAID級別，不同的RAID組合方式分為不同的RAID級別：

RAID 0：稱為Stripping條帶存儲技術，所有磁盤完全地并行讀，并行寫，是組建磁盤陣列最簡單的一種形式，只需要2塊以上的硬盤即可，成本低，可以提供整個磁盤的性能和吞吐量，但RAID 0沒有提供數據冗余和錯誤修復功能，因此單塊硬盤的損壞會導致所有的數據丟失。(RAID 0只是單純地提高磁盤容量和性能，沒有為數據提供可靠性保證，適用于對數據安全性要求不高的環境)

RAID 1：鏡像存儲，通過把兩塊磁盤中的一塊磁盤的數據鏡像到另一塊磁盤上， 實現數據冗余，在兩塊磁盤上產生互為備份的數據，其容量僅等于一塊磁盤的容量。當數據在寫入一塊磁盤時，會在另一塊閑置的磁盤上生產鏡像，在不影響性能情況下最大限度的保證系統的可靠性和可修復性;當原始數據繁忙時，可直接從鏡像拷貝中讀取數據(從兩塊硬盤中較快的一塊中讀出)，提高讀取性能。相反的，RAID 1的寫入速度較緩慢。RAID 1一般支持“熱交換”，即陣列中硬盤的移除或替換可以在系統運行狀態下進行，無須中斷退出系統。RAID 1是磁盤陣列中硬盤單位成本最高的，但它提供了很高的數據安全性、可靠性和可用性，當一塊硬盤失效時，系統可以自動切換到鏡像磁盤上讀寫，而不需要重組失效的數據。

RAID 0+1：也被稱為RAID 10，實際是將RAID 0和RAID 1結合的形式，在連續地以位或字節為單位分割數據并且并行讀/寫多個磁盤的同時，為每一塊磁盤做鏡像進行冗余。通過RAID 0+1的組合形式，數據除分布在多個盤上外，每個盤都有其物理鏡像盤，提供冗余能力，允許一個以下磁盤故障，而不影響數據可用性，并且有快速讀/寫能力。RAID 0+1至少需要4個硬盤在磁盤鏡像中建立帶區集。RAID 0+1技術在保證數據高可靠性的同時，也保證了數據讀/寫的高效性。

RAID 5：是一種存儲性能、數據安全和存儲成本兼顧的存儲解決方案。RAID 5可以理解為是RAID 0和RAID 1的折衷方案，RAID 5至少需要三塊硬盤。RAID 5可以為系統提供數據安全保障，但保障程度要比鏡像低而磁盤空間利用率要比鏡像高。RAID 5具有和RAID 0相近似的數據讀取速度，只是多了一個奇偶校驗信息，寫入數據的速度比對單個磁盤進行寫入操作稍慢。同時由于多個數據對應一個奇偶校驗信息，RAID 5的磁盤空間利用率要比RAID 1高，存儲成本相對較低，是目前運用較多的一種解決方案。