領先的實用技能——打造云計算工程師

科學的訓練模式——授人以漁而不只是作品臨摹

真實的項目驅動——行業知識與專業設計相呼應

便捷的學習體驗——傳統教材與二維碼革命性攜手

“互聯網+人工智能”時代，新技術的發展可謂是一日千里，云計算、大數據、物聯網、區塊鏈、虛擬現實、機器學習、深度學習等等，已經形成一波新的科技浪潮。以云計算為例，國內云計算市場的蛋糕正變得越來越誘人，以下列舉了2016年以來發生的部分大事。

1．中國聯通發布云計算策略，并同步發起成立“中國聯通沃云+云生態聯盟”，全面開啟云服務新時代。

2．內蒙古斥資500億元欲打造亞洲最大云計算數據中心。

3．騰訊云升級為平臺級戰略，旨在探索云上生態，實現全面開放，構建可信賴的云生態體系。

4．百度正式發布“云計算+大數據+人工智能”三位一體的云戰略。

5．亞馬遜AWS和北京光環新網科技股份有限公司聯合宣布：由光環新網負責運營的AWS中國（北京）區域在中國正式商用。

6. 來自Forrester的報告認為，AWS和OpenStack是公有云和私有云事實上的標準。

7．網易正式推出“網易云”。網易將先行投入數十億人民幣，發力云計算領域。

8．金山云重磅發布“大米”云主機，這是一款專為創業者而生的性能王云主機，采用自建11線BGP全覆蓋以及VPC私有網絡，全方位保障數據安全。

DT時代，企業對傳統IT架構的需求減弱，不少傳統IT企業的技術人員，面臨失業風險。全球最知名的職業社交平臺LinkedIn發布報告，最受雇主青睞的十大職業技能中“云計算”名列前茅。2016年，中國企業云服務整體市場規模超500億元，預計未來幾年仍將保持約30%的年復合增長率。未來5年，整個社會對云計算人才的需求缺口將高達130萬。從傳統的IT工程師轉型為云計算與大數據專家，已經成為一種趨勢。

基于云計算這樣的大環境，課工場（kgc.cn）的教研團隊幾年前開始策劃的“云計算工程師系列”教材應運而生，它旨在幫助讀者朋友快速成長為符合企業需求的、優秀的云計算工程師。這套教材是目前業界最全面、專業的云計算課程體系，能夠滿足企業對高級復合型人才的要求。參與本書編寫的院校老師還有吳振宇、楊智勇、胡文杰趙紅艷等。

課工場是北京大學下屬企業北京課工場教育科技有限公司推出的互聯網教育平臺，專注于互聯網企業各崗位人才的培養。平臺匯聚了數百位來自知名培訓機構、高校的頂級名師和互聯網企業的行業專家，面向大學生以及需要“充電”的在職人員，針對與互聯網相關的產品設計、開發、運維、推廣和運營等崗位，提供在線的直播和錄播課程，并通過遍及全國的幾十家線下服務中心提供現場面授以及多種形式的教學服務，并同步研發出版最新的課程教材。

除了教材之外，課工場還提供各種學習資源和支持，包括：

現場面授課程

在線直播課程

錄播視頻課程

授課PPT課件

案例素材下載

擴展資料提供

學習交流社區

QQ討論組（技術，就業，生活）

以上資源請訪問課工場網站www.kgc.cn。

本套教材特點

（1）科學的訓練模式

科學的課程體系。

創新的教學模式。

技能人脈，實現多方位就業。

隨需而變，支持終身學習。

（2）企業實戰項目驅動

覆蓋企業各項業務所需的IT技能。

幾十個實訓項目，快速積累一線實踐經驗。

（3）便捷的學習體驗

提供二維碼掃描，可以觀看相關視頻講解和擴展資料等知識服務。

課工場開辟教材配套版塊，提供素材下載、學習社區等豐富的在線學習資源。

讀者對象

（1）初學者：本套教材將幫助你快速進入云計算及運維開發行業，從零開始逐步成長為專業的云計算及運維開發工程師。

（2）初中級運維及運維開發者：本套教材將帶你進行全面、系統的云計算及運維開發學習，逐步成長為高級云計算及運維開發工程師。

前言
課程設計說明
第1章　OpenStack體驗 1
1.1　云計算介紹 2
1.1.1　紅帽OpenStack產品 2
1.1.2　安裝紅帽OpenStack環境 3
1.2　創建實例案例 7
1.2.1　準備工作 8
1.2.2　在Horizon中啟動實例 10
1.2.3　擴展應用 23
本章總結 26
本章作業 26
第2章　OpenStack搭建企業
私有云 27
2.1　環境準備 28
2.2　基礎配置 32
2.2.1　安裝配置NTP服務 32
2.2.2　配置OpenStack yum庫 33
2.2.3　MySQL數據庫 34
2.2.4　NoSQL數據庫 37
2.2.5　安裝配置Messaging server-
RabbitMQ 37
2.2.6　Memcached 39
2.3　認證服務 39
2.3.1　認證服務概覽 39
2.3.2　安裝配置 40
2.3.3　創建服務實體和API端點 42
2.3.4　創建域、項目、用戶和角色 44
2.3.5　驗證操作 47
2.3.6　創建OpenStack客戶端環境腳本 48
2.4　鏡像服務 49
2.4.1　鏡像服務概覽 49
2.4.2　安裝和配置 50
2.4.3　創建鏡像服務的 API 端點 51
2.4.4　安裝軟件包 52
2.4.5　驗證操作 53
2.5　計算服務 55
2.5.1　計算服務概覽 55
2.5.2　安裝并配置控制節點 56
2.5.3　安裝和配置計算節點 60
2.5.4　驗證操作 62
2.6　Networking 服務 63
2.6.1　網絡服務概覽 63
2.6.2　安裝并配置控制節點 64
2.6.3　安裝和配置計算節點 70
2.6.4　驗證操作 72
2.7　Dashboard 74
2.8　啟動一個實例 76
本章總結 83
第3章　云存儲 85
3.1　塊存儲與文件存儲 86
3.2　對象存儲 87
3.3　對象存儲Swift 88
3.3.1　Swift數據模型 88
3.3.2　Swift組件 89
3.3.3　Swift的數據一致性 91
3.3.4　Swift存儲策略 91
3.3.5　對象存儲Swift補充 92
3.4　塊存儲服務Cinder 94
3.4.1　塊存儲服務概覽 94
3.4.2　塊存儲服務組件 94
3.4.3　Cinder架構解釋 95
3.4.4　Cinder支持存儲類型 96
本章總結 96
第4章　Fuel安裝OpenStack 97
4.1　Fuel概述 98
4.2　虛擬環境設置 100
4.3　部署OpenStack環境 105
本章總結 116
第5章　大數據Hadoop 117
5.1　什么是大數據 118
5.2　Hadoop體系結構 119
5.3　安裝Hadoop運行環境 121
5.3.1　在Linux中配置Hadoop運行環境 121
5.3.2　Hadoop完全分布式安裝 124
5.3.3　運行Hadoop的WordCount程序 130
5.4　HDFS體系結構 132
5.4.1　基本概念 133
5.4.2　Master/Slave架構 136
5.4.3　HDFS的Web界面 136
5.4.4　HDFS的命令行操作 138
5.5　MapReduce基礎 141
5.5.1　MapReduce概述 142
5.5.2　MapReduce架構設計 142
5.5.3　MapReduce編程模型 143
5.6　下一代MapReduce框架
YARN 145
5.6.1　YARN架構 145
5.6.2　YARN配置文件 146
5.6.3　YARN作業執行流程 147
5.6.4　YARN優勢 148
本章總結 148
本章作業 149
第6章　HBase數據庫 151
6.1　HBase基礎 152
6.1.1　HBase簡介 152
6.1.2　HBase體系結構 153
6.1.3　HBase數據模型 155
6.1.4　HBase的安裝 158
6.2　HBase Shell操作 165
6.3　MapReduce與HBase 172
6.4　Hive和Spark 174
6.4.1　Hive 174
6.4.2　Spark 175
本章總結 176
本章作業 176
第7章　部署CDH環境 177
7.1　CDH概述 178
7.2　案例環境 178
7.2.1　準備工作 179
7.2.2　安裝數據庫 182
7.2.3　安裝CDH 183
7.2.4　安裝配置CDH集群 185
7.2.5　配置Kafka 190
本章總結 192
第8章　云計算數據中心與亞馬遜
AWS 193
8.1　體系結構簡介 194
8.2　云計算數據中心特點 195
8.3　網絡應用架構 196
8.4　能源利用 199
8.5　自動化管理 201
8.6　容災系統 201
8.6.1　容災概述 202
8.6.2　容災技術 202
8.7　亞馬遜AWS 203
本章總結 205

1. 云平臺通信技術應用 [主編　王浩　王偉旗]
2. 云計算與網絡安全 [主編　肖睿　徐文義]
3. 云計算技術實訓教程 [主編 周躍南 蔡學軍]
4. 走進云計算：Windows Azure實戰手記 [朱明中（小朱） 著]