適讀人群 ：本書適合從事雲存儲方面工作的工程師或架構師，也適合想要學習和實現分布式對像存儲的讀者。
贈送價值的雲存儲專家視頻課程
掌握雲存儲理論，動手搭建分布式對像存儲架構
雲存儲已經是大家司空見慣的一種網絡服務了，比如大家常用的百度雲盤、美亞S3、微軟的OneDrive、蘋果公司的iCloud和谷歌的Google Cloud等。雲存儲背後的原理是怎樣的，又是如何實現的呢？
本書完全從雲存儲的需求出發講述對像存儲的原理，並且帶領讀者使用Go語言編程，循序漸進、從無到有地建立起一個分布式對像存儲的架構。也就是說，本書首先介紹為什麼要這麼做，然後解釋怎麼做。
本書適合雲存儲方面的研究者、工程師或架構師閱讀，也可以供對雲存儲技術感興趣的讀者參考。在讀完本書之後，你將較為深入地理解對像存儲服務，甚至能夠實現自己的對像存儲服務。
本書包括以下內容：
★ 對像存儲簡介；
★ 分布式繫統原理；
數數據服務；
★ 數據校驗和去重；
★ 數據冗餘和即時修復；
★ 斷點續傳；
★ 數據壓縮；
★ 數據維護。

本書從雲存儲的需求出發講述對像存儲的原理，循序漸進地建立起一個分布式對像存儲的架構，並且將軟件實現出來。全書共8章，分別涉及對像存儲簡介、可擴展分布式數據服務、數據校驗和去重、數據冗餘處理、斷點續傳、數據壓縮和數據維護等。本書選擇用來實現分布式對像存儲軟件的編程語言是當前流行的Go語言。
本書適合從事雲存儲方面工作的工程師或架構師，也適合想要學習和實現分布式對像存儲的讀者。

胡世傑，上海交通大學畢業，目前在七牛雲任職技術專家，是私有雲存儲服務的負責人。他是分布式對像存儲繫統專家，在該領域擁有多年的架構、開發和部署經驗，精通C、C++、Perl、Python、Ruby、Go等多種編程語言，熟悉ElasticSearch、RabbitMQ等開源軟件。除了自己寫作，他還致力於技術書籍的翻譯，是《JavaScript面向對像精要》《Python和HDF5大數據應用》《Python高性能編程》等圖書的譯者。

第1章 對像存儲簡介1

1.1和傳統網絡存儲的區別1

1.1.1數據的管理方式2

1.1.2訪問數據的方式2

1.1.3對像存儲的優勢3

1.2單機版對像存儲的架構4

1.2.1REST接口4

1.2.2對像PUT流程5

1.2.3對像GET流程5

1.3Go語言實現6

1.4功能測試10

1.5小結12

第2章 可擴展的分布式繫統15

2.1什麼是分布式繫統15

2.2接口和數據存儲分離的架構16

2.2.1REST接口17

2.2.2RabbitMQ消息設計18

2.2.3對像PUT流程19

2.2.4對像GET流程20

2.3Go語言實現21

2.3.1數據服務21

2.3.2接口服務23

2.3.3rabbitmq包34

2.4功能測試38

2.5小結41

第數據服務45

3.1數據45

3.1.1繫統數據45

3.1.2用戶自數據45

3.1.3散列值和散列函數46

3.2數據服務的架構47

3.2.1REST接口48

3.2.2ES接口51

3.2.3對像PUT流程54

3.2.4對像GET流程55

3.3Go語言實現55

3.3.1接口服務55

3.3.2es包63

3.4功能測試68

3.5小結74

第4章數據校驗和去重77

4.1何為去重77

4.1.1需要數據校驗的原因78

4.1.2實現數據校驗的方法79

4.2給數據服務加入緩存功能79

4.2.1數據服務的REST

接口80

4.2.2對像PUT流程80

4.3Go語言實現82

4.3.1接口服務82

4.3.2數據服務87

4.4功能測試98

4.5去重導致的性能問題101

4.6小結102

第5章數據冗餘和即時修復105

5.1數據冗餘的概念105

5.1.1數據丟失和數據

不可用105

5.1.2數據冗餘106

5.1.3對像存儲繫統的數據

冗餘策略107

5.2數據冗餘的實現108

5.2.1REST接口108

5.2.2對像PUT流程108

5.2.3對像GET流程109

5.3Go語言實現111

5.3.1接口服務111

5.3.2數據服務126

5.4功能測試131

5.5小結135

第6章斷點續傳139

6.1為什麼對像存儲需要支持

斷點續傳139

6.1.1斷點下載流程139

6.1.2斷點上傳流程140

6.1.3接口服務的REST

接口142

6.1.4數據服務的REST

接口144

6.2Go語言實現145

6.2.1接口服務145

6.2.2數據服務158

6.3功能測試160

6.4小結165

第7章數據壓縮169

7.1用gzip實現對像存儲和下載時的數據壓縮170

7.1.1存儲時的數據壓縮170

7.1.2下載時的數據壓縮171

7.1.3接口服務的REST

接口172

7.2Go語言實現172

7.2.1接口服務172

7.2.2數據服務174

7.3功能測試176

7.4小結180

第8章數據維護183

8.1對像存儲繫統的數據維護

工作183

8.1.1對像版本留存183

8.1.2數據定期檢查和

修復184

8.1.3數據服務的REST

接口185

8.2Go語言實現185

8.2.1刪數據185

8.2.2刪數據引用的

對像數據188

8.2.3對像數據的檢查和

修復191

8.3功能測試193

8.4小結202