前言
部分Oracle實戰攻略
第1章Oracle安裝實踐2
1.1正確安裝數據庫軟件2
1.1.1安裝過程中容易忽視的點2
1.1.2常見安裝問題的處理7
1.1.3集群安裝實踐9
1.2上線前的壓力測試19
1.2.1I/O測試19
1.2.2RDBMS層I/O測試21
1.2.3模擬應用程序層測試25
1.3本章小結30
第2章Oracle故障診斷31
2.1日常維護31
2.1.1TX鎖處理31
2.1.2高峰期謹慎編譯業務對像35
2.1.3數據誤刪恢復37
2.2數據庫連接故障診斷38
2.2.1數據庫連接緩慢44
2.2.2間接性連接報錯49
2.3數據庫日常案例精析52
2.3.1存儲鏈路引起的性能問題52
2.3.2操作繫統內存洩漏的案例56
2.3.3詳解log file sync等待62
2.3.410053跟蹤診斷69
2.4集群故障診斷75
2.4.1集群軟件權限修復75
2.4.2RAC節點驅逐分析77
2.4.3DRM特性引起的RAC節點宕機79
2.4.4row cache lock性能診斷85
2.5本章小結89
第3章數據庫遷移升級90
3.1如何選擇遷移方式91
3.2邏輯遷移升級91
3.2.1使用數據泵的注意事項92
3.2.2數據泵常用參數93
3.2.3參數使用案例93
3.3邏輯DataGuard滾動升級96
3.3.1生產端前期準備97
3.3.2備端前期準備98
3.3.3將邏輯DG升級至Oracle 12c99
3.3.4次主備切換102
3.3.5升級原生產庫103
3.3.6升級失敗回退措施104
3.4XTTS遷移升級技術104
3.4.1環境說明104
3.4.2源端環境準備105
3.4.3目標端環境準備114
3.4.4數據同步116
3.4.5正式遷移117
3.4.6遷移失敗回退122
3.4.7遷移備忘錄122
3.5OGG的遷移升級案例122
3.5.1源端環境準備123
3.5.2目標端環境準備128
3.5.3數據比對安裝配置130
3.5.4正式遷移前的準備134
3.5.5正式遷移138
3.5.6遷移失敗的回退措施140
3.6如何保證數據一致性140
3.7遷移前後如何保證性能146
3.7.1數據庫重放146
3.7.2SQL性能分析157
3.8本章小結163
第4章SQL性能優化164
4.1讀懂執行計劃164
4.1.1獲取執行計劃165
4.1.2讀懂執行計劃171
4.2收集統計信息176
4.3訪問路徑190
4.3.1全表掃描190
4.3.2ROWID掃描191
4.3.3索引掃描191
4.3.4索引範圍掃描192
4.3.5索引跳躍掃描192
4.3.6全索引掃描193
4.3.7快速全索引掃描195
4.4連接方式196
4.4.1嵌套循環連接196
4.4.2哈希連接198
4.4.3排序合並連接199
4.4.4笛卡兒連接201
4.5查詢轉換201
4.5.1視圖合並202
4.5.2謂詞推入203
4.5.3子查詢展開205
4.5.4物化視圖查詢重寫207
4.6異常SQL處理209
4.6.1定位問題SQL209
4.6.2SQL健康檢查210
4.6.3SQL PROFILE212
4.6.4SQL 計劃管理213
4.7SQL優化案例集216
4.7.1常用索引優化方法216
4.7.2隱式轉換無法使用索引220
4.7.3直方圖引起執行計劃偏差221
4.7.4驅動表選擇優化224
4.7.5聯合索引優化228
4.7.6謂詞推入優化231
4.7.7大型表格更新刪除優化237
4.7.8程序不足SQL來湊240
4.8本章小結244
第二部分MySQL實戰之旅
第5章MySQL安裝實踐246
5.1幾種常見的安裝方式246
5.1.1操作繫統基礎配置248
5.1.2RPM包安裝與介紹251
5.1.3二進制包安裝與介紹255
5.1.4源碼編譯安裝與介紹258
5.1.5安裝實踐263
5.2常用的連接方式277
5.2.1建立MySQL連接277
5.2.2簡化MySQL連接279
5.3數據庫繫統賬戶改密的幾種方法285
5.3.1兩階段認證285
5.3.2繫統賬戶密碼重置287
5.4SSL與RSA實踐291
5.4.1創建SSL、RSA證書和密鑰291
5.4.2配置加密連接294
5.5本章小結297
第6章MySQL備份與恢復技術298
6.1備份與恢復概述298
6.2企業級MEB物理備份與恢復299
6.2.1MEB軟件介紹299
6.2.2MEB備份與恢復示例301
6.3開源級PXB物理備份與恢復317
6.3.1PXB軟件介紹317
6.3.2PXB工作原理概述318
6.3.3PXB備份與恢復示例320
6.4MySQLDUMP邏輯備份與恢復330
6.4.1MySQLDUMP軟件介紹331
6.4.2SQL格式轉儲與加載332
6.4.3分隔文本格式轉儲與加載340
6.5MySQLPUMP邏輯備份與恢復343
6.5.1MySQLPUMP軟件介紹343
6.5.2MySQLPUMP並行處理344
6.5.3MySQLPUMP轉儲特定對像346
6.5.4MySQLPUMP壓縮轉儲347
6.6本章小結348
第7章MySQL遷移與升級技術349
7.1MySQL遷移概述349
7.2使用MEB實現零RPO遷移350
7.2.1MEB全量與增量遷移350
7.2.2MEB全量與復制遷移351
7.2.3遷移小結353
7.3使用PXB實現零RPO遷移354
7.3.1PXB全量與增量遷移354
7.3.2PXB全量與復制遷移356
7.3.3遷移小結357
7.4使用MySQLDUMP遷移357
7.4.1MySQLDUMP全量遷移357
7.4.2MySQLDUMP全量遷移與Binlog增量遷移359
7.4.3MySQLDUMP全量與復制遷移361
7.4.4遷移小結362
7.5使用MySQLPUMP遷移363
7.5.1MySQLPUMP全量遷移363
7.5.2MySQLPUMP全量與復制遷移366
7.5.3遷移小結367
7.6使用MyDumper遷移367
7.6.1安裝MyDumper軟件367
7.6.2MyDumper全量遷移368
7.6.3遷移小結372
7.7MySQL版本升級實戰373
7.7.1MySQL升級概述373
7.7.2確認升級路徑373
7.7.3升級前的準備工作373
7.7.4原地升級方式374
7.7.5邏輯升級方式377
7.8本章小結378
第8章MySQL經典復制架構379
8.1復制介紹379
8.1.1MySQL復制線程380
8.1.2MySQL復制版本兼容性382
8.2基於傳統模式部署復制382
8.3基於GTID模式部署復制388
8.3.1離線啟用GTID模式388
8.3.2在線設置GTID模式390
8.3.3GTID復制模式的限制394
8.4多源復制395
8.5SBR和RBR的特點398
8.5.1SBR的優勢與劣勢398
8.5.2RBR的優勢與劣勢399
8.6復制過濾規則400
8.7延遲復制406
8.8復制報錯處理流程407
8.9復制切換409
8.9.1復制拓撲手動切換409
8.9.2復制拓撲自動切換414
8.10優化復制延遲424
8.11本章小結428
第9章MySQL組復制實踐429
9.1組復制技術介紹429
9.1.1傳統復制429
9.1.2組復制430
9.2組復制要求和限制432
9.2.1組復制實例要求432
9.2.2組復制限制434
9.3部署單主模式組復制436
9.3.1跨主機部署MGR436
9.3.2同主機部署MGR445
9.4單主模式切換成多主模式447
9.5故障檢測與處理449
9.5.1檢測分區449
9.5.2丟失仲裁450
9.5.3解鎖分區451
9.5.4重啟新復制組452
9.6組復制調優453
9.6.1優化組復制恢復453
9.6.2微調組通信線程454
9.6.3消息壓縮454
9.6.4流量控制455
9.7本章小結457
第10章MySQL監控與可視化458
10.1部署Zabbix Server458
10.2部署Zabbix Agent2462
10.3創建自定義Keys464
10.4創建自定義項與觸發器476
10.5啟用Zabbix告警通知492
10.6創建Zabbix自定義模板494
10.7自定義資產發現規則496
10.8部署Grafana可視化軟件498
10.9定制MySQL監控大屏499
10.10本章小結510

為什麼要寫本書
不知不覺間，二十一世紀已過去了五分之一的時間。近二十年來，互聯網在全球範圍內蓬勃發展，帶動整個IT行業快速向前推進，如今已進入萬物互聯時代。Oracle、IBM、微軟等巨頭企業基本上壟斷了國內早期的數據庫市場，不過，隨著國力的強大及高等教育的普及，國內IT界已經湧現出了大量的專業人纔，Oracle繫的達夢DM、MySQL繫的巨杉、TiDB等國產數據庫紛紛登上歷史舞臺。用戶不再是被動接受，而是可以主動選型，這標志著國內數據庫市場正逐步進入百家爭鳴的時代。雖然各大開源類數據庫百花齊放，然而，在的DB-Engines全球數據庫排行榜上，Oracle和MySQL依然是世界上受歡迎的商業和開源類數據庫，而且領跑優勢還在繼續擴大。
Oracle在金融、電信、交通、醫療、制造業、能源等諸多領域的使用非常廣泛，其擁有完善的生態體繫，多樣化的數據庫選件，在高可用性、高性能、高安全性、高數據服務能力等方面都得到了用戶的廣泛認可。
而隨著互聯網的興起，MySQL在數據庫領域的地位也日益凸顯。隨著用戶群體規模的不斷擴大，MySQL已經逐漸滲透到通信、制造、金融、政府和能源等領域。在數字化轉型的進程中，企業級的商用數據庫Oracle、DB2不再是必選項，MySQL憑借開源、靈活和操作簡便等特性，獲得了國內外市場和用戶的青睞。
Oracle和MySQL在國內市場的占有率高達60%以上，因此國內需要大量具有綜合能力的數據庫管理人纔。市面上絕大多數的數據庫相關書籍和資料隻介紹了其中一類數據庫，且大多隻介紹基礎原理或隻闡述深奧的方法論，質量參差不齊，極少有同時涵蓋Oracle和MySQL這兩種數據庫的書籍。如果有這樣一本書，既能兼顧傳統的Oracle，又能順應當前的趨勢介紹MySQL，並能詳細講解這兩大數據庫的運維技巧及實踐，那麼對於很多公司的IT技術人員和DBA來說，該書將能提供很好的參考價值。
基於上述背景，作為第三方數據庫的專業運維團隊，我們有著運維數以千計生產環境的經驗，自然在創作這樣一本書方面具有極大的先天優勢。團隊多名核心人員多年來積累了上千篇高質量原創技術文章，經過不斷篩選和提煉，終將精華內容凝聚成書。
本書提供的建議全面且實用，為在復雜的核心生產環境中可靠且高效地運行Oracle或MySQL數據庫提供幫助。本書既有避免大家走彎路的實踐，也有實用的運維技巧。書中不會直接講解深奧的理論，而是以案例為載體，一切從實際出發，將晦澀的原理分解到一個個真實、生動的案例中，從現像到本質進行剖析，其中所展現的經驗、思路和方法具有極大的參考價值。
讀者對像
本書適用於Oracle、MySQL領域的初中級讀者，學習本書需要具備一定的關繫型數據庫基礎。本書雖然不會重點講述什麼是SGA、InnoDB，什麼是數據文件、日志文件等基本原理，但是會為讀者提供相關運維場景的實踐。閱讀本書，讀者可以快速掌握Oracle、MySQL運維核心的內容、實用的技巧，少走彎路，從而降低學習成本。本書的讀者對像大致可以劃分為以下幾類：
運維工程師
開發工程師
測試工程師
繫統工程師
集成工程師
實施工程師
安全工程師
數據庫管理員
數據庫架構師
解決方案工程師
如何閱讀本書
本書主要分為Oracle和MySQL兩大部分。部分介紹Oracle的日常運維，該部分由第1～4章構成，內容由淺入深地逐步展開。第1章主要介紹初的生產環境搭建，以及上線前的壓力測試，並有針對性地講解各環節的注意事項和實踐，幫助讀者構建出一套穩健的生產環境。第2章主要介紹上線後的日常運維及故障處理方案，通過由點到面的豐富案例，為讀者提供有效的解決方法和應對思路。第3章主要介紹數據庫的遷移升級，通過實際案例講解各種主流方法，從而應對不同的停機時間，以及遷移前後如何保證性能和數據一致性。第4章主要介紹SQL的優化技巧，比如如何運用20%的知識處理80%的SQL性能問題。第二部分介紹MySQL的日常運維，該部分由第5～10章構成。第5章主要是深入淺出地介紹MySQL常使用的幾種安裝方式，並有針對性地告訴讀者一些注意事項及實踐。第6章主要講解如何充分利用備份和恢復的各種手段，規避企業核心數據丟失的風險。此章重點介紹了XtraBackup、Mysqldump等幾款集功能、性能、可用性於一體的實用工具，以應對企業各種復雜需求。第7章主要講解基於跨地域機房數據中心搬遷、硬件設備迭代、業務爆發式增長下現有硬件資源不足等場景的底層數據遷移。本章會兼顧用戶停機窗口和成本，提供解決方案。第8章主要圍繞傳統模式和GTID模式講解復制拓撲部署的實踐及日常運維的生態建設，以及如何使用復制技術構建雙活或容災等高可用方案。第9章主要講解MySQL 5.7版本引入的支持多節點寫入的分布式高可用架構，此架構基本無復制延遲，並且能保證數據強一致性，支持動態橫向擴展以對讀寫業務進行負載均衡。第10章主要介紹Zabbix代理模式，可將功能強大且易於擴展的Zabbix代理批量自動化部署在要監控的目標上，以便主動監控本地資源和應用程序。後，結合Grafana等開源軟件，終實現對MySQL數據庫及其運行主