天天看點

MySQL 原理性

1、MySQL的複制原理以及流程

(1)、複制基本原理流程

1. 主:binlog線程——記錄下所有改變了資料庫資料的語句,放進master上的binlog中;
2. 從:io線程——在使用start slave 之後,負責從master上拉取 binlog 内容,放進 自己的relay log中;
3. 從:sql執行線程——執行relay log中的語句;      

(2)、MySQL複制的線程有幾個及之間的關聯

MySQL 的複制是基于如下 3 個線程的互動( 多線程複制裡面應該是 4 類線程):
1. Master 上面的 binlog dump 線程,該線程負責将 master 的 binlog event 傳到slave;
2. Slave 上面的 IO 線程,該線程負責接收 Master 傳過來的 binlog,并寫入 relay log;
3. Slave 上面的 SQL 線程,該線程負責讀取 relay log 并執行;
4. 如果是多線程複制,無論是 5.6 庫級别的假多線程還是 MariaDB 或者 5.7 的真正的多線程複制, SQL 線程隻做 coordinator,隻負責把 relay log 中的 binlog讀出來然後交給 worker 線程, woker 線程負責具體 binlog event 的執行;      

(3)、MySQL如何保證複制過程中資料一緻性及減少資料同步延時

一緻性主要有以下幾個方面:

MySQL 原理性
1.在 MySQL5.5 以及之前, slave 的 SQL 線程執行的 relay log 的位置隻能儲存在檔案( relay-log.info)裡面,并且該檔案預設每執行 10000 次事務做一次同步到磁盤, 這意味着 slave 意外 crash 重新開機時, SQL 線程執行到的位置和資料庫的資料是不一緻的,将導緻複制報錯,如果不重搭複制,則有可能會
導緻資料不一緻。 MySQL 5.6 引入參數 relay_log_info_repository,将該參數設定為 TABLE 時, MySQL 将 SQL 線程執行到的位置存到mysql.slave_relay_log_info 表,這樣更新該表的位置和 SQL 線程執行的使用者事務綁定成一個事務,這樣 slave 意外當機後, slave 通過 innodb 的崩潰
恢複可以把 SQL 線程執行到的位置和使用者事務恢複到一緻性的狀态。
2. MySQL 5.6 引入 GTID 複制,每個 GTID 對應的事務在每個執行個體上面最多執行一次, 這極大地提高了複制的資料一緻性;
3. MySQL 5.5 引入半同步複制, 使用者安裝半同步複制插件并且開啟參數後,設定逾時時間,可保證在逾時時間内如果 binlog 不傳到 slave 上面,那麼使用者送出事務時不會傳回,直到逾時後切成異步複制,但是如果切成異步之前使用者線程送出時在 master 上面等待的時候,事務已經送出,該事務對 master
上面的其他 session 是可見的,如果這時 master 當機,那麼到 slave 上面該事務又不可見了,該問題直到 5.7 才解決;
4. MySQL 5.7 引入無損半同步複制,引入參 rpl_semi_sync_master_wait_point,該參數預設為 after_sync,指的是在切成半同步之前,事務不送出,而是接收到 slave 的 ACK 确認之後才送出該事務,從此,複制真正可以做到無損的了。
5.可以再說一下 5.7 的無損複制情況下, master 意外當機,重新開機後發現有 binlog沒傳到 slave 上面,這部分 binlog 怎麼辦???分 2 種情況讨論, 1 當機時已經切成異步了, 2 是當機時還沒切成異步??? 這個怎麼判斷當機時有沒有切成異步呢??? 分别怎麼處理???      
MySQL 原理性

延時性:

5.5 是單線程複制, 5.6 是多庫複制(對于單庫或者單表的并發操作是沒用的), 5.7 是真正意義的多線程複制,它的原理是基于 group commit, 隻要
master 上面的事務是 group commit 的,那 slave 上面也可以通過多個 worker線程去并發執行。 和 MairaDB10.0.0.5 引入多線程複制的原理基本一樣。      

(4)、工作遇到的複制 bug 的解決方法

5.6 的多庫複制有時候自己會停止,我們寫了一個腳本重新 start slave;待補充…      

2、MySQL中myisam與innodb的差別,至少5點

(1)、問5點不同

MySQL 原理性
1.InnoDB支援事物,而MyISAM不支援事物
2.InnoDB支援行級鎖,而MyISAM支援表級鎖
3.InnoDB支援MVCC, 而MyISAM不支援
4.InnoDB支援外鍵,而MyISAM不支援
5.InnoDB不支援全文索引,而MyISAM支援。
6.InnoDB不能通過直接拷貝表檔案的方法拷貝表到另外一台機器, myisam 支援
7.InnoDB表支援多種行格式, myisam 不支援
8.InnoDB是索引組織表, myisam 是堆表      
MySQL 原理性

(2)、innodb引擎的4大特性

1.插入緩沖(insert buffer)
2.二次寫(double write)
3.自适應哈希索引(ahi)
4.預讀(read ahead)      

(3)、各種不同 mysql 版本的Innodb的改進

MySQL 原理性
MySQL5.6 下 Innodb 引擎的主要改進:
( 1) online DDL
( 2) memcached NoSQL 接口
( 3) transportable tablespace( alter table discard/import tablespace)
( 4) MySQL 正常關閉時,可以 dump 出 buffer pool 的( space, page_no),重新開機時 reload,加快預熱速度
( 5) 索引和表的統計資訊持久化到 mysql.innodb_table_stats 和mysql.innodb_index_stats,可提供穩定的執行計劃
( 6) Compressed row format 支援壓縮表

MySQL 5.7 innodb 引擎主要改進
( 1) 修改 varchar 字段長度有時可以使用 online DDL
( 2) Buffer pool 支援線上改變大小
( 3) Buffer pool 支援導出部分比例
( 4) 支援建立 innodb tablespace,并可以在其中建立多張表
( 5) 磁盤臨時表采用 innodb 存儲,并且存儲在 innodb temp tablespace 裡面,以前是 myisam 存儲
( 6) 透明表空間壓縮功能      
MySQL 原理性

(4)、2者select  count(*)哪個更快,為什麼

myisam更快,因為myisam内部維護了一個計數器,可以直接調取。      

(5)、2 者的索引的實作方式

都是 B+樹索引, Innodb 是索引組織表, myisam 是堆表, 索引組織表和堆表的差別要熟悉      

3、MySQL中varchar與char的差別以及varchar(50)中的50代表的涵義

(1)、varchar與char的差別

在單位元組字元集下, char( N) 在内部存儲的時候總是定長, 而且沒有變長字段長度清單中。 在多位元組字元集下面, char(N)如果存儲的位元組數超過 N,那麼 char( N)将和 varchar( N)沒有差別。在多位元組字元集下面,如果存
儲的位元組數少于 N,那麼存儲 N 個位元組,後面補空格,補到 N 位元組長度。 都存儲變長的資料和變長字段長度清單。 varchar(N)無論是什麼位元組字元集,都是變長的,即都存儲變長資料和變長字段長度清單。      

(2)、varchar(50)中50的涵義

最多存放50個字元,varchar(50)和(200)存儲hello所占空間一樣,但後者在排序時會消耗更多記憶體,因為order by col采用fixed_length計算col長度(memory引擎也一樣)。在早期 MySQL 版本中, 50 代表位元組數,現在代表字元數。      

(3)、int(20)中20的涵義

是指顯示字元的長度
不影響内部存儲,隻是影響帶 zerofill 定義的 int 時,前面補多少個 0,易于報表展示      

(4)、mysql為什麼這麼設計

對大多數應用沒有意義,隻是規定一些工具用來顯示字元的個數;int(1)和int(20)存儲和計算均一樣;      

4、innodb的事務與日志的實作方式

(1)、有多少種日志

redo和undo      

(2)、日志的存放形式

redo:在頁修改的時候,先寫到 redo log buffer 裡面, 然後寫到 redo log 的檔案系統緩存裡面(fwrite),然後再同步到磁盤檔案( fsync)。
Undo:在 MySQL5.5 之前, undo 隻能存放在 ibdata*檔案裡面, 5.6 之後,可以通過設定 innodb_undo_tablespaces 參數把 undo log 存放在 ibdata*之外。      

(3)、事務是如何通過日志來實作的,說得越深入越好

基本流程如下:
因為事務在修改頁時,要先記 undo,在記 undo 之前要記 undo 的 redo, 然後修改資料頁,再記資料頁修改的 redo。 Redo(裡面包括 undo 的修改) 一定要比資料頁先持久化到磁盤。 當事務需要復原時,因為有 undo,可以把資料頁復原到前鏡像的
狀态,崩潰恢複時,如果 redo log 中事務沒有對應的 commit 記錄,那麼需要用 undo把該事務的修改復原到事務開始之前。 如果有 commit 記錄,就用 redo 前滾到該事務完成時并送出掉。      

5、MySQL binlog的幾種日志錄入格式以及差別

(1)、 各種日志格式的涵義

MySQL 原理性
1.Statement:每一條會修改資料的sql都會記錄在binlog中。
優點:不需要記錄每一行的變化,減少了binlog日志量,節約了IO,提高性能。(相比row能節約多少性能 與日志量,這個取決于應用的SQL情況,正常同一條記錄修改或者插入row格式所産生的日志量還小于Statement産生的日志量,
但是考慮到如果帶條 件的update操作,以及整表删除,alter表等操作,ROW格式會産生大量日志,是以在考慮是否使用ROW格式日志時應該跟據應用的實際情況,其所 産生的日志量會增加多少,以及帶來的IO性能問題。)
缺點:由于記錄的隻是執行語句,為了這些語句能在slave上正确運作,是以還必須記錄每條語句在執行的時候的 一些相關資訊,以保證所有語句能在slave得到和在master端執行時候相同 的結果。另外mysql 的複制,
像一些特定函數功能,slave可與master上要保持一緻會有很多相關問題(如sleep()函數, last_insert_id(),以及user-defined functions(udf)會出現問題).
使用以下函數的語句也無法被複制:
* LOAD_FILE()
* UUID()
* USER()
* FOUND_ROWS()
* SYSDATE() (除非啟動時啟用了 --sysdate-is-now 選項)
同時在INSERT ...SELECT 會産生比 RBR 更多的行級鎖

2.Row:不記錄sql語句上下文相關資訊,僅儲存哪條記錄被修改。
優點: binlog中可以不記錄執行的sql語句的上下文相關的資訊,僅需要記錄那一條記錄被修改成什麼了。是以rowlevel的日志内容會非常清楚的記錄下 每一行資料修改的細節。而且不會出現某些特定情況下的存儲過程,或function,以及trigger的調用和觸發無法被正确複制的問題
缺點:所有的執行的語句當記錄到日志中的時候,都将以每行記錄的修改來記錄,這樣可能會産生大量的日志内容,比 如一條update語句,修改多條記錄,則binlog中每一條修改都會有記錄,這樣造成binlog日志量會很大,特别是當執行alter table之類的語句的時候,
由于表結構修改,每條記錄都發生改變,那麼該表每一條記錄都會記錄到日志中。

3.Mixedlevel: 是以上兩種level的混合使用,一般的語句修改使用statment格式儲存binlog,如一些函數,statement無法完成主從複制的操作,則 采用row格式儲存binlog,MySQL會根據執行的每一條具體的sql語句來區分對待記錄的日志形式,
也就是在Statement和Row之間選擇 一種.新版本的MySQL中隊row level模式也被做了優化,并不是所有的修改都會以row level來記錄,像遇到表結構變更的時候就會以statement模式來記錄。至于update或者delete等修改資料的語句,還是會記錄所有行的變更。      
MySQL 原理性

 (2)、适用場景

在一條 SQL 操作了多行資料時, statement 更節省空間, row 更占用空間。但是 row模式更可靠。      

(3)、結合第一個問題,每一種日志格式在複制中的優劣

Statement 可能占用空間會相對小一些,傳送到 slave 的時間可能也短,但是沒有 row模式的可靠。 Row 模式在操作多行資料時更占用空間, 但是可靠。      

6、下MySQL資料庫cpu飙升到500%的話他怎麼處理?

當 cpu 飙升到 500%時,先用作業系統指令 top 指令觀察是不是 mysqld 占用導緻的,如果不是,找出占用高的程序,并進行相關處理。如果是 mysqld 造成的, show processlist,看看裡面跑的 session 情況,是不是有消耗資源的 sql 在運作。找出消耗高的 sql,
看看執行計劃是否準确, index 是否缺失,或者實在是資料量太大造成。一般來說,肯定要 kill 掉這些線程(同時觀察 cpu 使用率是否下降),等進行相應的調整(比如說加索引、改 sql、改記憶體參數)之後,再重新跑這些 SQL。也有可能是每個 sql 消耗資源并不多,但是突然之間,
有大量的 session 連進來導緻 cpu 飙升,這種情況就需要跟應用一起來分析為何連接配接數會激增,再做出相應的調整,比如說限制連接配接數等      

7、sql優化

(1)、explain出來的各種item的意義

MySQL 原理性
id:每個被獨立執行的操作的标志,表示對象被操作的順序。一般來說, id 值大,先被執行;如果 id 值相同,則順序從上到下。
select_type:查詢中每個 select 子句的類型。
table:名字,被操作的對象名稱,通常的表名(或者别名),但是也有其他格式。
partitions:比對的分區資訊。
type:join 類型。
possible_keys:列出可能會用到的索引。
key:實際用到的索引。
key_len:用到的索引鍵的平均長度,機關為位元組。
ref:表示本行被操作的對象的參照對象,可能是一個常量用 const 表示,也可能是其他表的
key 指向的對象,比如說驅動表的連接配接列。
rows:估計每次需要掃描的行數。
filtered:rows*filtered/100 表示該步驟最後得到的行數(估計值)。
extra:重要的補充資訊。      
MySQL 原理性

(2)、profile的意義以及使用場景

Profile 用來分析 sql 性能的消耗分布情況。當用 explain 無法解決慢 SQL 的時候,需要用profile 來對 sql 進行更細緻的分析,找出 sql 所花的時間大部分消耗在哪個部分,确認 sql的性能瓶頸。      

(3)、explain 中的索引問題

Explain 結果中,一般來說,要看到盡量用 index(type 為 const、 ref 等, key 列有值),避免使用全表掃描(type 顯式為 ALL)。比如說有 where 條件且選擇性不錯的列,需要建立索引。
被驅動表的連接配接列,也需要建立索引。被驅動表的連接配接列也可能會跟 where 條件列一起建立聯合索引。當有排序或者 group by 的需求時,也可以考慮建立索引來達到直接排序和彙總的需求。      

8、備份計劃,mysqldump以及xtranbackup的實作原理

(1)、備份計劃

視庫的大小來定,一般來說 100G 内的庫,可以考慮使用 mysqldump 來做,因為 mysqldump更加輕巧靈活,備份時間選在業務低峰期,可以每天進行都進行全量備份(mysqldump 備份
出來的檔案比較小,壓縮之後更小)。100G 以上的庫,可以考慮用 xtranbackup 來做,備份速度明顯要比 mysqldump 要快。一般是選擇一周一個全備,其餘每天進行增量備份,備份時間為業務低峰期。      

(2)、備份恢複時間

MySQL 原理性
實體備份恢複快,邏輯備份恢複慢
這裡跟機器,尤其是硬碟的速率有關系,以下列舉幾個僅供參考
20G的2分鐘(mysqldump)
80G的30分鐘(mysqldump)
111G的30分鐘(mysqldump)
288G的3小時(xtra)
3T的4小時(xtra)
邏輯導入時間一般是備份時間的5倍以上      
MySQL 原理性

(3)、備份恢複失敗如何處理

首先在恢複之前就應該做足準備工作,避免恢複的時候出錯。比如說備份之後的有效性檢查、權限檢查、空間檢查等。如果萬一報錯,再根據報錯的提示來進行相應的調整。      

(4)、mysqldump和xtrabackup實作原理

mysqldump

mysqldump 屬于邏輯備份。加入--single-transaction 選項可以進行一緻性備份。背景程序會先設定 session 的事務隔離級别為 RR(SET SESSION TRANSACTION ISOLATION LEVELREPEATABLE READ),
之後顯式開啟一個事務(START TRANSACTION /*!40100 WITH CONSISTENTSNAPSHOT */),這樣就保證了該事務裡讀到的資料都是事務事務時候的快照。之後再把表的資料讀取出來。 如果加上--master-data=1 的話,在剛開始的時候還會加一個資料庫的讀鎖
(FLUSH TABLES WITH READ LOCK),等開啟事務後,再記錄下資料庫此時 binlog 的位置(showmaster status),馬上解鎖,再讀取表的資料。等所有的資料都已經導完,就可以結束事務      

Xtrabackup:

xtrabackup 屬于實體備份,直接拷貝表空間檔案,同時不斷掃描産生的 redo 日志并儲存下來。最後完成 innodb 的備份後,會做一個 flush engine logs 的操作(老版本在有 bug,在5.6 上不做此操作會丢資料),確定所有的 redo log 都已經落盤(涉及到事務的兩階段送出
概念,因為 xtrabackup 并不拷貝 binlog,是以必須保證所有的 redo log 都落盤,否則可能會丢最後一組送出事務的資料)。這個時間點就是 innodb 完成備份的時間點,資料檔案雖然不是一緻性的,但是有這段時間的 redo 就可以讓資料檔案達到一緻性(恢複的時候做的事
情)。然後還需要 flush tables with read lock,把 myisam 等其他引擎的表給備份出來,備份完後解鎖。 這樣就做到了完美的熱備。      

9、mysqldump中備份出來的sql,如果我想sql檔案中,一行隻有一個insert....value()的話,怎麼辦?如果備份需要帶上master的複制點資訊怎麼辦?

MySQL 原理性
--skip-extended-insert
[root@helei-zhuanshu ~]# mysqldump -uroot -p helei --skip-extended-insert
Enter password:
  KEY `idx_c1` (`c1`),
  KEY `idx_c2` (`c2`)
) ENGINE=InnoDB AUTO_INCREMENT=51 DEFAULT CHARSET=latin1;
/*!40101 SET character_set_client = @saved_cs_client */;

--
-- Dumping data for table `helei`
--

LOCK TABLES `helei` WRITE;
/*!40000 ALTER TABLE `helei` DISABLE KEYS */;
INSERT INTO `helei` VALUES (1,32,37,38,'2016-10-18 06:19:24','susususususususususususu');
INSERT INTO `helei` VALUES (2,37,46,21,'2016-10-18 06:19:24','susususususu');
INSERT INTO `helei` VALUES (3,21,5,14,'2016-10-18 06:19:24','susu');      
MySQL 原理性

10、500台db,在最快時間之内重新開機

可以使用批量 ssh 工具 pssh 來對需要重新開機的機器執行重新開機指令。 也可以使用 salt(前提是用戶端有安裝 salt)或者 ansible( ansible 隻需要 ssh 免登通了就行)等多線程工具同時操作多台伺服器      

11、innodb的讀寫參數優化

(1)、讀取參數

MySQL 原理性
global buffer 以及 local buffer;

Global buffer:
Innodb_buffer_pool_size
innodb_log_buffer_size
innodb_additional_mem_pool_size

local buffer(下面的都是 server 層的 session 變量,不是 innodb 的):
Read_buffer_size
Join_buffer_size
Sort_buffer_size
Key_buffer_size
Binlog_cache_size      
MySQL 原理性

(2)、寫入參數

innodb_flush_log_at_trx_commit
innodb_buffer_pool_size
insert_buffer_size
innodb_double_write
innodb_write_io_thread
innodb_flush_method      

(3)、與IO相關的參數

MySQL 原理性
innodb_write_io_threads = 8
innodb_read_io_threads = 8
innodb_thread_concurrency = 0
Sync_binlog
Innodb_flush_log_at_trx_commit
Innodb_lru_scan_depth
Innodb_io_capacity
Innodb_io_capacity_max
innodb_log_buffer_size
innodb_max_dirty_pages_pct      
MySQL 原理性

(4)、緩存參數以及緩存的适用場景

MySQL 原理性
query cache/query_cache_type
并不是所有表都适合使用query cache。造成query cache失效的原因主要是相應的table發生了變更
第一個:讀操作多的話看看比例,簡單來說,如果是使用者清單表,或者說是資料比例比較固定,比如說商品清單,是可以打開的,前提是這些庫比較集中,資料庫中的實務比較小。
第二個:我們“行騙”的時候,比如說我們競标的時候壓測,把query cache打開,還是能收到qps激增的效果,當然前提示前端的連接配接池什麼的都配置一樣。大部分情況下如果寫入的居多,通路量并不多,那麼就不要打開,例如社交網站的,10%的人産生内容,其餘的90%都在消費,打開還是效果很好的,但是你如果是qq消息,或者聊天,那就很要命。
第三個:小網站或者沒有高并發的無所謂,高并發下,會看到 很多 qcache 鎖 等待,是以一般高并發下,不建議打開query cache      
MySQL 原理性

12、你是如何監控你們的資料庫的?你們的慢日志都是怎麼查詢的?

監控的工具有很多,例如zabbix,lepus,我這裡用的是lepus      

13、你是否做過主從一緻性校驗,如果有,怎麼做的,如果沒有,你打算怎麼做?

主從一緻性校驗有多種工具 例如checksum、mysqldiff、pt-table-checksum等      

14、表中有大字段X(例如:text類型),且字段X不會經常更新,以讀為為主,請問您是選擇拆成子表,還是繼續放一起?寫出您這樣選擇的理由

答:拆帶來的問題:連接配接消耗 + 存儲拆分空間;不拆可能帶來的問題:查詢性能;
如果能容忍拆分帶來的空間問題,拆的話最好和經常要查詢的表的主鍵在實體結構上放置在一起(分區) 順序IO,減少連接配接消耗,最後這是一個文本列再加上一個全文索引來盡量抵消連接配接消耗
如果能容忍不拆分帶來的查詢性能損失的話:上面的方案在某個極緻條件下肯定會出現問題,那麼不拆就是最好的選擇      

15、MySQL中InnoDB引擎的行鎖是通過加在什麼上完成(或稱實作)的?為什麼是這樣子的?

答:InnoDB是基于索引來完成行鎖
例: select * from tab_with_index where id = 1 for update;
for update 可以根據條件來完成行鎖鎖定,并且 id 是有索引鍵的列,
如果 id 不是索引鍵那麼InnoDB将完成表鎖,,并發将無從談起      

16、如何從mysqldump産生的全庫備份中隻恢複某一個庫、某一張表?

MySQL 原理性
全庫備份
[root@HE1 ~]# mysqldump -uroot -p --single-transaction -A --master-data=2 >dump.sql
隻還原erp庫的内容
[root@HE1 ~]# mysql -uroot -pMANAGER erp --one-database <dump.sql

可以看出這裡主要用到的參數是--one-database簡寫-o的參數,極大友善了我們的恢複靈活性
那麼如何從全庫備份中抽取某張表呢,全庫恢複,再恢複某張表小庫還可以,大庫就很麻煩了,那我們可以利用正規表達式來進行快速抽取,具體實作方法如下:
 
從全庫備份中抽取出t表的表結構
[root@HE1 ~]# sed -e'/./{H;$!d;}' -e 'x;/CREATE TABLE `t`/!d;q' dump.sql
 
DROP TABLE IF EXISTS`t`;
/*!40101 SET@saved_cs_client     =@@character_set_client */;
/*!40101 SETcharacter_set_client = utf8 */;
CREATE TABLE `t` (
  `id` int(10) NOT NULL AUTO_INCREMENT,
  `age` tinyint(4) NOT NULL DEFAULT '0',
  `name` varchar(30) NOT NULL DEFAULT '',
  PRIMARY KEY (`id`)
) ENGINE=InnoDBAUTO_INCREMENT=4 DEFAULT CHARSET=utf8;
/*!40101 SETcharacter_set_client = @saved_cs_client */;
 
從全庫備份中抽取出t表的内容
[root@HE1 ~]# grep'INSERT INTO `t`' dump.sql
INSERT INTO `t`VALUES (0,0,''),(1,0,'aa'),(2,0,'bbb'),(3,25,'helei');      
MySQL 原理性

17、在目前的工作中,你碰到到的最大的 mysql db 問題以及如何解決的?

可以選擇一個處理過的比較棘手的案例,或者選擇一個老師在課程上講過的死鎖的案例;沒有及時 Purge + insert 唯一索引造成的死鎖:具體案例可以參考學委筆記。      

18、請簡潔地描述下 MySQL 中 InnoDB 支援的四種事務隔離級别名稱,以及逐級之間的差別?

(1)、事物的4種隔離級别

讀未送出(read uncommitted)
讀已送出(read committed)
可重複讀(repeatable read)
串行(serializable)      

(2)、不同級别的現象

Read Uncommitted:可以讀取其他 session 未送出的髒資料。
Read Committed:允許不可重複讀取,但不允許髒讀取。送出後,其他會話可以看到送出的資料。
Repeatable Read: 禁止不可重複讀取和髒讀取、以及幻讀(innodb 獨有)。
Serializable: 事務隻能一個接着一個地執行,但不能并發執行。事務隔離級别最高。
不同的隔離級别有不同的現象,并有不同的鎖定/并發機制,隔離級别越高,資料庫的并發性就越差。      
MySQL 原理性

面試中其他的問題:

1、2 年 MySQL DBA 經驗

MySQL 原理性
其中許多有水分,一看到履歷自我介紹,說公司項目的時候,會寫上 linux 系統維護,mssql server 項目,或者 oracle data gard 項目,一般如果有這些的話,工作在 3 年到 4年的話,他的 2 年 MySQL DBA 管理經驗,是有很大的水分的。剛開始我跟上司說,這些
不用去面試了,肯定 mysql dba 經驗不足,上司說先面面看看,于是我就面了,結果很多人卡在基礎知識這一環節之上,比如:
( 1)有的卡在複制原理之上
( 2)有的卡在 binlog 的日志格式的種類和分别
( 3)有的卡在 innodb 事務與日志的實作上。
( 4)有的卡在 innodb 與 myisam 的索引實作方式的了解上面。
.........
個人覺得如果有過真正的 2 年 mysql 專職 dba 經驗,那麼肯定會在 mysql 的基本原理上有所研究,因為很多問題都不得不讓你去仔細研究各種細節,而自 己研究過的細節肯定會記憶深刻,别人問起一定會說的頭頭是道,起碼一些最基本的關鍵參數比如
Seconds_Behind_Master 為 60 這個值 60 的準确涵義,面試了 10+的 mysql dba,沒有一個說的準确,有的說不知道忘記了,有的說是差了 60 秒,有的說是與主上執行時間延後了 60 秒。      
MySQL 原理性

2 、對于履歷中寫有熟悉 mysql 高可用方案

我一般先問他現在管理的資料庫架構是什麼,如果他隻說出了主從,而沒有說任何 ha的方案,那麼我就可以判斷出他沒有實際的 ha 經驗。不過這時候也不能就是 斷定他不懂mysql 高可用,也許是沒有實際機會去使用,那麼我就要問 mmm 以及 mha 以及mm+keepalived 等的原理
實作方式以及它們之間的優 勢和不足了,一般這種情況下,能說出這個的基本沒有。mmm 那東西好像不靠譜,據說不穩定,但是有人在用的,我隻在虛拟機上面用過,和mysql-router 比較像,都是指定可寫的機器和隻讀機器。 MHA 的話一句話說不完,可以翻翻學委的筆記      

3 、對于履歷中寫有批量 MySQL 資料庫伺服器的管理經驗

這個如果他說有的話,我會先問他們現在實際線上的 mysql 資料庫數量有多少,分多少個節點組,最後問這些節點組上面的 slow log 是如何組合在一起來統計分析的。如果這些他都答對了,那麼我還有一問,就是現在手上有 600 台資料庫,新來的機器, Mysql 都
安裝好了,那麼你如 何在最快的時間裡面把這 600 台 mysql 資料庫的 mysqld 服務啟動起來。這個重點在于最快的時間,而能準确回答出清晰思路的隻有 2 個人。slow log 分析:可以通過一個管理伺服器定時去各台 MySQL 伺服器上面 mv 并且 cp slowlog,
然後分析入庫,頁面展示。最快的時間裡面啟動 600 台伺服器: 肯定是多線程。 可以用 pssh, ansible 等多線程批量管理伺服器的工具      

4 、對于有豐富的 SQL 優化的經驗

MySQL 原理性
首先問 mysql 中 sql 優化的思路,如果能準備說出來, ok,那麼我就開始問 explain的各種參數了,重點是 select_type, type, possible_key, ref,rows,extra 等參數的各種
值的含義,如果他都回答正确了,那麼我再問 file sort 的含義以及什麼時候會出現這個分析結果,如果這裡他也回答對了,那麼我就準備問 profile 分析了,如果這裡他也答對了,那麼我就會再問一個問 題,
那是曾經 tx 問我的讓我郁悶不已的問題,一個 6 億的表 a,一個 3 億的表 b,通過外間 tid 關聯,你如何最快的查詢出滿足條件的第 50000 到第 50200中的這 200 條資料記錄。
Explain 在上面的題目中有了,這裡就不說了。如何最快的查詢出滿足條件的第 50000 到第 50200 中的這 200 條資料記錄?這個我想不出來!
關于 explain 的各種參數,請參考: http://blog.csdn.net/mchdba/article/details/9190771      
MySQL 原理性

5、對于有豐富的資料庫設計經驗

MySQL 原理性
這個對于資料庫設計我真的沒有太多的經驗,我也就隻能問問最基礎的, mysql 中varchar(60) 60 是啥含義, int(30)中 30 是啥含義? 如果他都回答對了,那麼我就問 mysql中為什麼要這麼設計呢?
如果他還回答對了,我就繼續問 int(20)存儲的數字的上限和下限是多少?這個問題難道了全部的 mysql dba 的應聘者,不得不佩服提出這個問題的金總的睿智啊,因為這個問題回答正确了,
那麼他确實認認真真地研究了 mysql 的設計中關于字段類型的細節。至 于豐富的設計資料庫的經驗,不用着急,這不我上面還有更加厲害的 dba嗎,他會搞明白的,那就跟我無關了。
varchar(60)的 60 表示最多可以存儲 60 個字元。int(30)的 30 表示用戶端顯示這個字段的寬度。
為何這麼設計?說不清楚,請大家補充 。 int(20)的上限為 2147483647(signed)或者4294967295(unsigned)。      
MySQL 原理性

6 、關于 mysql 參數優化的經驗

MySQL 原理性
首先問他它們線上 mysql 資料庫是怎麼安裝的,如果說是 rpm 安裝的,那麼我就直接問調優參數了,如果是源碼安裝的,那麼我就要問編譯中的一些參數了,比如 my.cnf 以及存儲引擎以及字元類型等等。然後從以下幾個方面問起:
( 1) mysql 有哪些 global 記憶體參數,有哪些 local 記憶體參數。
Global:
innodb_buffer_pool_size/innodb_additional_mem_pool_size/innodb_log_buffer_size/key_buffer_size/query_cache_size/table_open_cache/table_definition_cache/thread_cache_size
Local:
read_buffer_size/read_rnd_buffer_size/sort_buffer_size/join_buffer_size/binlog_cache_size/tmp_table_size/thread_stack/bulk_insert_buffer_size

( 2) mysql 的寫入參數需要調整哪些?重要的幾個寫參數的幾個值得含義以及适用場景,
比如 innodb_flush_log_at_trx_commit 等。 (求補充)
sync_binlog 設定為 1,保證 binlog 的安全性。
innodb_flush_log_at_trx_commit:
0:事務送出時不将 redo log buffer 寫入磁盤(僅每秒進行 master thread 重新整理,安全
性最差,性能最好)
1:事務送出時将 redo log buffer 寫入磁盤(安全性最好,性能最差, 推薦生産使用)
2:事務送出時僅将 redo log buffer 寫入作業系統緩存(安全性和性能都居中,當 mysql當機但是作業系統不當機則不丢資料,如果作業系統當機,最多丢一秒資料)
innodb_io_capacity/innodb_io_capacity_max:看磁盤的性能來定。如果是 HDD 可以設定為 200-幾百不等。如果是 SSD,推薦為 4000 左右。 innodb_io_capacity_max 更大一些。
innodb_flush_method 設定為 O_DIRECT。

( 3) 讀取的話,那幾個全局的 pool 的值的設定,以及幾個 local 的 buffer 的設定。
Global:
innodb_buffer_pool_size:設定為可用記憶體的 50%-60%左右,如果不夠,再慢慢上調。
innodb_additional_mem_pool_size:采用預設值 8M 即可。
innodb_log_buffer_size:預設值 8M 即可。
key_buffer_size:myisam 表需要的 buffer size,選擇基本都用 innodb,是以采用預設的 8M 即可。
Local:
join_buffer_size: 當 sql 有 BNL 和 BKA 的時候,需要用的 buffer_size(plain index
scans, range index scans 的時候可能也會用到)。預設為 256k,建議設定為 16M-32M。
read_rnd_buffer_size:當使用 mrr 時,用到的 buffer。預設為 256k,建議設定為16-32M。
read_buffer_size:當順序掃描一個 myisam 表,需要用到這個 buffer。或者用來決定memory table 的大小。或者所有的 engine 類型做如下操作:order by 的時候用 temporaryfile、 SELECT INTO … OUTFILE 'filename' 、 For caching results of nested queries。預設為 128K,建議為 16M。
sort_buffer_size: sql 語句用來進行 sort 操作(order by,group by)的 buffer。如果 buffer 不夠,則需要建立 temporary file。如果在 show global status 中發現有大量的 Sort_merge_passes 值,則需要考慮調大 sort_buffer_size。預設為 256k,建議設定為 16-32M。
binlog_cache_size: 表示每個 session 中存放 transaction 的 binlog 的 cache size。預設 32K。一般使用預設值即可。如果有大事務,可以考慮調大。
thread_stack: 每個程序都需要有,預設為 256K,使用預設值即可。

( 4) 還有就是著名的 query cache 了,以及 query cache 的适用場景了,這裡有一個陷阱,
就是高并發的情況下,比如雙十一的時候, query cache 開還是不開,開了怎麼保證高并發,不開又有何别的考慮?建議關閉,上了性能反而更差。      
MySQL 原理性

7、關于熟悉 mysql 的鎖機制

gap 鎖, next-key 鎖,以及 innodb 的行鎖是怎麼實作的,以及 myisam 的鎖是怎麼實作的等
Innodb 的鎖的政策為 next-key 鎖,即 record lock+gap lock。是通過在 index 上加 lock 實作的,如果 index 為 unique index,則降級為 record lock,如果是普通 index,則為 next-key lock,如果沒有 index,則直接鎖住全表。 myisam 直接使用全表掃描。      

8、 關于熟悉 mysql 叢集的

我就問了 ndbd 的節點的啟動先後順序,再問配置參數中的記憶體配置幾個重要的參數,再問 sql 節點中執行一個 join 表的 select 語句的實作流程是怎麼走的? ok,能回答的也隻有一個。
關于 mysql 叢集入門資料,請參考: http://write.blog.csdn.net/postlist/1583151/all      

9、 關于有豐富的備份經驗的

MySQL 原理性
就問 mysqldump 中備份出來的 sql,如果我想 sql 檔案中,一行隻有一個 insert .... value()的話,怎麼辦?如果備份需要帶上 master 的複制點資訊怎麼辦?或者 xtrabackup 中如何
做到實時線上備份的?以及 xtrabackup 是如何做到帶上 master 的複制點的資訊的? 目前 xtrabackup 做增量備份的時候有何缺陷?能全部回答出來的沒有一個,不過沒有關系,隻要回答出 mysqldump 或者xtrabackup 其中一個的也可以。
1). --skip-extended-insert
2). --master-date=1
3). 因為 xtrabackup 是多線程,一個線程不停地在拷貝新産生的 redo 檔案,另外的線程去備份資料庫,當所有表空間備份完成的時候,它會執行 flush table with read lock 操作
鎖住所有表,然後執行 show master status; 接着執行 flush engine logs; 最後解鎖表。執行 show master status; 時就能擷取到 mster 的複制點資訊,執行 flush engine logs 強制把redo 檔案重新整理到磁盤。
4). xtrabackup 增量備份的缺陷不了解,線上上用 xtrabackup 備份沒有發現什麼缺陷。      
MySQL 原理性

10 、關于有豐富的線上恢複經驗的

就問你現線上上資料量有多大,如果是 100G,你用 mysqldump 出來要多久,然後 mysql進去又要多久,如果網際網路不允許延時的話,你又怎麼做到 恢複單張表的時候保證 nagios不報警。如果有人說 mysqldump 出來 1 個小時就 ok 了,那麼我就要問問他 db 伺服器是
啥配置了,如果他說 mysql 進去 50 分鐘搞定了,那麼我也要問問他 db 機器啥配置了,如果是普通的吊絲 pc server,那麼真實性,大家懂得。然後如果你用 xtrabackup 備份要多久,恢複要多久,大家都知道 copy-back 這一步要很久,那麼你有沒有辦法對這一塊優化。