行流程，MySQL體系結(jié)構(gòu))
源碼倉庫Gitee · GitHubMySQL的體系結(jié)構(gòu)可以清楚地看到 SQL 語句在 MySQL 的各個(gè)功能模塊中的執(zhí)行過程Server層包括連接層、查詢緩存、分析器、優(yōu)化器、執(zhí)行器等涵蓋MySQL的大多數(shù)核心服務(wù)功能以及所有的內(nèi)置函數(shù)如日期、時(shí)間、數(shù)學(xué)和加密函數(shù)等實(shí)現(xiàn)所有跨存儲(chǔ)引擎的功能比如存儲(chǔ)過程、觸發(fā)器、視圖等存儲(chǔ)引擎層負(fù)責(zé)數(shù)據(jù)的存儲(chǔ)和提取MySQL5.5.5版本開始默認(rèn)使用InnoDB即你執(zhí)行create table建表時(shí)不指定引擎類型默認(rèn)使用InnoDB連接器連接管理Connection Handling當(dāng)一個(gè)客戶端進(jìn)行連接服務(wù)端時(shí)會(huì)得到一個(gè)server處理線程每個(gè)連接的請(qǐng)求處理都是單線程的同時(shí)服務(wù)器會(huì)緩存這些線程所以當(dāng)一個(gè)新的連接來時(shí)就不需要?jiǎng)?chuàng)建和銷毀線程【MySQL5.5及其以上版本提供了一個(gè)支持線程池插件的接口】權(quán)限認(rèn)證Authentication當(dāng)客戶端連接服務(wù)端時(shí)服務(wù)端需要對(duì)連接進(jìn)行認(rèn)證即對(duì)username、host、password進(jìn)行認(rèn)證安全Securith當(dāng)客戶端成功連接上服務(wù)端時(shí)服務(wù)端會(huì)對(duì)每個(gè)連接查看它的系統(tǒng)權(quán)限清單【mysql show privileges \G】之后這個(gè)連接里面的權(quán)限判斷邏輯都將依賴于此時(shí)讀到的權(quán)限即一個(gè)用戶成功建立連接后即使對(duì)這個(gè)用戶的權(quán)限做了修改也不會(huì)影響到已經(jīng)存在連接的權(quán)限修改完后只有再新建的連接才會(huì)使用新的權(quán)限設(shè)置備注連接完成后如果沒有后續(xù)的操作這個(gè)連接就處于空閑狀態(tài)可以使用show processlist進(jìn)行查看當(dāng)Command列中出現(xiàn)Sleep時(shí)表示該連接是空閑狀態(tài)客戶端如果太長時(shí)間沒有動(dòng)靜連接器會(huì)自動(dòng)斷開連接這個(gè)時(shí)間由參數(shù)wait_timeout控制默認(rèn)值是8小時(shí)如果在連接被斷開后客戶端再次發(fā)起請(qǐng)求會(huì)收到一個(gè)錯(cuò)誤提醒Lost connection to MySQL server during query。這時(shí)候如果要繼續(xù)就需要重連然后再執(zhí)行請(qǐng)求數(shù)據(jù)庫里面的長連接成功后如果客戶端持續(xù)有請(qǐng)求則一直使用同一個(gè)連接短連接則是每次執(zhí)行完很少的幾次查詢就斷開連接下次查詢?cè)僦匦陆⒁粋€(gè)全部使用長連接后有時(shí)候MySQL占用內(nèi)存漲的很快這是因?yàn)镸ySQL在執(zhí)行過程中臨時(shí)使用的內(nèi)存是管理在連接對(duì)象中的這些資源在斷開時(shí)才會(huì)被釋放如果長連接累計(jì)下來可能導(dǎo)致內(nèi)存占用太大被系統(tǒng)強(qiáng)行殺掉OOM)從現(xiàn)象看就是MySQL異常重啟了解決方案1定期斷開長連接。使用一段時(shí)間或程序里面判斷執(zhí)行過一個(gè)占用內(nèi)存的大查詢后斷開連接之后要查詢?cè)僦剡B解決方案2MySQL版本如果是5.7及其以上可以在每次執(zhí)行一個(gè)大的操作后通過執(zhí)行mysql_reset_connection來重新初始化連接資源。這個(gè)過程不需要重連和做權(quán)限驗(yàn)證會(huì)將連接恢復(fù)到剛剛創(chuàng)建完時(shí)的狀態(tài)。分析器ParserMySQL分析器會(huì)創(chuàng)建一個(gè)內(nèi)部結(jié)構(gòu)解析樹MySQL的解析行為就像單趟編譯器一樣進(jìn)行詞法解析、語法解析、語義解析詞法解析MySQL對(duì)語句進(jìn)行識(shí)別里面的字符串分別是什么代表什么比如”select“是一個(gè)查詢語句把字符串”tableName識(shí)別為“表名 tableName把字符串”id“識(shí)別成”列id語法解析根據(jù)語法規(guī)則判斷輸入的SQL語句是否滿足MySQL語法比如“elect *from tableName這個(gè)會(huì)提示”You hava an error in your SQL syntax“的錯(cuò)誤提醒一般語法錯(cuò)誤會(huì)提示第一個(gè)出現(xiàn)錯(cuò)誤的位置所以要關(guān)注的是緊接”use near的內(nèi)容優(yōu)化器Optimizer當(dāng)解析樹完成后MySQL會(huì)進(jìn)行一系列的優(yōu)化操作比如選擇重寫查詢語句、讀表順序、索引選擇等你可以使用explain進(jìn)行查看細(xì)節(jié)【MySQL筆記3-- SQL分析】因此優(yōu)化器主要做下面的事情選擇最合適的索引選擇表掃還是走索引選擇表關(guān)聯(lián)順序優(yōu)化 where 子句排除管理中無用表決定 order by 和 group by 是否走索引嘗試使用 inner join 替換 outer join簡化子查詢決定結(jié)果緩存合并試圖緩沖器Caches緩沖器會(huì)緩存查詢的結(jié)果集當(dāng)進(jìn)行查詢解析前服務(wù)端會(huì)去緩存器查找如果改查詢命中緩存那就不需要進(jìn)行解析、優(yōu)化、執(zhí)行等等操作直接返回緩存結(jié)果集【以key-value保存執(zhí)行過的語句及查詢結(jié)果】下面是查詢緩存的問題如果對(duì)表進(jìn)行了更新操作該表的所有查詢緩存都會(huì)清空同時(shí)cache 的訪問由一個(gè)單一的全局鎖來控制這時(shí)候大量的查詢將被阻塞直至鎖釋放。所以不要簡單認(rèn)為設(shè)置 cache 必定會(huì)帶來性能提升。MySQL官方文檔顯示The query cache is deprecated as of MySQL 5.7.20, and is removed in MySQL 8.0.表示在MySQL5.7.20版本就不推薦使用在8.0版本就移除了緩沖器執(zhí)行器開始執(zhí)行時(shí)需要先判斷你有沒有這個(gè)表的執(zhí)行權(quán)限如果沒有返回沒有權(quán)限的錯(cuò)誤【同時(shí)對(duì)于命中查詢緩存會(huì)在查詢緩存返回結(jié)果時(shí)做權(quán)限驗(yàn)證查詢會(huì)在優(yōu)化器之前調(diào)用precheck驗(yàn)證權(quán)限】如果有權(quán)限打開表繼續(xù)執(zhí)行執(zhí)行器根據(jù)表的引擎定義去使用這個(gè)引擎提供的接口比如查詢語句select *from table where id1;中的id字段沒有索引那么執(zhí)行器的執(zhí)行流程是調(diào)用InnoDB引擎接口取這個(gè)表的第一行判斷id是不是1如果不是則跳過如果是則將這行存在結(jié)果集中調(diào)用引擎接口取”下一行“重復(fù)相同的判斷邏輯直到取到這個(gè)表的最后一行執(zhí)行器將上述遍歷過程中所有滿足條件的行組成的結(jié)果集返回給客戶端完整體系結(jié)構(gòu)圖管理工具和服務(wù)Services and utilities提供備份backup、恢復(fù)recovery、安全security、復(fù)制replication、集群cluster、分區(qū)partitioning、工作臺(tái)workbench功能SQL接口接受用戶的SQL命令返回用戶需要查詢的結(jié)果比如select from調(diào)用了SQL Interface;是在MySQL客戶端和服務(wù)端之間進(jìn)行服務(wù)的工具SQL接口組件包括了數(shù)據(jù)處理語言【Data Manipulation Language (DML)】、數(shù)據(jù)定義語言【Data Definition Language(DDL)】存儲(chǔ)過程、視圖、觸發(fā)器等等存儲(chǔ)引擎MyISAMMySQL5.1及其之前版本默認(rèn)的存儲(chǔ)引擎該存儲(chǔ)引擎支持全文索引基于分詞創(chuàng)建的索引支持復(fù)雜的查詢、壓縮、空間函數(shù)等但不支持事務(wù)和行級(jí)鎖而且崩潰后無法安全恢復(fù)對(duì)于只讀的數(shù)據(jù)或表比較小、可以忍受修復(fù)操作則可以繼續(xù)使用MyISAMMyISAM會(huì)將表存儲(chǔ)在兩個(gè)文件中數(shù)據(jù)文件.MYD為擴(kuò)展名和索引文件.MYI為擴(kuò)展名)MyISAM支持表鎖即對(duì)整張表進(jìn)行加鎖讀取時(shí)會(huì)對(duì)需要讀到的所有表加共享鎖寫入時(shí)對(duì)表加排他鎖。但是在表有讀取查詢的同時(shí)也可以往表插入新的記錄并發(fā)插入CONCURRENT INSERT)使用了MyISAM存儲(chǔ)引擎的表MySQL可以手工或自動(dòng)執(zhí)行檢查check table mytable和修復(fù)repair table mytable)操作但執(zhí)行表的修復(fù)可以導(dǎo)致一些數(shù)據(jù)丟失并且修復(fù)操作是非常慢的對(duì)于BLOB和TEXT等長字段可以基于其前500個(gè)字符創(chuàng)建索引創(chuàng)建MyISAM表的時(shí)候如果指定了DELAY_KEY_WRITE(延遲更新索引鍵選項(xiàng)在每次修改執(zhí)行完時(shí)不會(huì)立刻將修改的索引數(shù)據(jù)寫入磁盤而是會(huì)寫到內(nèi)存的鍵緩沖區(qū)in-memory key buffer中只有在清理鍵緩沖區(qū)或關(guān)閉表時(shí)才將對(duì)應(yīng)的索引塊寫入到磁盤。這種方式大大的提升寫入性能但是在數(shù)據(jù)庫或主機(jī)崩潰時(shí)會(huì)造成索引損壞需要進(jìn)行修復(fù)操作。如果表在創(chuàng)建并導(dǎo)入數(shù)據(jù)后不會(huì)再進(jìn)行修改操作可以使用MyISAM壓縮表使用myisampack對(duì)MyISAM表進(jìn)行壓縮也叫打包pack壓縮表是不能進(jìn)行修改的除非先將表解除壓縮修改數(shù)據(jù)然后再次壓縮壓縮表可以極大的減少磁盤空間占用和磁盤I/O從而 提升了查詢性能壓縮表支持索引但索引是只讀的InnoDBMySQL默認(rèn)的事務(wù)型引擎用來處理大量的短期short-lived事務(wù)短期事務(wù)大部分情況是正常提交的很少會(huì)被回滾。InnoDB的性能和自動(dòng)崩潰恢復(fù)特性使得它在非事務(wù)型存儲(chǔ)的需求中也很流行。MySQL5.1新的InnoDB plugin支持一些新特性比如利用排序創(chuàng)建索引、刪除或增加索引時(shí)不需要復(fù)制全表數(shù)據(jù)、新的支持壓縮的存儲(chǔ)格式、新的大型列值如BLOB的存儲(chǔ)方式、以及文件格式管理等。InnoDB采用MVCC來支持高并發(fā)并且實(shí)現(xiàn)了四個(gè)標(biāo)準(zhǔn)的隔離級(jí)別。其默認(rèn)級(jí)別是repeatable read可重復(fù)讀并且通過間隙鎖next-key-locking)策略防止幻讀的出現(xiàn)。間隙鎖使得InnoDB不僅僅鎖定查詢?cè)O(shè)計(jì)的行還會(huì)對(duì)索引中的間隙進(jìn)行鎖定防止幻影行的插入InnoDB表是基于聚簇索引建立的聚簇索引對(duì)主鍵查詢有很高的性能InnoDB的存儲(chǔ)格式是平臺(tái)獨(dú)立的也就是說可以將數(shù)據(jù)和索引文件從Intel平臺(tái)復(fù)制到PowerPc等其他平臺(tái)InnoDB從磁盤讀取數(shù)據(jù)時(shí)采用了可預(yù)測(cè)性預(yù)讀能夠自動(dòng)在內(nèi)存中創(chuàng)建hash索引以加速讀操作的自適應(yīng)哈希索引能夠加速插入操作的插入緩沖區(qū)等InnoDB通過一些機(jī)制和工具支持真正的熱備份MySQL的其他存儲(chǔ)引擎不支持熱備份要獲取一致性視圖需要停止對(duì)所有表的寫入而在讀寫混合場(chǎng)景中停止寫入可以也意味著停止讀取Federated是訪問其他MySQL服務(wù)器的一個(gè)代理它會(huì)創(chuàng)建一個(gè)到遠(yuǎn)程MySQL服務(wù)器的客戶端連接并將查詢傳輸?shù)竭h(yuǎn)程服務(wù)器執(zhí)行然后提取或發(fā)送需要的數(shù)據(jù)。Archive只支持insert和select操作在MySQL5.1之前不支持索引Archive引擎會(huì)緩存所有的寫并利用zlib對(duì)插入的行進(jìn)行壓縮所以比MyISAM表的磁盤I/O更少但是每次select都需要進(jìn)行全表掃描Archive表適合日志和數(shù)據(jù)采集類應(yīng)用這類應(yīng)用做數(shù)據(jù)分析時(shí)往往需要全表掃描Archive引擎支持行級(jí)鎖和專用的緩沖區(qū)所以支持實(shí)現(xiàn)高并發(fā)的插入。在一個(gè)查詢開始直到返回表中存在的所有行數(shù)之前Archive引擎會(huì)阻止其他的select執(zhí)行以實(shí)現(xiàn)一致性讀。另外也實(shí)現(xiàn)了批量插入在完成之前對(duì)讀操作也是不可見的Merge是MyISAM引擎的一個(gè)變種Merge表是由多個(gè)MyISAM表合并而來的虛擬表但是將分區(qū)功能引入后該引擎已經(jīng)被放棄Memory如果需要快速地訪問數(shù)據(jù)并且這些數(shù)據(jù)不會(huì)被修改重啟以后丟失也沒關(guān)系那么使用Memory表是非常有用的。Memory表所有的數(shù)據(jù)都保存到內(nèi)存中不需要進(jìn)行磁盤I/O表的結(jié)構(gòu)在重啟以后會(huì)保留但數(shù)據(jù)會(huì)丟失使用場(chǎng)景比如用于查找或映射表將郵編和州名映射的表、緩存周期性聚合數(shù)據(jù)的結(jié)果、保存數(shù)據(jù)分析中產(chǎn)生的中間數(shù)據(jù)支持hash索引Memory表是表級(jí)鎖并發(fā)寫入的性能較低不支持BLOB或TEXT類型的列并且每行的長度是固定的所以即使指定了varchar列實(shí)際存儲(chǔ)時(shí)也會(huì)轉(zhuǎn)換成char這可以導(dǎo)致部分內(nèi)存的浪費(fèi)如果使用臨時(shí)表來保存中間結(jié)果該臨時(shí)表使用Memory引擎但中間結(jié)果太大超出了Memory表的限制或者含有BLOB或TEXT字段則臨時(shí)表會(huì)轉(zhuǎn)換成MyISAM表Cluster指的是MySQL服務(wù)器、NDB集群存儲(chǔ)引擎以及分布式的、share-nothing的、容災(zāi)的、高可用的NDB數(shù)據(jù)庫的組合被稱為MySQL集群Blackhole沒有實(shí)現(xiàn)任何的存儲(chǔ)機(jī)制所有插入的數(shù)據(jù)都會(huì)丟棄不做任何保存但服務(wù)器會(huì)記錄Blackhole表的日志所以可以用于復(fù)制數(shù)據(jù)到備庫或只是簡單地記錄到日志。這種特殊的存儲(chǔ)引擎可以在一些特殊的復(fù)制架構(gòu)和日志審核時(shí)發(fā)揮作用CSV可以將普通的CSV文件逗號(hào)分割值的文件作為MySQL表來處理但不支持索引。CSV引擎可以在數(shù)據(jù)庫運(yùn)行時(shí)拷入或拷出文件可以將excel等電子表格軟件中的數(shù)據(jù)存儲(chǔ)為CSV文件然后復(fù)制到MySQL數(shù)據(jù)目錄下就能在MySQL中打開使用。同樣如果將數(shù)據(jù)寫入到一個(gè)CSV引擎表其他的外部程序也能立即從表的數(shù)據(jù)文件中讀取CSV格式的數(shù)據(jù)。因此CSV引擎可以作為一種數(shù)據(jù)交換的機(jī)制Example該引擎作為MySQL源代碼中的示例說明了如何開始編寫新的存儲(chǔ)引擎它主要是開發(fā)人員感興趣的。存儲(chǔ)引擎是什么都不做的“存根”可以使用此引擎創(chuàng)建表但是不能將數(shù)據(jù)存儲(chǔ)在表中或從表中檢索數(shù)據(jù)。參考【網(wǎng)址需要翻墻】理解MySQL的體系結(jié)構(gòu)https://www.rathishkumar.in/2016/04/understanding-mysql-architecture.html高性能MySQLhttps://www.oreilly.com/library/view/high-performance-mysql/9781449332471/ch01.html#ftn.CHP-1-FN-2MySQL 5.7官方文檔《高性能MySQL》作者: 施瓦茨 (Baron Schwartz) / 扎伊采夫 (Peter Zaitsev) / 特卡琴科 (Vadim Tkachenko) 譯者: 寧海元 / 周振興 / 彭立勛 / 翟衛(wèi)祥,劉輝 MySQL筆記（5）-- SQL執(zhí)行流程，MySQL體系結(jié)構(gòu)
源碼倉庫Gitee · GitHubMySQL的體系結(jié)構(gòu)可以清楚地看到 SQL 語句在 MySQL 的各個(gè)功能模塊中的執(zhí)行過程Server層包括連接層、查詢緩存、分析器、優(yōu)化器、執(zhí)行器等涵蓋MySQL的大多數(shù)核心服務(wù)功能以及所有的內(nèi)置函數(shù)如日期、時(shí)間、數(shù)學(xué)和加密函數(shù)等實(shí)現(xiàn)所有跨存儲(chǔ)引擎的功能比如存儲(chǔ)過程、觸發(fā)器、視圖等存儲(chǔ)引擎層負(fù)責(zé)數(shù)據(jù)的存儲(chǔ)和提取MySQL5.5.5版本開始默認(rèn)使用InnoDB即你執(zhí)行create table建表時(shí)不指定引擎類型默認(rèn)使用InnoDB連接器連接管理Connection Handling當(dāng)一個(gè)客戶端進(jìn)行連接服務(wù)端時(shí)會(huì)得到一個(gè)server處理線程每個(gè)連接的請(qǐng)求處理都是單線程的同時(shí)服務(wù)器會(huì)緩存這些線程所以當(dāng)一個(gè)新的連接來時(shí)就不需要?jiǎng)?chuàng)建和銷毀線程【MySQL5.5及其以上版本提供了一個(gè)支持線程池插件的接口】權(quán)限認(rèn)證Authentication當(dāng)客戶端連接服務(wù)端時(shí)服務(wù)端需要對(duì)連接進(jìn)行認(rèn)證即對(duì)username、host、password進(jìn)行認(rèn)證安全Securith當(dāng)客戶端成功連接上服務(wù)端時(shí)服務(wù)端會(huì)對(duì)每個(gè)連接查看它的系統(tǒng)權(quán)限清單【mysql show privileges \G】之后這個(gè)連接里面的權(quán)限判斷邏輯都將依賴于此時(shí)讀到的權(quán)限即一個(gè)用戶成功建立連接后即使對(duì)這個(gè)用戶的權(quán)限做了修改也不會(huì)影響到已經(jīng)存在連接的權(quán)限修改完后只有再新建的連接才會(huì)使用新的權(quán)限設(shè)置備注連接完成后如果沒有后續(xù)的操作這個(gè)連接就處于空閑狀態(tài)可以使用show processlist進(jìn)行查看當(dāng)Command列中出現(xiàn)Sleep時(shí)表示該連接是空閑狀態(tài)客戶端如果太長時(shí)間沒有動(dòng)靜連接器會(huì)自動(dòng)斷開連接這個(gè)時(shí)間由參數(shù)wait_timeout控制默認(rèn)值是8小時(shí)如果在連接被斷開后客戶端再次發(fā)起請(qǐng)求會(huì)收到一個(gè)錯(cuò)誤提醒Lost connection to MySQL server during query。這時(shí)候如果要繼續(xù)就需要重連然后再執(zhí)行請(qǐng)求數(shù)據(jù)庫里面的長連接成功后如果客戶端持續(xù)有請(qǐng)求則一直使用同一個(gè)連接短連接則是每次執(zhí)行完很少的幾次查詢就斷開連接下次查詢?cè)僦匦陆⒁粋€(gè)全部使用長連接后有時(shí)候MySQL占用內(nèi)存漲的很快這是因?yàn)镸ySQL在執(zhí)行過程中臨時(shí)使用的內(nèi)存是管理在連接對(duì)象中的這些資源在斷開時(shí)才會(huì)被釋放如果長連接累計(jì)下來可能導(dǎo)致內(nèi)存占用太大被系統(tǒng)強(qiáng)行殺掉OOM)從現(xiàn)象看就是MySQL異常重啟了解決方案1定期斷開長連接。使用一段時(shí)間或程序里面判斷執(zhí)行過一個(gè)占用內(nèi)存的大查詢后斷開連接之后要查詢?cè)僦剡B解決方案2MySQL版本如果是5.7及其以上可以在每次執(zhí)行一個(gè)大的操作后通過執(zhí)行mysql_reset_connection來重新初始化連接資源。這個(gè)過程不需要重連和做權(quán)限驗(yàn)證會(huì)將連接恢復(fù)到剛剛創(chuàng)建完時(shí)的狀態(tài)。分析器ParserMySQL分析器會(huì)創(chuàng)建一個(gè)內(nèi)部結(jié)構(gòu)解析樹MySQL的解析行為就像單趟編譯器一樣進(jìn)行詞法解析、語法解析、語義解析詞法解析MySQL對(duì)語句進(jìn)行識(shí)別里面的字符串分別是什么代表什么比如”select“是一個(gè)查詢語句把字符串”tableName識(shí)別為“表名 tableName把字符串”id“識(shí)別成”列id語法解析根據(jù)語法規(guī)則判斷輸入的SQL語句是否滿足MySQL語法比如“elect *from tableName這個(gè)會(huì)提示”You hava an error in your SQL syntax“的錯(cuò)誤提醒一般語法錯(cuò)誤會(huì)提示第一個(gè)出現(xiàn)錯(cuò)誤的位置所以要關(guān)注的是緊接”use near的內(nèi)容優(yōu)化器Optimizer當(dāng)解析樹完成后MySQL會(huì)進(jìn)行一系列的優(yōu)化操作比如選擇重寫查詢語句、讀表順序、索引選擇等你可以使用explain進(jìn)行查看細(xì)節(jié)【MySQL筆記3-- SQL分析】因此優(yōu)化器主要做下面的事情選擇最合適的索引選擇表掃還是走索引選擇表關(guān)聯(lián)順序優(yōu)化 where 子句排除管理中無用表決定 order by 和 group by 是否走索引嘗試使用 inner join 替換 outer join簡化子查詢決定結(jié)果緩存合并試圖緩沖器Caches緩沖器會(huì)緩存查詢的結(jié)果集當(dāng)進(jìn)行查詢解析前服務(wù)端會(huì)去緩存器查找如果改查詢命中緩存那就不需要進(jìn)行解析、優(yōu)化、執(zhí)行等等操作直接返回緩存結(jié)果集【以key-value保存執(zhí)行過的語句及查詢結(jié)果】下面是查詢緩存的問題如果對(duì)表進(jìn)行了更新操作該表的所有查詢緩存都會(huì)清空同時(shí)cache 的訪問由一個(gè)單一的全局鎖來控制這時(shí)候大量的查詢將被阻塞直至鎖釋放。所以不要簡單認(rèn)為設(shè)置 cache 必定會(huì)帶來性能提升。MySQL官方文檔顯示The query cache is deprecated as of MySQL 5.7.20, and is removed in MySQL 8.0.表示在MySQL5.7.20版本就不推薦使用在8.0版本就移除了緩沖器執(zhí)行器開始執(zhí)行時(shí)需要先判斷你有沒有這個(gè)表的執(zhí)行權(quán)限如果沒有返回沒有權(quán)限的錯(cuò)誤【同時(shí)對(duì)于命中查詢緩存會(huì)在查詢緩存返回結(jié)果時(shí)做權(quán)限驗(yàn)證查詢會(huì)在優(yōu)化器之前調(diào)用precheck驗(yàn)證權(quán)限】如果有權(quán)限打開表繼續(xù)執(zhí)行執(zhí)行器根據(jù)表的引擎定義去使用這個(gè)引擎提供的接口比如查詢語句select *from table where id1;中的id字段沒有索引那么執(zhí)行器的執(zhí)行流程是調(diào)用InnoDB引擎接口取這個(gè)表的第一行判斷id是不是1如果不是則跳過如果是則將這行存在結(jié)果集中調(diào)用引擎接口取”下一行“重復(fù)相同的判斷邏輯直到取到這個(gè)表的最后一行執(zhí)行器將上述遍歷過程中所有滿足條件的行組成的結(jié)果集返回給客戶端完整體系結(jié)構(gòu)圖管理工具和服務(wù)Services and utilities提供備份backup、恢復(fù)recovery、安全security、復(fù)制replication、集群cluster、分區(qū)partitioning、工作臺(tái)workbench功能SQL接口接受用戶的SQL命令返回用戶需要查詢的結(jié)果比如select from調(diào)用了SQL Interface;是在MySQL客戶端和服務(wù)端之間進(jìn)行服務(wù)的工具SQL接口組件包括了數(shù)據(jù)處理語言【Data Manipulation Language (DML)】、數(shù)據(jù)定義語言【Data Definition Language(DDL)】存儲(chǔ)過程、視圖、觸發(fā)器等等存儲(chǔ)引擎MyISAMMySQL5.1及其之前版本默認(rèn)的存儲(chǔ)引擎該存儲(chǔ)引擎支持全文索引基于分詞創(chuàng)建的索引支持復(fù)雜的查詢、壓縮、空間函數(shù)等但不支持事務(wù)和行級(jí)鎖而且崩潰后無法安全恢復(fù)對(duì)于只讀的數(shù)據(jù)或表比較小、可以忍受修復(fù)操作則可以繼續(xù)使用MyISAMMyISAM會(huì)將表存儲(chǔ)在兩個(gè)文件中數(shù)據(jù)文件.MYD為擴(kuò)展名和索引文件.MYI為擴(kuò)展名)MyISAM支持表鎖即對(duì)整張表進(jìn)行加鎖讀取時(shí)會(huì)對(duì)需要讀到的所有表加共享鎖寫入時(shí)對(duì)表加排他鎖。但是在表有讀取查詢的同時(shí)也可以往表插入新的記錄并發(fā)插入CONCURRENT INSERT)使用了MyISAM存儲(chǔ)引擎的表MySQL可以手工或自動(dòng)執(zhí)行檢查check table mytable和修復(fù)repair table mytable)操作但執(zhí)行表的修復(fù)可以導(dǎo)致一些數(shù)據(jù)丟失并且修復(fù)操作是非常慢的對(duì)于BLOB和TEXT等長字段可以基于其前500個(gè)字符創(chuàng)建索引創(chuàng)建MyISAM表的時(shí)候如果指定了DELAY_KEY_WRITE(延遲更新索引鍵選項(xiàng)在每次修改執(zhí)行完時(shí)不會(huì)立刻將修改的索引數(shù)據(jù)寫入磁盤而是會(huì)寫到內(nèi)存的鍵緩沖區(qū)in-memory key buffer中只有在清理鍵緩沖區(qū)或關(guān)閉表時(shí)才將對(duì)應(yīng)的索引塊寫入到磁盤。這種方式大大的提升寫入性能但是在數(shù)據(jù)庫或主機(jī)崩潰時(shí)會(huì)造成索引損壞需要進(jìn)行修復(fù)操作。如果表在創(chuàng)建并導(dǎo)入數(shù)據(jù)后不會(huì)再進(jìn)行修改操作可以使用MyISAM壓縮表使用myisampack對(duì)MyISAM表進(jìn)行壓縮也叫打包pack壓縮表是不能進(jìn)行修改的除非先將表解除壓縮修改數(shù)據(jù)然后再次壓縮壓縮表可以極大的減少磁盤空間占用和磁盤I/O從而 提升了查詢性能壓縮表支持索引但索引是只讀的InnoDBMySQL默認(rèn)的事務(wù)型引擎用來處理大量的短期short-lived事務(wù)短期事務(wù)大部分情況是正常提交的很少會(huì)被回滾。InnoDB的性能和自動(dòng)崩潰恢復(fù)特性使得它在非事務(wù)型存儲(chǔ)的需求中也很流行。MySQL5.1新的InnoDB plugin支持一些新特性比如利用排序創(chuàng)建索引、刪除或增加索引時(shí)不需要復(fù)制全表數(shù)據(jù)、新的支持壓縮的存儲(chǔ)格式、新的大型列值如BLOB的存儲(chǔ)方式、以及文件格式管理等。InnoDB采用MVCC來支持高并發(fā)并且實(shí)現(xiàn)了四個(gè)標(biāo)準(zhǔn)的隔離級(jí)別。其默認(rèn)級(jí)別是repeatable read可重復(fù)讀并且通過間隙鎖next-key-locking)策略防止幻讀的出現(xiàn)。間隙鎖使得InnoDB不僅僅鎖定查詢?cè)O(shè)計(jì)的行還會(huì)對(duì)索引中的間隙進(jìn)行鎖定防止幻影行的插入InnoDB表是基于聚簇索引建立的聚簇索引對(duì)主鍵查詢有很高的性能InnoDB的存儲(chǔ)格式是平臺(tái)獨(dú)立的也就是說可以將數(shù)據(jù)和索引文件從Intel平臺(tái)復(fù)制到PowerPc等其他平臺(tái)InnoDB從磁盤讀取數(shù)據(jù)時(shí)采用了可預(yù)測(cè)性預(yù)讀能夠自動(dòng)在內(nèi)存中創(chuàng)建hash索引以加速讀操作的自適應(yīng)哈希索引能夠加速插入操作的插入緩沖區(qū)等InnoDB通過一些機(jī)制和工具支持真正的熱備份MySQL的其他存儲(chǔ)引擎不支持熱備份要獲取一致性視圖需要停止對(duì)所有表的寫入而在讀寫混合場(chǎng)景中停止寫入可以也意味著停止讀取Federated是訪問其他MySQL服務(wù)器的一個(gè)代理它會(huì)創(chuàng)建一個(gè)到遠(yuǎn)程MySQL服務(wù)器的客戶端連接并將查詢傳輸?shù)竭h(yuǎn)程服務(wù)器執(zhí)行然后提取或發(fā)送需要的數(shù)據(jù)。Archive只支持insert和select操作在MySQL5.1之前不支持索引Archive引擎會(huì)緩存所有的寫并利用zlib對(duì)插入的行進(jìn)行壓縮所以比MyISAM表的磁盤I/O更少但是每次select都需要進(jìn)行全表掃描Archive表適合日志和數(shù)據(jù)采集類應(yīng)用這類應(yīng)用做數(shù)據(jù)分析時(shí)往往需要全表掃描Archive引擎支持行級(jí)鎖和專用的緩沖區(qū)所以支持實(shí)現(xiàn)高并發(fā)的插入。在一個(gè)查詢開始直到返回表中存在的所有行數(shù)之前Archive引擎會(huì)阻止其他的select執(zhí)行以實(shí)現(xiàn)一致性讀。另外也實(shí)現(xiàn)了批量插入在完成之前對(duì)讀操作也是不可見的Merge是MyISAM引擎的一個(gè)變種Merge表是由多個(gè)MyISAM表合并而來的虛擬表但是將分區(qū)功能引入后該引擎已經(jīng)被放棄Memory如果需要快速地訪問數(shù)據(jù)并且這些數(shù)據(jù)不會(huì)被修改重啟以后丟失也沒關(guān)系那么使用Memory表是非常有用的。Memory表所有的數(shù)據(jù)都保存到內(nèi)存中不需要進(jìn)行磁盤I/O表的結(jié)構(gòu)在重啟以后會(huì)保留但數(shù)據(jù)會(huì)丟失使用場(chǎng)景比如用于查找或映射表將郵編和州名映射的表、緩存周期性聚合數(shù)據(jù)的結(jié)果、保存數(shù)據(jù)分析中產(chǎn)生的中間數(shù)據(jù)支持hash索引Memory表是表級(jí)鎖并發(fā)寫入的性能較低不支持BLOB或TEXT類型的列并且每行的長度是固定的所以即使指定了varchar列實(shí)際存儲(chǔ)時(shí)也會(huì)轉(zhuǎn)換成char這可以導(dǎo)致部分內(nèi)存的浪費(fèi)如果使用臨時(shí)表來保存中間結(jié)果該臨時(shí)表使用Memory引擎但中間結(jié)果太大超出了Memory表的限制或者含有BLOB或TEXT字段則臨時(shí)表會(huì)轉(zhuǎn)換成MyISAM表Cluster指的是MySQL服務(wù)器、NDB集群存儲(chǔ)引擎以及分布式的、share-nothing的、容災(zāi)的、高可用的NDB數(shù)據(jù)庫的組合被稱為MySQL集群Blackhole沒有實(shí)現(xiàn)任何的存儲(chǔ)機(jī)制所有插入的數(shù)據(jù)都會(huì)丟棄不做任何保存但服務(wù)器會(huì)記錄Blackhole表的日志所以可以用于復(fù)制數(shù)據(jù)到備庫或只是簡單地記錄到日志。這種特殊的存儲(chǔ)引擎可以在一些特殊的復(fù)制架構(gòu)和日志審核時(shí)發(fā)揮作用CSV可以將普通的CSV文件逗號(hào)分割值的文件作為MySQL表來處理但不支持索引。CSV引擎可以在數(shù)據(jù)庫運(yùn)行時(shí)拷入或拷出文件可以將excel等電子表格軟件中的數(shù)據(jù)存儲(chǔ)為CSV文件然后復(fù)制到MySQL數(shù)據(jù)目錄下就能在MySQL中打開使用。同樣如果將數(shù)據(jù)寫入到一個(gè)CSV引擎表其他的外部程序也能立即從表的數(shù)據(jù)文件中讀取CSV格式的數(shù)據(jù)。因此CSV引擎可以作為一種數(shù)據(jù)交換的機(jī)制Example該引擎作為MySQL源代碼中的示例說明了如何開始編寫新的存儲(chǔ)引擎它主要是開發(fā)人員感興趣的。存儲(chǔ)引擎是什么都不做的“存根”可以使用此引擎創(chuàng)建表但是不能將數(shù)據(jù)存儲(chǔ)在表中或從表中檢索數(shù)據(jù)。參考【網(wǎng)址需要翻墻】理解MySQL的體系結(jié)構(gòu)https://www.rathishkumar.in/2016/04/understanding-mysql-architecture.html高性能MySQLhttps://www.oreilly.com/library/view/high-performance-mysql/9781449332471/ch01.html#ftn.CHP-1-FN-2MySQL 5.7官方文檔《高性能MySQL》作者: 施瓦茨 (Baron Schwartz) / 扎伊采夫 (Peter Zaitsev) / 特卡琴科 (Vadim Tkachenko) 譯者: 寧海元 / 周振興 / 彭立勛 / 翟衛(wèi)祥,劉輝