主頁 > 知識庫 > Mysql優(yōu)化神器(推薦)

Mysql優(yōu)化神器(推薦)

熱門標(biāo)簽:400電話鄭州申請 天智外呼系統(tǒng) 云南語音外呼系統(tǒng)平臺 福州呼叫中心外呼系統(tǒng)哪家好 地圖標(biāo)注被騙三百怎么辦 沃克斯電梯外呼線路圖 北京人工外呼系統(tǒng)價(jià)錢 常州電銷外呼系統(tǒng)一般多少錢 房產(chǎn)智能外呼系統(tǒng)品牌

前言

今天逛github時(shí),發(fā)現(xiàn)了這款對 SQL 進(jìn)行優(yōu)化和改寫的自動化工具sora。感覺挺不錯的,就下載學(xué)習(xí)了一下。這個工具支持的功能比較多,可以作為我們?nèi)粘i_發(fā)中的一款輔助工具,現(xiàn)在我就把它推薦給你們~~~

github傳送門:https://github.com/XiaoMi/soar

背景

在我們?nèi)粘i_發(fā)中,優(yōu)化SQL總是我們?nèi)粘i_發(fā)任務(wù)之一。例行 SQL 優(yōu)化,不僅可以提升程序性能,還能夠降低線上故障的概率。

目前常用的 SQL 優(yōu)化方式包括但不限于:業(yè)務(wù)層優(yōu)化、SQL邏輯優(yōu)化、索引優(yōu)化等。其中索引優(yōu)化通常通過調(diào)整索引或新增索引從而達(dá)到 SQL 優(yōu)化的目的。索引優(yōu)化往往可以在短時(shí)間內(nèi)產(chǎn)生非常巨大的效果。如果能夠?qū)⑺饕齼?yōu)化轉(zhuǎn)化成工具化、標(biāo)準(zhǔn)化的流程,減少人工介入的工作量,無疑會大大提高我們的工作效率。

SOAR(SQL Optimizer And Rewriter) 是一個對 SQL 進(jìn)行優(yōu)化和改寫的自動化工具。由小米人工智能與云平臺的數(shù)據(jù)庫團(tuán)隊(duì)開發(fā)與維護(hù)。

與業(yè)內(nèi)其他優(yōu)秀產(chǎn)品對比如下:

SOAR sqlcheck pt-query-advisor SQL Advisor Inception sqlautoreview
啟發(fā)式建議 ✔️ ✔️ ✔️ ✔️ ✔️
索引建議 ✔️ ✔️ ✔️
查詢重寫 ✔️
執(zhí)行計(jì)劃展示 ✔️
Profiling ✔️
Trace ✔️
SQL在線執(zhí)行 ✔️
數(shù)據(jù)備份 ✔️

從上圖可以看出,支持的功能豐富,其功能特點(diǎn)如下:

  • 跨平臺支持(支持 Linux, Mac 環(huán)境,Windows 環(huán)境理論上也支持,不過未全面測試)
  • 目前只支持 MySQL 語法族協(xié)議的 SQL 優(yōu)化
  • 支持基于啟發(fā)式算法的語句優(yōu)化
  • 支持復(fù)雜查詢的多列索引優(yōu)化(UPDATE, INSERT, DELETE, SELECT)
  • 支持 EXPLAIN 信息豐富解讀
  • 支持 SQL 指紋、壓縮和美化
  • 支持同一張表多條 ALTER 請求合并
  • 支持自定義規(guī)則的 SQL 改寫

就介紹這么多吧,既然是SQL優(yōu)化工具,光說是沒有用的,我們還是先用起來看看效果吧。

安裝

這里有兩種安裝方式,如下:

下載二進(jìn)制安裝包

$ wget https://github.com/XiaoMi/soar/releases/download/0.11.0/soar.linux-amd64 -O soar
chmod a+x soar

這里建議直接下載最新版,要不會有bug。

下載好的二進(jìn)制文件添加到環(huán)境變量中即可(不會的谷歌一下吧,這里就不講了)。

測試一下:

$ echo 'select * from user' | soar.darwin-amd64(根據(jù)你自己的二進(jìn)制文件名來輸入)
# Query: AC4262B5AF150CB5
 
★ ★ ★ ☆ ☆ 75分
 
```sql
SELECT
 *
FROM
 USER
```
 
## 最外層 SELECT 未指定 WHERE 條件
 
* **Item:** CLA.001
 
* **Severity:** L4
 
* **Content:** SELECT 語句沒有 WHERE 子句,可能檢查比預(yù)期更多的行(全表掃描)。對于 SELECT COUNT(\*) 類型的請求如果不要求精度,建議使用 SHOW TABLE STATUS 或 EXPLAIN 替代。
 
## 不建議使用 SELECT * 類型查詢
 
* **Item:** COL.001
 
* **Severity:** L1
 
* **Content:** 當(dāng)表結(jié)構(gòu)變更時(shí),使用 \* 通配符選擇所有列將導(dǎo)致查詢的含義和行為會發(fā)生更改,可能導(dǎo)致查詢返回更多的數(shù)據(jù)。

源碼安裝

依賴環(huán)境:

1. Go 1.10+
2. git

高級依賴(僅面向開發(fā)人員)

  • mysql 客戶端版本需要與容器中MySQL版本相同,避免出現(xiàn)由于認(rèn)證原因?qū)е聼o法連接問題
  • docker MySQL Server測試容器管理
  • govendor Go包管理
  • retool 依賴外部代碼質(zhì)量靜態(tài)檢查工具二進(jìn)制文件管理

生成二進(jìn)制文件:

go get -d github.com/XiaoMi/soar
cd ${GOPATH}/src/github.com/XiaoMi/soar make
生成的二進(jìn)制文件與上面一樣,直接放入環(huán)境變量即可,這里我沒有嘗試,靠你們自己踩坑了呦~~~

簡單使用

0. 前置準(zhǔn)備

準(zhǔn)備一個table,如下:

CREATE TABLE `users` (
 `id` bigint(20) unsigned NOT NULL AUTO_INCREMENT,
 `username` varchar(64) NOT NULL DEFAULT '',
 `nickname` varchar(255) DEFAULT '',
 `password` varchar(256) NOT NULL DEFAULT '',
 `salt` varchar(48) NOT NULL DEFAULT '',
 `avatar` varchar(128) DEFAULT NULL,
 `uptime` datetime DEFAULT NULL,
 PRIMARY KEY (`id`),
 UNIQUE KEY `username` (`username`)
) ENGINE=InnoDB AUTO_INCREMENT=11 DEFAULT CHARSET=utf8mb4

1. 直接輸入sql語句(不運(yùn)行)

$ echo "select * from users" | soar.darwin-amd64
$ # Query: 30AFCB1E1344BEBD
 
★ ★ ★ ☆ ☆ 75分
 
```sql
SELECT
 *
FROM
 users
```
## 最外層 SELECT 未指定 WHERE 條件
 
* **Item:** CLA.001
 
* **Severity:** L4
 
* **Content:** SELECT 語句沒有 WHERE 子句,可能檢查比預(yù)期更多的行(全表掃描)。對于 SELECT COUNT(\*) 類型的請求如果不要求精度,建議使用 SHOW TABLE STATUS 或 EXPLAIN 替代。
 
## 不建議使用 SELECT * 類型查詢
 
* **Item:** COL.001
 
* **Severity:** L1
 
* **Content:** 當(dāng)表結(jié)構(gòu)變更時(shí),使用 \* 通配符選擇所有列將導(dǎo)致查詢的含義和行為會發(fā)生更改,可能導(dǎo)致查詢返回更多的數(shù)據(jù)。

現(xiàn)在是完全根據(jù)SQL語句進(jìn)行分析的,因?yàn)闆]有連接到mysql??梢钥吹?,給出的報(bào)告也很詳細(xì),但是只是空殼子,僅憑SQL語句給出的分析并不是準(zhǔn)確的,所以我們開始接下來的應(yīng)用。

2. 連接mysql生成EXPLAIN分析報(bào)告

我們可以在配置文件中配置好mysql相關(guān)的配置,操作如下:

vi soar.yaml
# yaml format config file
online-dsn:
  addr:   127.0.0.1:3306
  schema:  asong
  user:   root
  password: root1997
  disable: false
 
test-dsn:
  addr:   127.0.0.1:3306
  schema:  asong
  user:   root
  password: root1997
  disable: false

配置好了,我們來實(shí)踐一下子吧:

$ echo "SELECT id,username,nickname,password,salt,avatar,uptime FROM users WHERE username = 'asong1111'" | soar.darwin-amd64 -test-dsn="root:root1997@127.0.0.1:3306/asong" -allow-online-as-test -log-output=soar.log
$ # Query: D12A420193AD1674
 
★ ★ ★ ★ ★ 100分
 
```sql
SELECT
 id, username, nickname, PASSWORD, salt, avatar, uptime
FROM
 users
WHERE
 username = 'asong1111'
```
 
## Explain信息
 
| id | select\_type | table | partitions | type | possible_keys | key | key\_len | ref | rows | filtered | scalability | Extra |
|---|---|---|---|---|---|---|---|---|---|---|---|---|
| 1 | SIMPLE | *users* | NULL | const | username | username | 258 | const | 1 | ☠️ **100.00%** | ☠️ **O(n)** | NULL |
 
### Explain信息解讀
 
#### SelectType信息解讀
 
* **SIMPLE**: 簡單SELECT(不使用UNION或子查詢等).
 
#### Type信息解讀
 
* **const**: const用于使用常數(shù)值比較PRIMARY KEY時(shí), 當(dāng)查詢的表僅有一行時(shí), 使用system. 例:SELECT * FROM tbl WHERE col = 1.

這回結(jié)果中多了EXPLAIN信息分析報(bào)告。這對于剛開始入門的小伙伴們是友好的,因?yàn)槲覀儗xplain解析的字段并不熟悉,有了它我們可以完美的分析SQL中的問題,是不是很棒。

3. 語法檢查

soar工具不僅僅可以進(jìn)行sql語句分析,還可以進(jìn)行對sql語法進(jìn)行檢查,找出其中的問題,來看個例子:

$ echo "selec * from users" | soar.darwin-amd64 -only-syntax-check
At SQL 1 : line 1 column 5 near "selec * from users" (total length 18)

這里select關(guān)鍵字少了一個t,運(yùn)行該指令幫助我們一下就定位了問題,當(dāng)我們的sql語句很長時(shí),就可以使用該指令來輔助我們檢查SQL語句是否正確。

4. SQL美化

我們?nèi)粘i_發(fā)時(shí),經(jīng)常會看其他人寫的代碼,因?yàn)樗讲灰粯?,所以有些SQL語句會寫的很亂,所以這個工具就派上用場了,我們可以把我們的SQL語句變得漂亮一些,更容易我們理解哦。

$ echo "SELECT id,username,nickname,password,salt,avatar,uptime FROM users WHERE username = 'asong1111'" | soar.darwin-amd64 -report-type=pretty
 
SELECT
 id, username, nickname, PASSWORD, salt, avatar, uptime
FROM
 users
WHERE
 username = 'asong1111';

這樣看起來是不是更直觀了呢~~。

結(jié)尾

因?yàn)槲乙膊攀莿偸褂眠@個工具,更多的玩法我還沒有發(fā)現(xiàn),以后補(bǔ)充。更多玩法可以自己研究一下,github傳送門:https://github.com/XiaoMi/soar。官方文檔其實(shí)很粗糙,更多方法解鎖還要靠自己研究,畢竟源碼已經(jīng)給我們了,對于學(xué)習(xí)go也有一定幫助,當(dāng)作一個小項(xiàng)目慢慢優(yōu)化豈不是更好呢~~。

到此這篇關(guān)于Mysql優(yōu)化神器(推薦)的文章就介紹到這了,更多相關(guān)Mysql優(yōu)化內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!

您可能感興趣的文章:
  • MySQL 性能優(yōu)化的最佳20多條經(jīng)驗(yàn)分享
  • MySQL Order by 語句用法與優(yōu)化詳解
  • MySQL優(yōu)化必須調(diào)整的10項(xiàng)配置
  • MySQL性能優(yōu)化之max_connections配置參數(shù)淺析
  • Mysql查詢最近一條記錄的sql語句(優(yōu)化篇)
  • 優(yōu)化Mysql數(shù)據(jù)庫的8個方法
  • MYSQL 優(yōu)化常用方法
  • MYSQL性能優(yōu)化分享(分庫分表)

標(biāo)簽:徐州 拉薩 黔東 沈陽 移動 珠海 鹽城 沈陽

巨人網(wǎng)絡(luò)通訊聲明:本文標(biāo)題《Mysql優(yōu)化神器(推薦)》,本文關(guān)鍵詞  Mysql,優(yōu)化,神器,推薦,Mysql,;如發(fā)現(xiàn)本文內(nèi)容存在版權(quán)問題,煩請?zhí)峁┫嚓P(guān)信息告之我們,我們將及時(shí)溝通與處理。本站內(nèi)容系統(tǒng)采集于網(wǎng)絡(luò),涉及言論、版權(quán)與本站無關(guān)。
  • 相關(guān)文章
  • 下面列出與本文章《Mysql優(yōu)化神器(推薦)》相關(guān)的同類信息!
  • 本頁收集關(guān)于Mysql優(yōu)化神器(推薦)的相關(guān)信息資訊供網(wǎng)民參考!
  • 推薦文章