天天看點

資料庫查詢語句優化,mysql優化,join語句優化附帶YYC松鼠短視訊系統詳細demo效果

資料庫查詢語句優化,資料庫結構優化,細節以及結果展示,

始于我們一個比較大的客戶他的并發較高使用者通路較多,造成CPU過于消耗然後得到了回報情況。

資料庫查詢語句優化,mysql優化,join語句優化附帶YYC松鼠短視訊系統詳細demo效果

首先是收到回報,并且客戶發來一段代碼。

這是回報來的查詢代碼,也就是有bug的代碼(去年研發系統比較急,優化沒做):

SELECT

`v`.`id`,

`v`.`title`,

`v`.`url`,

`v`.`img`,

`v`.`create_time`,

`v`.`uid`,

`v`.`state`,

`u`.`name`,

ifnull( u.head_img, 'static/image/head.png' ) head_img,

count( DISTINCT s1.id ) skr_count,

ifnull( s.skr, '0' ) skr,

ifnull( co.create_time, '0' ) collection,

ifnull( f.id, '0' ) follow,

count( DISTINCT c.id ) comment_count,

count( DISTINCT h.id ) view_count 

FROM

tp_video v

LEFT JOIN `tp_skr` `s` ON `v`.`id` = s.vid 

AND s.type = 0 

AND '25712' = s.uid

LEFT JOIN `tp_skr` `s1` ON `v`.`id` = s1.vid 

AND s1.type = 0

LEFT JOIN `tp_user` `u` ON `v`.`uid` = `u`.`id`

LEFT JOIN `tp_follow` `f` ON `v`.`uid` = f.follow_id 

AND f.uid = '25712'

LEFT JOIN `tp_collection` `co` ON `v`.`id` = co.vid 

AND co.uid = '25712'

LEFT JOIN `tp_view_history` `h` ON `v`.`id` = `h`.`vid`

LEFT JOIN `tp_comment` `c` ON `v`.`id` = c.vid 

AND c.pid = 0 

AND c.type = 0 

WHERE

`v`.`state` = 1 

GROUP BY

`v`.`id` 

ORDER BY

`create_time` DESC 

LIMIT 0,

20
           

ok 我們開始進入内部技術讨論環節

第一階:目前認為索引優化用處不是特别大,但是有一點作用。

資料庫查詢語句優化,mysql優化,join語句優化附帶YYC松鼠短視訊系統詳細demo效果
資料庫查詢語句優化,mysql優化,join語句優化附帶YYC松鼠短視訊系統詳細demo效果

第二階段:認為需要拆sql資料庫

資料庫查詢語句優化,mysql優化,join語句優化附帶YYC松鼠短視訊系統詳細demo效果
資料庫查詢語句優化,mysql優化,join語句優化附帶YYC松鼠短視訊系統詳細demo效果

第三階:開始質疑拆了是有用嗎?讨論拆了以後會好,讨論sql資料量越大越慢,主要是因為全表查詢。

資料庫查詢語句優化,mysql優化,join語句優化附帶YYC松鼠短視訊系統詳細demo效果
資料庫查詢語句優化,mysql優化,join語句優化附帶YYC松鼠短視訊系統詳細demo效果

第四階:用主鍵索引 然後再拆,再查詢

資料庫查詢語句優化,mysql優化,join語句優化附帶YYC松鼠短視訊系統詳細demo效果
資料庫查詢語句優化,mysql優化,join語句優化附帶YYC松鼠短視訊系統詳細demo效果

第五階:測試并且得出效果,ok,完整成果如下,更新至官方1.9.2版本,效果展示,速度超6666~

YYC松鼠短視訊系統1.9.2至此更新效果展示

資料庫查詢語句優化,mysql優化,join語句優化附帶YYC松鼠短視訊系統詳細demo效果

最終成果展示

//通過ID擷取已看視訊ID
            $vids = Db("view_history")->where(["uid" => $user['id']])->field("vid")->select();
            $ids = array_column($vids, "vid");;
            //通過已看視訊ID擷取未看視訊并通過釋出時間倒序排序
            //查詢20條視訊資料的ID
            $videos = Db("video")->page($page,20)->where(['state'=>1])->whereNotIn('id',$ids)->field("id")->select();
            $videoids = array_column($videos, "id");
            $list = Db("video v")
                ->whereIn("v.id", $videoids)
                ->join("skr s", " v.id=s.vid and s.type=0 and '" . $user['id'] . "'=s.uid", "left")
                ->join("skr s1",  "v.id=s1.vid and s1.type=0", "left")
                ->join("user u", "v.uid=u.id", "left")
                ->join("follow f","v.uid=f.follow_id and f.uid = '".$user['id']."'","left")//視訊釋出者ID等于被關注人ID并且關注使用者ID等于目前使用者ID
                ->join("collection co","v.id=co.vid and co.uid = '".$user['id']."'","left")//視訊ID等于收藏的視訊ID并且收藏的使用者ID為目前使用者ID
                ->join("view_history h", "v.id=h.vid", "left")
                ->join("comment c", "v.id=c.vid and c.pid=0 and c.type=0", "left")
                ->order("skr desc")
                ->group("v.id")
                ->field([
                    "v.id",//視訊ID
                "v.title",//視訊标題
                    "v.url",//視訊連結
                    "v.img",//視訊圖檔
                    "v.create_time",//視訊建立時間
                    "v.uid",//視訊對應使用者ID
                    "v.state",//視訊狀态
                    "u.name",//視訊釋出人名稱
                    "ifnull(u.head_img,'static/image/head.png') head_img",//使用者頭像
                    "count(distinct s1.id) skr_count",//點贊數
                    "ifnull(s.skr,'0') skr",//目前使用者是否點贊
                    "ifnull(co.create_time,'0') collection",//目前使用者是否收藏
                    "ifnull(f.id,'0') follow",//目前使用者是否關注
                    "count(distinct c.id) comment_count",//評論數
                    "count(distinct h.id) view_count",//播放次數
                ])
                ->select();

            return $list;