免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務建站與企業(yè)官網運營的一線實戰(zhàn)洞察。

MySQL慢查詢日志全解析:從開啟配置到EXPLAIN優(yōu)化實戰(zhàn)

MySQL慢查詢日志全解析:從開啟配置到EXPLAIN優(yōu)化實戰(zhàn) 1. 慢查詢到底是什么為什么你必須關注它第一次接手線上MySQL數據庫的時候我最頭疼的事不是別人問MySQL怎么安裝而是深更半夜收到一條警報CPU飆升、接口超時、用戶開始罵人。翻遍代碼找不到問題最后打開慢查詢日志一眼就看見那條該死的SQL——三張表join一張表幾百萬行數據連索引都沒有一次查詢跑了幾十秒。從那以后我就養(yǎng)成了一個習慣接手任何數據庫第一件事就是確認慢查詢日志有沒有開沒開就先開上再談別的。很多人覺得慢查詢日志是事后諸葛亮出了問題才去翻。這個想法大錯特錯。慢查詢日志的價值恰恰在于提前發(fā)現(xiàn)——它不是在你已經故障的時候才出現(xiàn)而是每天都把那些執(zhí)行時間超標的SQL悄悄記下來等你有空的時候去翻一翻就能提前發(fā)現(xiàn)那些現(xiàn)在還不致命、但數據量一漲就會爆炸的隱患。我見過太多案例一個小查詢在十萬行數據時跑50毫秒沒人管等數據漲到一千萬行的時候變成5秒直接拖垮整個業(yè)務。慢查詢日志的意義就是讓你在50毫秒的時候就注意到它而不是等到5秒才被迫處理。那到底什么叫慢查詢MySQL的定義很簡單凡是執(zhí)行時間超過long_query_time閾值的SQL語句都會被記錄到慢查詢日志里。默認情況下這個閾值是10秒但說實話10秒這個值在互聯(lián)網業(yè)務里太奢侈了一般我建議線上業(yè)務改成1秒甚至更低。注意這里說的執(zhí)行時間不光是SQL本身執(zhí)行的時間還包括鎖等待、排序、回表這些環(huán)節(jié)的耗時也就是說一條SQL從開始執(zhí)行到返回結果的完整時間。慢查詢日志解決的核心問題就兩個第一知道哪些SQL慢第二知道它們慢在哪。前者靠日志記錄后者靠執(zhí)行計劃分析。這篇文章我會從怎么開啟慢查詢日志開始一步步講到怎么讀日志、怎么用工具聚合分析、怎么用EXPLAIN定位瓶頸最后分享一些我在實際運維中踩過的坑。無論是剛入門的DBA、后端開發(fā)還是自己折騰服務器的博主這篇文章都值得你從頭到尾看一遍因為慢查詢排查這活兒不管你用什么數據庫中間件、什么云平臺思路永遠是通用的。2. 開啟慢查詢日志的正確姿勢2.1 先看當前狀態(tài)——別急著改配置接手一臺MySQL服務器第一件事永遠都是先查現(xiàn)狀而不是直接改參數。我用得最多的就是這組命令SHOW VARIABLES LIKE slow_query_log; SHOW VARIABLES LIKE slow_query_log_file; SHOW VARIABLES LIKE long_query_time; SHOW VARIABLES LIKE log_queries_not_using_indexes;這四個參數是慢查詢日志的四大核心配置。slow_query_log是開關ON就是開著slow_query_log_file是日志文件路徑long_query_time是時間閾值單位是秒支持小數比如0.5就是500毫秒log_queries_not_using_indexes記錄那些沒走索引的查詢。這里有個細節(jié)很多人容易搞混long_query_time的判定從MySQL 5.1開始就是超過這個值才記錄等于不算是嚴格大于的關系。另外在MySQL 5.1.6之前還有個log_long_queries參數老版本用的現(xiàn)在早就廢了看到網上老教程里出現(xiàn)就別照著抄了。還有一個坑是slow_query_log_file指定的目錄。MySQL進程要有權限寫這個文件否則日志起不來或者寫一半卡住。常見的情況是用了默認路徑但那個分區(qū)磁盤滿了慢查詢日志寫不進去你還在那傻等。我給個建議把這個文件放到獨立的數據盤目錄下跟數據目錄分開這樣就算日志暴增也不會拖垮系統(tǒng)盤。2.2 臨時開啟與永久開啟兩種方式都要會臨時開啟是針對當前實例的重啟MySQL后配置就丟了。這種方式適合你只是想臨時排查問題不想動配置文件-- 臨時開啟慢查詢日志 SET GLOBAL slow_query_log ON; -- 設置閾值 SET GLOBAL long_query_time 1; -- 記錄沒有走索引的查詢 SET GLOBAL log_queries_not_using_indexes ON;注意一點SET GLOBAL改的是全局值但對當前已經存在的連接不生效。也就是說你改了之后新發(fā)起的連接才會用新值之前那些連接還是老配置。如果你想對當前會話也生效得加上SET SESSION。這個細節(jié)在實際操作中非常容易踩我曾經就是改了全局閾值結果測試客戶端用的是長連接跑了半天發(fā)現(xiàn)日志里一條都沒記還以為是配置出了問題實際上是會話級參數沒跟上。永久開啟需要修改配置文件my.cnfLinux或my.iniWindows在[mysqld]段落里加上[mysqld] # 開啟慢查詢日志 slow_query_log 1 # 日志文件路徑建議用絕對路徑 slow_query_log_file /var/log/mysql/mysql-slow.log # 閾值1秒線上業(yè)務建議這個值往下調 long_query_time 1 # 記錄未使用索引的查詢 log_queries_not_using_indexes 1 # 限制日志文件大小避免撐爆磁盤5.7支持這個參數 slow_query_log_file_size 1073741824改完之后重啟MySQL服務生效。不過這里要提醒你生產環(huán)境盡量別動不動重啟我一般做法是先用SET GLOBAL在線開啟然后再改配置文件等下次維護窗口重啟的時候自然永久生效。這樣既不間斷業(yè)務又能保證配置最終落盤。2.3 閾值到底設多少才合理long_query_time設置多少合適這個問題沒有標準答案得看你的業(yè)務場景。我見過最極端的一個案例有個團隊把所有SQL都設為閾值0結果慢查詢日志每分鐘幾十萬條直接把磁盤打爆了。也見過一個傳統(tǒng)企業(yè)項目閾值設成20秒等于什么都沒記錄。我個人的經驗是分場景來定業(yè)務場景建議閾值原因高并發(fā)互聯(lián)網業(yè)務0.5秒~1秒接口響應要求快超過1秒已經影響用戶體驗一般企業(yè)應用1秒~2秒容忍度稍高但慢SQL仍需記錄離線分析/數倉5秒~10秒大批量跑數幾百毫秒不現(xiàn)實日常排查初期先1秒逐漸下調避免第一天日志量太大嚇到自己還有一點log_queries_not_using_indexes這個開關我建議在開發(fā)環(huán)境開著生產環(huán)境要看情況。它在MySQL 5.6之后有個變化不是所有沒走索引的查詢都會被記錄比如全表掃描的行數小于一定閾值時不會記。而且這個開關產生的日志量極大生產環(huán)境如果沒有專人盯日志容易被大量無效記錄淹沒反而看不清真正的問題。我一般是開發(fā)環(huán)境開啟線上謹慎開啟或者關閉。3. 慢查詢日志里到底記了什么——讀懂每行內容3.1 日志字段逐一拆解開啟慢查詢日志之后過一段時間你就能看到類似這樣的內容# Time: 2024-06-15T10:23:45.123456Z # UserHost: root[root] localhost [127.0.0.1] Id: 812345 # Query_time: 2.345678 Lock_time: 0.001234 Rows_sent: 100 Rows_examined: 1000000 # Thread_id: 8 Schema: orders Last_errno: 0 Killed: 0 # InnoDB_trx_id: 18875 SET timestamp1718442225; SELECT o.order_id, u.user_name, p.product_name FROM orders o LEFT JOIN users u ON o.user_id u.user_id LEFT JOIN products p ON o.product_id p.product_id WHERE o.status pending ORDER BY o.create_time DESC LIMIT 100;這段日志信息量很大一個一個說。Query_time是查詢總耗時這是你判斷SQL是否超時的直接依據Lock_time是鎖等待時間如果這個值很高說明SQL在等待其他事務釋放鎖問題未必在SQL本身的執(zhí)行效率上Rows_sent是實際返回給客戶端的行數Rows_examined是這條SQL為了返回結果而掃描過的行數——這個數值是重中之重Rows_examined和Rows_sent的差距越大說明掃描了大量行卻只返回了少量行典型的索引問題或者查詢邏輯問題。SET timestamp...這行在日志里容易被忽略但它很重要。因為慢查詢日志里記錄的SQL是后補的如果你直接復制SQL執(zhí)行得到的執(zhí)行計劃和當時會有差異。SET timestamp讓你知道這條SQL當時執(zhí)行的時間點配合監(jiān)控系統(tǒng)就能還原當時的服務器狀態(tài)。3.2 日志格式MySQL 5.7和8.0的差異MySQL 5.7默認的慢查詢日志格式是文本格式可讀性好但解析起來麻煩。MySQL 8.0引入了log_output參數設置日志輸出格式可以是FILE文本文件、TABLE記錄到mysql.slow_log表或者兩者都寫。我建議生產環(huán)境用FILE格式理由有兩個一是文件格式可以用各種現(xiàn)成工具分析二是表格式寫入本身有開銷高并發(fā)下會影響性能。log_outputTABLE的場景也有就是當你需要直接用SQL查詢慢查詢記錄時很方便比如SELECT * FROM mysql.slow_log ORDER BY start_time DESC LIMIT 10;但說實話我用得很少還是文件格式加工具分析最順手。MySQL 8.0里還有一個long_query_time支持微秒級別的設置比如0.000100表示100微秒不過日常用不到這么細。3.3 日志會記錄哪些SQL不會記錄哪些SQL慢查詢日志記錄的是執(zhí)行完成的SQL。也就是說如果一條SQL因為鎖等待超時、被客戶端取消或者其他原因導致沒有執(zhí)行完成它不會被記錄。這是一個很容易被誤解的點——你以為慢查詢日志能捕獲所有卡住的查詢實際上它只捕獲慢但最終執(zhí)行完的查詢。那些被kill掉的、陷入死鎖的SQL還得靠其他手段排查比如performance_schema里的事件記錄。另外慢查詢日志記錄的是DML語句SELECT、UPDATE、DELETE、INSERT等預編譯語句也會記錄比如PreparedStatement方式執(zhí)行的SQL會記錄對應的語句文本。但存儲過程內部執(zhí)行的SQL在存儲過程級別不會被記錄除非內部SQL本身超時了才會記錄那條SQL。管理類語句像CREATE INDEX、ALTER TABLE這種DDL操作雖然也耗時但默認情況下不記錄在慢查詢日志里。這點經常讓人迷惑——你明明在凌晨跑了兩個小時的ALTER TABLE加索引慢查詢日志里卻什么都沒有。MySQL 5.7開始有個log_slow_admin_statements參數可以控制是否記錄這種管理語句建議需要分析DDL耗時時把它開開。4. 慢查詢日志別用眼睛看工具才是親爹4.1 日志一多就抓瞎先學會用mysqldumpslow慢查詢日志開了一段時間后文件可能是幾百MB甚至幾個GB。這時候你如果還是用tail -f或者less一頁頁翻效率極低。MySQL自帶了mysqldumpslow工具專門用來匯總分析慢查詢日志。它的基本用法很簡單# 查看日志里最慢的10條SQL mysqldumpslow -s c -t 10 /var/log/mysql/mysql-slow.log參數說明-s是指定排序方式c代表按執(zhí)行次數計數排序t是返回前N條al是平均鎖等待時間at是平均查詢時間。我常用的是# 按平均查詢時間排序看最慢的20條 mysqldumpslow -s at -t 20 /var/log/mysql/mysql-slow.log # 按執(zhí)行次數排序看哪些SQL被頻繁執(zhí)行且耗時 mysqldumpslow -s c -t 20 /var/log/mysql/mysql-slow.logmysqldumpslow有個很聰明的設計它會自動歸一化SQL。什么叫歸一化就是把SQL里的具體值替換成抽象的占位符。比如SELECT * FROM users WHERE id 10086; SELECT * FROM users WHERE id 10087;這兩條在工具看來是同一類SQL會合并統(tǒng)計。這樣你看到的就是某類慢查詢的總共執(zhí)行次數、平均耗時、最大耗時而不是被幾千條相似SQL淹沒。不過mysqldumpslow也有局限它只支持基本統(tǒng)計看不到SQL執(zhí)行計劃的細節(jié)而且對復雜的多表查詢、子查詢歸一化處理得不算好。正常情況下我拿它做第一輪篩選找出嫌疑SQL然后再對每一條單獨做EXPLAIN分析。4.2 pt-query-digest慢查詢分析的終極武器要說慢查詢日志分析工具里哪個最能打那必須是Percona Toolkit里的pt-query-digest。這個工具比mysqldumpslow強太多了它不僅能分析慢查詢日志還能分析通用日志、二進制日志。安裝Percona Toolkit的方式各個系統(tǒng)不一樣Ubuntu上是sudo apt-get install percona-toolkitCentOS上需要先配置Percona的yum源再安裝這里不展開。裝好之后分析慢查詢日志的姿勢pt-query-digest /var/log/mysql/mysql-slow.log輸出結果分三大塊。第一塊是總體報告包括分析時間段、SQL總數、唯一SQL數、總耗時、最長耗時等。第二塊是按查詢類型分組的排名會列出每個查詢組的執(zhí)行次數、總耗時、平均耗時、占比默認按總耗時排序。第三塊是每個查詢組的詳細profile展示該組SQL的響應時間分布、歸一化后的SQL文本、示例SQL等。這個工具最厲害的地方在于它會把所有SQL按指紋分組這個指紋是基于SQL文本生成的哈希值跟mysqldumpslow的歸一化類似但更精細。你一眼就能看出哪類SQL消耗了數據庫80%的時間然后重點針對它優(yōu)化。用pt-query-digest還有一個場景我特別推薦對比分析。比如大促前后分別收集一個慢查詢日志然后用工具的--review選項對比兩次的差異就能知道哪些SQL的耗時在大促期間惡化最嚴重。這個功能在容量規(guī)劃和限流策略制定時非常有價值。4.3 沒有Percona Toolkit時怎么辦——純SQL查詢方案有些環(huán)境不讓裝第三方工具或者你覺得裝重量級工具不劃算。沒關系還有土辦法。MySQL 5.7可以把慢查詢日志輸出到表里然后直接用SQL分析-- 開啟表格式輸出 SET GLOBAL log_output TABLE; SET GLOBAL slow_query_log ON; -- 按執(zhí)行次數排序看高頻慢SQL SELECT LEFT(SUBSTRING(sql_text, 1, 50), 30) AS sql_prefix, COUNT(*) AS cnt, ROUND(AVG(query_time), 2) AS avg_query_time, MAX(query_time) AS max_query_time FROM mysql.slow_log GROUP BY sql_prefix ORDER BY cnt DESC LIMIT 20;不過我得說這種方法的分析能力有限只能做初步統(tǒng)計。而且mysql.slow_log表引擎是CSV查詢效率感人數據量大了會越來越慢。所以它只適合救急真正的高效分析還得靠文件格式加專業(yè)工具。5. 從發(fā)現(xiàn)慢SQL到定位瓶頸——EXPLAIN實戰(zhàn)解讀5.1 一條慢SQL的標準分析流程日志發(fā)現(xiàn)了慢SQL復制到測試庫怎么一步步找到問題根源我的標準動作是第一步看SQL本身搞清楚它是干什么的涉及哪些表邏輯是否合理。第二步用EXPLAIN看執(zhí)行計劃。第三步分析每個表的訪問方式、關聯(lián)順序、掃描行數。第四步結合索引情況和數據分布驗證。第五步改寫SQL或者加索引。EXPLAIN的用法很簡單就是在SQL前面加上EXPLAIN關鍵字EXPLAIN SELECT o.order_id, u.user_name, p.product_name FROM orders o LEFT JOIN users u ON o.user_id u.user_id LEFT JOIN products p ON o.product_id p.product_id WHERE o.status pending ORDER BY o.create_time DESC LIMIT 100;執(zhí)行后你會得到一張表重點關注這么幾個列type訪問類型從好到差依次是system、const、eq_ref、ref、range、index、ALL。看到ALL就說明在做全表掃描這是最常見的慢查詢根因。key實際用到的索引如果為空說明沒走任何索引。rows預估掃描的行數這個數是優(yōu)化器估計的不一定精確但量級很有參考價值。Extra這一列信息量巨大看到Using filesort說明需要文件排序看到Using temporary說明用了臨時表看到Using where說明索引條件下推不充分。還是用上面那個例子如果EXPLAIN結果顯示orders表的type為ALL預估掃描100萬行那問題就很明顯了WHERE o.status pending這個條件沒有索引可用MySQL只能挨個翻表看看哪行符合條件。再加個ORDER BY o.create_time DESC又觸發(fā)文件排序雙重debuff不慢才怪。5.2 一個完整的優(yōu)化案例拆解我給你看一個我自己實際處理過的案例。業(yè)務反饋某個列表頁接口越來越慢最開始50毫秒現(xiàn)在1.2秒還沒到警報線但趨勢不對。抓慢查詢日志找到SQLSELECT id, title, user_id, create_time FROM articles WHERE category_id 105 AND status 1 ORDER BY create_time DESC LIMIT 10;EXPLAIN結果type: ref key: idx_category rows: 23456 Extra: Using where; Using filesort表面看起來走了idx_category索引不算太差為什么慢仔細分析category_id 105這個分類下有兩萬多行然后還要在結果里過濾status 1再按create_time排序最后取10條。問題就出在這里——索引只過濾了分類沒有同時處理狀態(tài)和排序導致MySQL查完兩萬多行后還要做文件排序當然快不起來。優(yōu)化方案是建一個聯(lián)合索引ALTER TABLE articles ADD INDEX idx_cat_status_time (category_id, status, create_time);注意索引列的順序有講究等值條件的列放前面這里是category_id和status排序字段create_time放最后。這樣設計的原因是MySQL可以用這個索引同時完成過濾和排序避免Using filesort。優(yōu)化后EXPLAIN變成type: ref key: idx_cat_status_time rows: 186 Extra: Using index condition掃描行數從兩萬多降到186行接口耗時從1.2秒回到30毫秒。這個案例就是說慢SQL排查不能只滿足于走了索引要看索引是否真的覆蓋了查詢的所有需求。5.3 索引沒生效的幾種常見原因索引建了但沒用上這是比沒建索引更讓人頭疼的情況。我總結了幾個常見原因隱式類型轉換。如果字段是VARCHAR類型SQL里寫WHERE user_id 12345數字MySQL會隱式把字符串轉成數字導致索引失效。正確寫法是WHERE user_id 12345。對索引列使用函數。WHERE DATE(create_time) 2024-06-15會讓索引失效因為MySQL要先對每一行的create_time執(zhí)行DATE函數才能比較。正確做法是WHERE create_time 2024-06-15 00:00:00 AND create_time 2024-06-16 00:00:00。前導模糊查詢。WHERE title LIKE %MySQL%百分號在最前面的模糊匹配沒法用索引只能全表掃。這個沒有特別好的索引解法如果確實有需求考慮全文索引或者搜索引擎。聯(lián)合索引不滿足最左前綴原則。建了(a, b, c)聯(lián)合索引但查詢條件只用到b和c不包含a索引失效。優(yōu)化器選擇不用索引。這也是一種情況你以為MySQL會走索引但優(yōu)化器經過成本估算認為全表掃描更快比如數據量很少或者要回表的行數占比太高比如超過20%~30%。這種情況有時候可以通過FORCE INDEX強制走索引但我不建議直接這么干更健康的做法是優(yōu)化SQL本身的邏輯或者更換索引設計。排查索引問題最實用的工具是EXPLAIN之外再配合SHOW WARNINGS。執(zhí)行完EXPLAIN后再加一句SHOW WARNINGSMySQL會告訴你它實際重寫后的SQL長什么樣方便對照。6. 慢查詢的治理閉環(huán)——從發(fā)現(xiàn)到預防6.1 日志只是起點要建立問題跟蹤機制很多團隊開了慢查詢日志之后就再也不管了三個月后日志文件幾個GB但沒有任何人看過。這是典型的開了個寂寞。我建議是形成一套循環(huán)每日采集 → 每周分析 → 每季度治理回顧。每日采集可以靠定時任務比如每天凌晨跑一次pt-query-digest把結果輸出成當天報告存到固定的目錄。每周抽時間看一周匯總挑出Top 10耗時組織開會討論。新增慢SQL要登記優(yōu)化完要驗證沒優(yōu)化完的要放進待辦池。這套機制看起來簡單但真正堅持下來的團隊不多。很多人的思維是業(yè)務不報障就不管等業(yè)務方找上門來的時候往往已經是用戶都感知到卡頓的階段了。我覺得做技術的應該有這種主動出擊的覺悟。6.2 結合監(jiān)控平臺實時告警日志分析是事后行為實時告警才能防患于未然?,F(xiàn)在主流做法是把MySQL的SHOW GLOBAL STATUS里的指標或者performance_schema的數據采集到Prometheus這類監(jiān)控平臺配上Grafana做可視化看板。關鍵的告警項有這么幾個告警指標建議閾值說明慢查詢數每分鐘超過基線值3倍觀察趨勢突然增長往往是SQL性能退化或數據量突增單條SQL最大耗時超過3秒直接告警尤其是核心交易鏈路全表掃描次數持續(xù)上升可能有新SQL沒建索引或索引被誤刪Threads_running經常超過50數據庫連接池打滿的前兆實時監(jiān)控的一個難點是閾值怎么定。我建議是先從半年的慢查詢日志里算出每天的平均數和P95值再用這個做基線。不要拍腦袋定一個1秒因為不同業(yè)務差異太大。6.3 推薦一套我常用的慢查詢巡檢腳本我把自己日常巡檢用的一個Shell腳本簡化后放在這里邏輯很簡單每天跑一次把當天的慢查詢日志分析結果郵件發(fā)給自己或者寫到指定文件里周末再匯總。#!/bin/bash LOG_DIR/var/log/mysql SLOW_LOG${LOG_DIR}/mysql-slow.log REPORT_DIR/var/log/slow_report TODAY$(date %Y%m%d) mkdir -p ${REPORT_DIR} # 用pt-query-digest分析當天的慢日志 pt-query-digest ${SLOW_LOG} --since 24h ${REPORT_DIR}/report_${TODAY}.txt # 取Top 5輸出到單獨文件 pt-query-digest ${SLOW_LOG} --since 24h \ --limit 5:95:1 ${REPORT_DIR}/top5_${TODAY}.txt # 統(tǒng)計當天慢查詢總量 slow_count$(grep -c ^# Query_time: ${SLOW_LOG}) echo Date: ${TODAY} SlowQueries: ${slow_count} ${REPORT_DIR}/summary.txt這個腳本你可以用crontab每天凌晨跑一次0 2 * * * /usr/local/bin/slow_query_analyze.sh腳本運行完之后早上上班第一件事就是隨手翻一下報告看看昨天有沒有新的慢SQL冒出來。養(yǎng)成這個習慣之后你會發(fā)現(xiàn)線上SQL的性能問題基本都能在爆發(fā)之前被扼殺在搖籃里。7. 那些年我踩過的坑——慢查詢日志的隱秘角落7.1 參數改了不生效的連環(huán)坑慢查詢日志相關參數有全局和會話之分這是最基礎的坑。但更隱蔽的坑是MySQL 8.0里SET GLOBAL設置了slow_query_log之后如果配置文件里寫的是slow_query_log OFF重啟之后會被配置文件覆蓋回去。你以為永久開啟了實際上重啟之后又關了。這種問題在日志文件上看不出來直到某天發(fā)現(xiàn)慢查詢日志突然不更新了才察覺。解決方法是改完配置文件后必須驗證一遍用SHOW VARIABLES確認所有相關參數的實際值。我自己有個習慣改完配置之后寫一條慢SQL故意觸發(fā)一下然后去看日志文件有沒有新增記錄。這個驗證動作只要幾秒鐘能省掉后面無數排查時間。7.2 磁盤滿導致日志寫不進去慢查詢日志默認會無限增長如果不做日志輪轉遲早占滿磁盤。磁盤滿了MySQL會怎么樣不會崩潰但會拒絕寫操作造成寫入阻塞這比慢查詢本身更嚴重。我在生產環(huán)境見過最慘的一次就是慢查詢日志直接把根分區(qū)寫滿所有業(yè)務寫入全部卡死最后不得不刪日志緊急恢復。我的處理經驗是三層防護。第一日志文件和數據庫數據目錄分開別放在同一個分區(qū)。第二用logrotate做日志切割按天或者按大小輪轉保留最近7天。第三開啟slow_query_log_file_size限制單個文件大小超過自動輪轉。這三層都做到基本不會出大問題。7.3 不要忽視鎖等待時間高的慢查詢有時候Pull出來的慢SQLQuery_time很高但Rows_examined并不大執(zhí)行計劃也走了索引。這時候問題很可能不在SQL本身而在Lock_time上。Lock_time高說明SQL大部分時間在等待鎖釋放。怎么驗證看慢查詢日志里Lock_time和Query_time的比值。如果Lock_time占了大頭你需要排查其他并發(fā)事務。特別是線上業(yè)務用了SELECT ... FOR UPDATE、UPDATE、DELETE這類會加鎖的語句在高并發(fā)場景下容易互相阻塞。這時候光優(yōu)化SQL沒用得從業(yè)務層下手比如減小事務范圍、減少鎖的持有時間、用樂觀鎖代替悲觀鎖。7.4 慢查詢日志記錄的是因還是果最后講一個我自己的理解。很多人一看到慢查詢日志里某條SQL耗時5秒就認定這條SQL是性能問題的根源急著改寫SQL。但慢查詢日志記錄的只是表象真正的因可能是它執(zhí)行時的系統(tǒng)狀態(tài)——比如當時服務器負載本來就高磁盤IO飽和CPU被打滿任何SQL執(zhí)行都會變慢。所以分析慢查詢日志時一定要結合當時的時間點和監(jiān)控數據來看。如果某條SQL平時執(zhí)行很快只有特定時間段才慢那要考慮的不光是SQL本身還有服務器的資源競爭、定時任務沖突、備份作業(yè)并發(fā)等問題。慢查詢排查是一個系統(tǒng)性的工作不能只盯著SQL文本而要把它放到整個運行環(huán)境里去理解。8. 最后一個老運維的心里話做了這么多年數據庫運維我越來越覺得慢查詢排查這事兒真正考驗人的不是工具用得有多熟練而是你有沒有一套完整的思路。日志開沒開、閾值合不合理、看到慢SQL之后能不能快速定位到索引問題和鎖問題、優(yōu)化完之后有沒有持續(xù)跟蹤驗證每一步都環(huán)環(huán)相扣。我個人最深的體會是慢查詢日志不是用來背鍋的而是用來幫團隊提前發(fā)現(xiàn)隱患的。它記錄的每一條慢SQL都是數據庫在告訴你我這兒有個地方快撐不住了你有空來修一下。你認真對待它它能幫你把很多故障消滅在萌芽狀態(tài)你無視它它就會在某個深夜給你一個大驚喜。如果你現(xiàn)在還沒有開啟慢查詢日志今天就動手開起來閾值設成1秒然后把日志分析工具裝上。一個月后再回頭看你會感謝當時的這個決定。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
www五月天com| 日韩操女| 另类视频综合| 激情文学五月丁香六月婷婷| 天天舔天天摸天天射| 五月婷中文娱乐综合| 婷婷五月情| 五月中旬婷婷丁香六| 99亚洲视频| 国产偷人爽久久久久久老妇APP| 天天爱天天爽| 五月丁香人妻| 激情开心五月亚洲| 六月丁香婷婷天堂| 天天婷婷天天| 再次出发二| 色婷六月| 婷婷九月在线| 69人人操人人爽| 最近韩国日本免费高清观看| 激情AV| 夜夜操夜夜操| 五月丁香婷婷免费视频| 色色AV色色色东莞| 91婷婷五月天嫩女| 欧美五月婷婷| 亚洲视色| 婷婷激情小说| www.色婷婷.com| 麻豆123区| 欧美日韩99| 欧美一线视频| 色七七九九| 日韩成人无码片| 色五月情| 五月丁香婷婷欧美色图视频五月丁香777电影 | se99视频| 久久婷婷六月综合| 色五月激情五月开心五月| 成人丁香五月天Av| 婷婷欧美综合| 99婷婷| 久久98热re| 人人干av| 久久婷综合| 激情婷婷六月天| 99热久草| 人人操AV| 色婷五月| 五月开心网| 久久久久人妻精品| 99国产精品久久久久久久久久久| 伊人婷婷福利网| 性一交一乱一交A片久| 久久97| 亚洲性视频| 婷婷五月天视频免费在线观看| 色婷婷AV久久久久久久| 激情久久丁香| 五月丁香啪啪网| 99激情| 99热这里只有精品8| 久婷| 中字幕视频在线永久在线观看免费 | www,99色| 久青操| 久久婷网| 思思99精品视频在线观看| 婷婷激情丁香五月婷婷激情丁香五月婷婷 | 欧美成人A片AAA片在线播放| 激情开心五月天| 玖玖五月丁香| 五月丁香久久| 九九久久久综合| 亚洲熟女色| 深爱激情五月天| 婷婷五月激情的图片| 美日韩成人| 亚洲另类电影| 97五月天婷婷| 大香蕉婷婷丁香天堂AV| 五月天激情视频| 91色五月| 五月丁香花成人社区| 五月丁香六月婷婷啪啪| 九九激情网| www.久久| 人人性久久| 亚洲AV人人操| 久热这里只有精品66| 丁香五月花婷婷开心| 香蕉操亚洲| 婷婷五月天伊人在线| 五月丁香色婷婷久久| 啪啪东京热| 五月丁香啪啪啪啪| 伊人AV五月婷| 大香蕉五月天婷婷| 六月丁香婷婷色狠狠久久| 天天综合网色欲香| 亚洲激情99| 热99AV网站| 99热这里全是精品| w婷婷五月婷婷w| 开心五月激情网| 狠狠久久婷五月综合色| 国产婷婷五月| 成人婷婷深爱综合网| 99rewww| cc精品国产性传播| 狠狠色婷婷7777久| 久热中文字幕| 天天操综合网| 久久婷婷五月丁香蜜桃网| 欧美性爱五月天| 99热免费18| 欧亚洲在线高清视频| 激情五月,色五月| 婷婷色网站| 伊人婷婷大香蕉| 在线观看免费人成视频无码| 亚洲殴洲精品Av在线| av在线观看网站| 强辱丰满人妻HD中文字幕| 开心激情婷婷| 久久资源网五月婷| 亚洲婷婷免费| 五月婷婷色色爱| 国産精品| 国产精品视频免费看| 操操人人| 五月丁香人妻| 99久热这里只有精品| 五月天婷婷乱论小说| 五月丁香影院| 婷婷五月丁香A∨| 玖玖资源部在线播放| 婷婷丁香五月天色区| 可以直接看的AV网站| 成年人看Va免费视频| www.yw色| 午夜婷婷久久 | 激情综合九| 99久久精| 99热都是精品| 婷香五月网在线| 玖玖五月丁香| 九艹在线| 久碰婷婷视频| 操逼视频一区| 久久网日本| 91jiuseshunv| 婷婷五月天视频亚洲| 最新色色五月天| 91狼友视频网页更新| 蜜臀av粉嫩av懂色av| 激情综合网五月在线播放| 五月激情日本在线| 看全色黄大色大片| 久久性操| www.激情五月| 色婷丁香五月| 亚洲成av人影院| 99超在线| 五月伊人91| 午夜不卡成人一区二区| 婷婷丁香五月综合| 色婷婷婷av| 99久在线精品99re8| 黄色AAAA韩国guochansanji| 久久99激情| 人妻久久久| 久青青久| 五月天综合在线网| 亚洲欧美国产高清vA在线播放| 久久三级视频| 性日本激情| 99热这里只有精品16| 九月婷婷激情久久| 婷婷五月综合社区| 婷婷五月激情的图片| 欧洲激情精品婷婷| 91在线观看www| 99综合视频一体| 激情av| 九九久久五月天综合伊人| 99久久黄色顶级视频| www.操.com| www.99免费视频| 五月婷婷亚洲色视频| Av狠狠色丁香婷| www,婷婷五月天,com| 狠狠色成人影片| 婷婷免费精品视频| 大香蕉视频婷婷| 开心激情网五月| 日韩综合久| 中文字幕综合| 天天插轮理| httpwww色com日本| 婷婷亚洲综合| 五月丁香亚洲综合网| 欧美激情性做爰免费视频| 欧美久久婷婷| 综合色色五月| 五月婷婷啪啪啪| a色色片| 欧美情色电影一区二区| 激情综合色播| 深情六月婷婷综合久久| 日本操天堂| 天天做天天摸| 色五月激情视频在线综合| 色综合久久天天综合网| 五月丁香日本在线视频观看| AA片在线观看视频在线播放 | 人人爽网| 欧美影院婷婷| 亚洲AV成人无码久久精品老人法拉利| 丁香五月综合激情啪啪| WWW,五月| 丁香五月婷婷在线观看| 久久五月天视频| 97操碰| 激情VA视频| 六月婷婷av| 丁香久久在线| 婷婷丁香五月综合| 无码人妻一区| 这里只有精品日韩| 99九九视频| 欧美va在线| 日日干干天天干| 免费在线a| 久久久久人妻| 婷婷综合色| 六月婷婷狠狠| 人人操AV| 五月天婷婷激情四射综合| 99思思热只有在这里看| 色五月大香蕉婷婷| 人人人操 超碰| 九九AV在线| caopeng97日韩| 9999综合99综合人| 97热91| 婷婷射图| 久久精品只有这| 思恩热国产视频右线观看| 伊人激情AV一区二区三区| 五月天婷婷激情小说| 婷婷婷婷婷婷婷婷婷婷丁香| 丁香久久久| 丁香5月啪啪| 91好好热日本在线| 久久婷婷艹| 啪啪91| 综合色影院| yazhouzonghesese| 日韩99色| 狠狠做五月| 婷婷字幕在线| 婷婷五月色播天| 色久天| 五月婷婷丁香在线| 日韩操| 九九热视频精品2| 性爱七区| 日韩AV在线免费| www.日日夜夜.com| 九九色精品| 色婷婷色99国产综合精品| 亚洲AV成人在线| 色婷婷狠狠| 九九99九九99九九99视频网| 99在这里有精品| 婷婷5月天av| 第四色激情网| 内射综合网| 久久99jiu9| 亚洲成人AV高清字幕| 丁香五月婷老师| 丁香五月在线看| 五月 丁香 欧美| 色色色欧美| 六月婷婷七月丁香| 国产无人区大片| 91九色成人原创视频| 成人av在线电影| 丁香五月六月综合激情| 日日操,夜夜撸| 九九爱这里只有精品| 五月婷中文娱乐综合| 九九青青草成人| 九九婷婷综合| 亚洲无线视频| 激情五月色婷婷| 激情伊人五月天| 另类图片色五月| 国产精品电影网| 人妻少妇色综合| 99操逼| 婷婷五月天综合在线| 久久久久久xxxxx| 色欲人妻综合aaaaaaaa网| www.九九婷婷| 色综合中文色综合网| 狠狠CAO日日穞夜夜穞AV| 天天澡天天狠天天天做| 色五月女| 婷婷久久五月天| 久热免费| 97碰在线视频| 97人人看| 五月丁香香蕉| 精品一区久热| 日韩视频女神99| 99在线热视频| 五月天激情综合网站| 婷婷丁香五月天影院| 在线中文字幕免费视频| 色色欧美色色色| wuyuedingxiang| αV电影| 欧美久人人| 香蕉久久六月| 天天激情综合| 色欲五月婷婷| 激情综合亚洲| 综合av在线| 99久久婷婷国产综合亚洲| 大香蕉AV在线| 超碰免费电影| 91狠狠综合久久| 五月天开心成人网| 99视频只有精品| 中文字幕AV在线播放| 久久久久丁香婷婷五月天| 天天碰天天插天天操| www.狠狠狠.com| 亚亚州久久高潮| 67194中文字幕| 色综合色色| 777精品久无码人妻蜜桃| 五月天色图| 少妇AB又爽又紧无码网站| 思思热视频| 亚洲丁香五冃97色| 91热99| 五月丁香综合久久| 激情综合色图| 中文字幕操比影片| Xx色综合| 亚洲美女网Va| 一本大道熟女人妻中文字幕在线 | 九九色院| 婷婷色系婷色| 五月丁香啪啪啪综合网| 九九热免费视频| 久久九九一區| 99热精品少| 久久这里只| 五月丁香黄色视频| 97久久超视频| 婷婷激情五月综合在线视频| 天天狠狠干| 91久久久久久| 停停六月 综合| 丁香五月天信号| 天天综合色| 熟妇无码乱子成人精品| 五月婷婷久久大片| 九九精品视频免费在线| 国产五月天激情小说| 久久99这里只有精品视频| 美女要搞搞天天搞搞搞网站| 国产日批视频| 99热老网站| 日日天天干| 中文av网站| 九九综合图片网| 六月婷婷激情图片| 天堂综合久久 | 色色色色热| 91精品国产综合久久蜜芽解析速度| 69精品无码一区二区三区| 操人精品| 天天色视频| 荡乳尤物3HP1V5| av第一二区| 国产99视频永久免费| 能直接看的av网站| 91re色综合视频| 激情婷婷综合| 婷婷综合网| 久99热在线观看| 草做免费在线观看| 久久九九激情五月天| 五月天婷婷爱| 成人网址在线观看| 婷婷九月丁香天堂丁香天堂| 天天干在线播放| 国产噜一噜天天噜| 五月天色丁香| 色婷婷XXXXX| 狼友视频在线观看18| 国产精品久久久久久久久久| 97干在线看| 五月播播| 99ri视频在线观看| 天天爱天天狠天天透| 九九色热| 激情五月天在线| 99A片| 玖玖在线视| 99乱视频| 五月丁香久久网| 五月天色区| 91综合在线观看| 久久五月天色| www色综合亚洲92| 可以免费观看的AV| 久久久久久久8| 九九在线精品| 91碰| 天天爱天天爽| 伊人婷婷五月| 91/九色黑人| 99色视频免费在线规看| 99热这里| 婷婷五月激情在线| OUMEIRIHANCHENGREN| 美女五月激情| 麻豆AV一区二区三区| 另类亚洲2| 激情五月天丁香| 激情欧美婷婷| 狠狠色综合五月人人| 久久综合婷婷| BBWCUCKOLD精品熟妇| 超碰成人av| 9 1超碰九色| 丁香五月天在线视频| 免费亚洲婷婷五月| 丁香五月成人| 超碰婷婷色| va亚洲中文在线| 99精品综合在线| 亚洲综合色色色| 色婷婷色综合激情91| 色丁香婷婷美女视频网站| 久久思思热| 性 色 婷婷| 亚洲国产精品SUV| 国产精品色一哟哟| 99精品97| 久草婷婷| 丁香婷婷视频| 俺来也综合网精品一区| 久久女婷| 天天舔日日肏夜夜爽| 少妇性按摩无码中文A片| 五月色婷婷在线观看| 色噜噜婷婷| 激情丁香五月婷| 亚洲美女裸体被操在线观看| 色欲资源网| 日本久久99久久| 97色在线观看视频| 极品 少妇 内射| 国产精品24r| 欧洲一区二区| 色综合久久88色综合中文字幕| 五月花免费视频| 丁香五月花婷婷开心| 亭亭玉月丁香| 人草人人| 青青热久久综合| 成人 九九九九| 亚洲中文乱字字幕在线永久| 综合综合色色| 精品99视频| 91碰碰| 3p日韩网站视频| 超级黄色片| 日日影院 | 思思久久精品| 99视频精品8 | 视频一二区| 国产偷人爽久久久久久老妇APP| 99在线观看免费精品视频| 青青草成人网| 五月天婷婷导航| 色色爽爽天天| 九九精品婷| 五月婷色| 婷婷五月综合亚洲| 操逼棍操逼| 99热在线播放| 狠狠色丁香久久| 最新高清无码专区| 欧美精品999| 狠狠色噜噜狠狠狠888| 日本操片| 亚州激情九月| 97人碰人操| 日日日日日| 综合网啪| 综合激情站| 丁香婷婷五月天色播| 偷拍九九热| 女人高潮内射99精品| 夜夜撸天天日| 五月丁香六月婷婷综合免| 丁香成人五月天| 综合性爱网| 激情五月色播五月| 丁香五月婷婷俺也要去| 亚洲永久免费| 五月天婷婷免费| 婷婷六月色情| 激情丁香五月综合| 九色在线五月婷婷网址| 黄色成人网站在线播放| 狠狠va| 噜综合| 五月激情婷婷综合| www.日本91| 噜噜五月天综合| 久草婷婷网| 91精品久久久久久久久久| 天天弄天天操| 久久丁香五月天| 日日操天天| 亚洲视频a| 天天射影| 538在线| 99精品无码视频| 日韩啪啪视频| 五月开心婷婷中文字幕| 色色五月丁香婷婷综合| 少妇人妻偷人精品无码视频新浪| 第四色大香蕉| 久久人人九九| 天天肏夜夜肏| 免费视频无码| 91性交在线播放| 欧洲MV日韩MV国产| 久久久噜噜噜操操操| www色五月| 五月婷婷香| 丁香九月激情| 亚洲字幕AV一区二区三区四区| 亚洲激情综合免费| 99热精品中文字幕| 日韩av在线免费观看| 青青草蜜臀| 欧美精品999| 人人爽在线视频综合网| 欧美日韩成人在线观看| 一区操| 婷婷丁香五月天熟女丝袜| 亚洲1区| 国产真人做爰视频免费| 中文av网| 国产性av| 怡红院91a√| 五月色婷婷中文字幕| 日本久久极品| 999热在线视频| 中文网AV| 99热这里只有精品2024| 色婷婷伦理| 99热成人精品| 涩综合婷婷| 996er热| h在线看免费版在线看| 久久久精品AV| 热久久这里只有精品| 婷婷另类小说| 久综合4| 综合网狠狠| 91热网址| A√天堂网在线| 五月婷婷开心丁香| 亚洲精品影视| 人人摸人人干| 91天堂网综合| WWW色五月天| 五月天激情啪啪| 综合久久五月天| 色吧五月婷婷| 操逼视频网址| 亚洲色五月| 丁香网五月网| 91碰碰碰| 日比视频91| 久久久91| 久久亚洲婷婷| 大香蕉久操| 一区操| www久久久| 五月婷婷激情综合拍| 人妻久久久久久久久| 思思热在线精品视频网站| 久久精品女人天堂AAA| 亚洲视频码| 超碰九色| 五月天婷婷久久| 操碰91| 色九综合| 少妇口诉沐足视频播放器网址| 午夜婷婷五月天在线| 天天干肏夜夜| 色色色婷婷| 国产毛片精品一区二区色欲黄A片| www.婷婷com| 人妻AV在线| 五月色影院| 中文字幕丰满孑伦无码专区| 亚洲乱码日产精品BD| www.cao.com久久| 激情四射五月天偷偷看婷婷| 婷婷激情鹿城五月天| 五月草影视| 六月丁香啪啪啪| 五月 婷 久| 五月激情四射婷婷丁香| 丁香五月,激情五月,深爱五月| 六月婷婷综合| 日本成人内射| 丁香六月婷婷综合网| 丁香五月乱中文字幕| 婷婷五月在线观看| 色婷婷播放| 天天在线天天综合网色| 精品五月天| 丁香五月综合| 天天色天天爽| 99性视频| 激情久久久久久| 啪色综合| 丁香五月婷婷综合91| 国产AV一区二区三区最新精品| 五月丁香婷婷激情图片| 在线五月婷婷小电影| 精品少妇蜜臀91| 婷婷五月影院| 久青青久| 先锋资源91| 丁香婷婷超碰| 99精品在线观看视频| 精品乱码久久久久| 九九综合| 成人精品在线| 97色婷婷成人综合在线观看| 天天干天天色天天干| 五月丁香免费看| 婷婷久久五月丁香| 91在线日| 大香蕉婷婷色| 99热在线观看免费精品| 影音先锋综合网| 婷婷王月天影院| AV片在线观看| 99热在线只有精品| av无码电影| 丁香五月六月婷婷综合| 色色色宗合网| 婷婷激情五月综合| 美女91一起草| 97精品自拍视频| 九九九日本熟女| 亚洲精品成人| 久久五月天精品视频| 五月天六月色| 激情五月天色色网| www.色婷婷| 激情视频综合| 月丁香久久久| 色色色在线观看| 在线观看av网站| 手机在线日韩视频中文字幕| 99色看| 97超级碰人人| 开心深爱激情网| 国产婷婷综合在线免费视频| 99热九九热| 东京热免费视频网站| 99热久草| 成人网站av免费网站推荐| 久久丁香久久| 五月婷婷|欧美| 99久久6| 色婷婷精品小视频| 久久久九九视频精品18| 五月婷婷狠狠干| 激情国产五月| 婷婷五月丁香综合激情| 色播播婷婷| 丁香五月婷婷网| 91Chinese在线| 成人.在线日韩| 女高怪谈在线观看| 亚洲黄色影视| 影音先锋男人女人| 9久久婷婷国产综合精品性色| 激情国产五月| 另类专区在线| 狠狠草综合网| 91尤物九色在线| 欧美成人精品三区综合A片| 91超级碰| 色情网综合| 天天操无码| 丁香五月婷婷成人色区| 国产一区二区三区影院| 日本色99| 九九亚洲天堂| 久久婷婷网站| 天天射色五月天| 综合久久综合久久| 色婷婷色综合久久精品V| 久久这里只有精品无码| 精品五月花| 九九热在线99| 五月开心深深爱激情综合| 欧美色激情四射| 五月天丁香综合久久国产| 久久精品99久久| 国产真人做爰视频免费| 思思热在线播放| 99热乎| 色99视| 国产毛片欧美毛片久久久| 婷婷射图五月天| av在线资源| 日本久碰| 中文中文在线| 天天看A片| 成人综合伍月天| 日日噜噜久久婷婷五月天 | 91欧美日韩| 9+1视频网址| 婷婷综合五月天| 五月社区婷婷激情| 播五月婷婷开心| 久久宗合影| 九九婷婷激情综合网| 婷婷五月天狠狠搞干| 五月色婷婷影院| 99操网站| 中文字幕无码AV| 九九久久99| 婷婷综合精品| 亚洲激情婷婷| 亚洲最大五月六月丁香婷婷| 无码色| 99综合一区| AAAA网站| 五月丁香五月婷婷在线观看| 精品成人久久久久久久_一二三四视| 五月花婷婷| 色婷婷久久| 五月天最新网| 操逼棍操逼| 五月丁香婷婷国产精品综合| 99热欧美精品| 99热免费18| 亚洲色无码A片一区二区麻豆| 狠狠干五月天| 可以观看的AV| 色播婷婷五月天| www.色五月天.com| 婷婷五月丁香五月天| 丁香五月天天| 91人人操| 国产亚洲99久久| 97人人干。| Aα在线免费观看| 丁香啪啪中文字幕| 国产av网| BBWCUCKOLD精品熟妇| 婷婷五月天激情电影| www。五月天。com| 伊人狠狠狠综合| 99综合99| 色婷婷九月综合| 五月婷婷五月天天| 久久久久久丁香五月| 九九色人| 五月婷婷激情综合| 99在线观看亚洲| 免费AAAAA网| 九九热亚洲中文在线观看免费| se.久久视频在线观看| 日本欧美成人片AAAA| 丁香六月婷婷综合激情欧美| 色色免费网战视频| 第四色五月天| 中文字幕激情综合| 久热成人| 国产av天堂| 99精品偷自拍| 五月激情四射网站| 精品九九网| 九九综合网色全集| 久久五月激情综合| 色婷婷婷av | 丁香大香蕉| 五月丁香啪啪| 99精品视频在线观看| 伊人婷婷大香蕉| 天天日综合| 日本人妻伦在线中文字幕| 激情综合色| 青青草国产亚洲精品久久| 五月婷婷大香蕉| 婷婷激情四射| 91狼友视频网页更新| 成人综合网站| 激情网色五月| 久久青草国| 99在线精品视频| 996er在线观看| 六月丁香激情综合网| 超碰免费成人| 婷婷五月天亚洲天堂| ww亚洲ww在线观看| 婷婷基地五月色| 天天爱综合网| 婷婷五月天久久| 欧类av怡春院| 九色无码| 这里只精品| 久久机热思思热| 五月婷六月| 97狠狠色| 中字幕视频在线永久在线观看免费| 免费黄色片子| 五月丁香六月| 99人人看| 99惹| www.五月.com| www.色婷婷.com| 激情综合丁香| 五月综合色| 爱婷婷五月| 99综合网| 久久桃花网色婷婷| 欧美69色| 66久久视频在线| 噜噜吧天天爱| 玖玖热视频| 99在线视频观看| 亚洲第一黄网| 成人视频婷婷| 久久久中文| 婷久久综合| 热的国产,热的综合,热的有码| 99精品视频在线免费观看| 色婷五月丁香久亚洲| 午夜丁香五月天综合| 五月婷婷六月丁香色| 日本丁香五月| 欧美婷婷丁香社区在线播放| 天天综合网色欲香| 3pAV| 五月丁香六月激情综合| 五月激情六月丁香| 午夜福利8055| 1995年关宝慧版蜘蛛女| 99热这里只有精品免费观看| 五月天婷婷基地| 亚洲日韩久久婷婷伊人| 91日综合欧美| 亚洲天天免费| a网站免费观看| 婷婷五月天丁香成人社区| 亚洲av网站| 色婷婷五月天偷拍| 日韩AV免费看| 色之综合网| 久久久999精品| 六月丁香啪| 99热欧| 色九网| 超碰色女人| 深夜激情网| 欧美私人家庭影院| 无码se| 色停停香蕉视频| 99热很操老逼| 五月婷婷综合网在线播放| 热99这就是精品视频| 99热精品在线| 91精品91久久久久77777| 亚洲啪啪视频| 五月婷丁香| 亚洲免费av观看| 亚洲最大五月天成人网| 99操逼视频| WWW.久久久久久久| 婷婷狠狠操| 超碰熟女农村在线69| 丁香五月激情婷婷视频| 久热视频这里只有精品| 丁香色婷婷| 午夜色婷婷| 久9久9久9久9久9久9| 亚洲无AV在线中文字幕| 99啪| 午夜九九九九九九九九九九九九九| 日日干天天爽| 亚洲国产色婷婷| 一级黄色影片| 99在线观看视频免费| 五月激情六月宗合| 丁香久久激情俄| 开心激情综合| 色吊丝中文字幕| 色播五月| 另类激情四射| 激情久久久久久| 色情综合| 俺去也综合| 99热永久在线观看| 99热这里是精品| 99爱在线| 五月天激情小说| 日本www五月婷婷| 韩国真做片在线观看| www.色五月.com| 伊人久久大香线蕉av最新| 殴美97色| 综合性爱网| 婷婷伊人综合中文字幕| 丁香六月综合| 色婷婷久久综| 婷婷五月丁香五月| 一本道综合网| 好吊兆人妻| 人妻无码精品一区| 激情久久久久久久久久| 丁香六月伊人| 丁香五月影视| 五月丁香网站| 深爱五月中文字幕| 日本在线观看aaa 99| 五月丁香六月婷婷中文版| 91色久| 啪啪五月天啪啪| 任你爽在线视频| 天堂综合久久| 色色色激情| 亚洲超碰在线| 天天撸夜夜爽| 青青草Avb在线| 人人干av| 怡红院91a√| 九九色99| 天天上天天爽| 草榴视频黄色网| 综激情网| 天天色天天爱天天舔| 综合色图区| 久久九九免费大视频| 免费黄色视频网址| 激情黄色小说五月天| 97人妻碰碰中文无码久热丝袜| 色色色色色日韩午夜激情| 99久久玖玖| 久热AA| 国产精品色情AAAAA片软件| 91综合国免费久入| 成人国产欧美大片一区| 五月婷婷熟女| 日韩国产在线免费观看| 久久婷婷五月综合啪| 99人人操| 激情五月天婷婷| 99热精品在线免费观看| 五月丁香A∨在线| 色播婷婷大香蕉| 五月天在线视频尤物视频在线看| 第四色在线观看| 97色在线观看视频| 五月婷丁香在线视频在线| 国产又黄又爽又色的免费| 开心日韩丁香婷婷五月| 综合色图婷婷| 91色吧网| 日韩av大全| aaa久久| 思思干精品| 成人电影一区| 在线观看中文字幕| 天天搽天天射| 大香蕉天堂| 97人碰人操| 超碰AV在线| 免费不卡狠操美女视频网| 超色欲天天| 久草婷婷网 | 色婷婷WWW| 丁香五月天社区婷婷| 欧美丁香五月夫妻天| 成人婷99最新| 性爱五月婷婷| 无码日本精品XXXXXXXXX | 五月综合激情视频| 狠狠艹狠狠艹| 婷婷五月天亚洲综合| 色婷婷久久| 99热国产免费| 六月婷婷激情小说网| 正宗黄色毛片| 一起草AV| 大香蕉天堂| 中文字幕色色| 激情 婷婷 插| 五月天婷婷综合久久| 色啪久| 99re视频精品| 五月天自拍视频| 色婷婷99| YJLZZJLZZ亚洲乱熟无码| 国产XXXX搡XXXXX搡麻豆| 99re思思久久| 丁香六月无码| 色婷婷国色天香综合| 日本毛片内射| 91丨九色丨国产| 日韩AV免费电影在线播放| 狠狠五月天| 激情六月婷| 天天色天天噜| 天天更新天天亚洲| 五月婷婷五月天激情视频| 99精品手机在线视频| 天天影院色| 任我肏| 97在线刺激| 97碰| 色五月丁香婷婷| 婷婷五月天在线一区| 狠狠草天天草| 激情丁香五月婷| 久久er这里只有精品| 婷婷五月中文字幕| 99视频在线看| 丁香六月综合| 婷婷丁香黄色| 狠狠色噜噜狠狠亚洲A∨| 色99视频| 亚洲综合另类| 久热中文字幕| ww久久| 永久精品| 97色色色| 蜜桃成语时李时珍 免费| 婷婷玖玖五月天| 婷婷五月天影视首页| 亚洲人人操BD| 五月婷婷自拍视频| 色五月婷婷久久| 天天日天天干天天天| 日日操,日日爽| 深爱激情九九五月天 | 国外亚洲成AV人片在线观看| 99碰碰视频| 性欧美日本| 二色av| 色婷婷电影| 在线理论片| 久久性都花花世界成人免费视频| 九九aV| 国产全是老熟女太爽了| 日本五月婷婷| BBWCUCKOLD精品熟妇| 婷婷五月天丁香| 嫩BBB槡BBBB搡BBBB| 五月色婷婷影院| 99热这里| 色播五月| 丁香婷婷综合激情五月色| 99精品热| 最近免费中文字幕大全高清大全1 免费看欧美成人A片无码 | 爱iii做iiii日| 激情五月婷色| 亚洲成人一区| 另类五月婷婷| 色丁香六月| 综合XX网| 五月天大香蕉| 六月五月天婷婷涩播在线| 亚洲亚洲人成综合网络| 婷婷综合视频| 久久婷综| 91在线日本| 99色这里| 深爱激情网噜噜色| 成人AV中文字幕| 人人播| 婷婷综合天堂| 久久五月激情综合| 九月丁香婷婷综合激情| a色色色色色| 色噜噜在线| 91视频精品99| 九九在线视频| 五月天另类图片区99| 婷婷亚洲久久| 亚洲综合新99视频| 99热这里只有精品2| 色噜噜五月天| 26uuu日韩| www.九九婷婷| 丁香六月婷婷综合| 丁香婷婷综合激情五月色| 五月涩涩网| 色五月首页| 五月天开心色色网| 色综合激情| av在线色五月丁香婷区久| 五月天影院| 色狠狠综合| 日韩久久日| 色热久资源| 五月婷亚洲精品| 婷婷免费视频| www.com任你艹| 日操| 91大神操美女| seav天堂| 综合激情伊人影视在线| 热99视频精品| 日本不卡中文字幕| 五月天激情美女久久| 亚洲免费av观看| 五月天婷婷色紫薇阁| SS丁香五月婷婷| 在线99热| 激情丁香五月AV| 丁香婷婷偷拍| 99热超碰在线| 成人视频免费观看高清完整版在线观看| 亚洲色9| 日韩啊啊啊| 天天色中文字幕女优AV| 丁香五月婷婷激情蜜桃| 97干欧美| 亚洲亚洲永久无码777777| 五月天婷婷綜合院| 丁香六月成人| 99热99思午夜精品| 久久人人九九| 免费AV在线网址| 色婷婷婷av| 国产成人av在线| 五月丁香综合成人社区| 九九综合九九| 色欲午夜无码久久久久久张津瑜| 婷婷婷婷婷婷婷五月丁香| 五月婷婷久久大片| VA婷婷| 亚洲精品成人| 百度4399有码精品V在线观看| 狠狠色丁香久久久婷| 日韩小视频在线99| 大地9中文在线观看免费高清| 日韩不卡123| 中海油常州环保涂料有限公司| 亭亭五月激情亚洲在线| 成人在线网址| 婷婷色色欧美| 五月婷婷六月丁香综合| 91久操| 99操逼视频| 另类图片五月天| 狠狠久综合| 少妇人妻综合色6699| 婷婷五月天电影网| 亚洲午夜视频| 丁香六月啪啪啪| 日本44久久在线| 五月婷婷激清网| 六月婷婷综合网2| 丁香五月第九色| 国产毛多水多女人A片| 中文字幕成| 激情99| 在线99精品| 色婷婷综合视频| www超碰com| 色五狠狠| 精品一二三区久久AAA片| 99热都是精品| 思思久久精品| 99热婷婷| 99爱在线视频| wWwCom夜操wwW| 激情丁香五月婷婷| 亚洲色色爱| 国产99久久久国产精品免费看| 一区二区三区四区牛| 伊人日日干| 色综合久久久无码中文字幕999| 伊九九三级区| 99这里都是精品6| 99操| 激情五月综合网| 美女婷婷六月色| 秋霞AV吧| 色欲天天综合| 日本理论久久| 97碰碰视频在线观看免费| 婷婷中文综合网| 久久人妻久久| 色综合久网| 91操片| 久久97| 国产精品第一国产精品| WWW.激情| 九九AV| 天天插天天很| 五月婷婷av在线| 久久九九色| 色婷婷久久天天性爱| 久色激情| 丁香久久| 另类少妇人与禽zOZZ0性伦| 99,色| 女人高潮内射99精品| 丁香五月AV在线| 午夜不卡久久精品无码免费| sS丁香五月婷婷| 99碰碰| dingxiangtingtingliuyue| 久久A极片| 久久婷婷综合五月趴| 亚洲区在线| 99在线免费视频| 五月色婷婷亚洲 | 天天拍夜夜撸| 亚洲成人丁香花| 停停五月色宗合| 色波激情五月天| 免费黄网不卡AV| 丁香久月| WWW.桔色成人.COM入口| 婷婷深爱五月天| 激情五月亚洲| 久久久久久久久久91| 91黄址| 激情久久久| 丁香五月激情久久麻豆| 久久人妻系列| 噜噜狠狠色综合久| 色色五月婷婷| 婷婷丁香色情| 操B五月天| 色五月天 丁香| 日本欧美在线| 人人操人人爱丁香五月| 91久久国产综合久久|