免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Tmux自動(dòng)保存會(huì)話日志:原理、配置與生產(chǎn)環(huán)境實(shí)踐

Tmux自動(dòng)保存會(huì)話日志:原理、配置與生產(chǎn)環(huán)境實(shí)踐 1. 為什么需要自動(dòng)保存Tmux會(huì)話日志如果你和我一樣日常開發(fā)、運(yùn)維或者長(zhǎng)時(shí)間跑任務(wù)都離不開Tmux那你肯定遇到過(guò)這種糟心事一個(gè)跑了三天三夜的編譯任務(wù)或者一個(gè)正在調(diào)試的復(fù)雜服務(wù)因?yàn)榫W(wǎng)絡(luò)閃斷、終端意外關(guān)閉甚至只是手滑關(guān)掉了終端窗口整個(gè)Tmux會(huì)話連同里面所有寶貴的輸出信息瞬間消失。更讓人抓狂的是有時(shí)候一個(gè)關(guān)鍵的錯(cuò)誤信息就在你眼皮子底下閃過(guò)還沒(méi)來(lái)得及細(xì)看就被后續(xù)的日志刷掉了。這時(shí)候你恨不得能把屏幕上的每一個(gè)字符都“焊”下來(lái)。這就是我們今天要解決的問(wèn)題。Tmux本身是一個(gè)強(qiáng)大的終端復(fù)用器它能讓會(huì)話在后臺(tái)持續(xù)運(yùn)行但它默認(rèn)并不負(fù)責(zé)把屏幕上滾過(guò)的所有內(nèi)容持久化到磁盤。script命令是一個(gè)經(jīng)典的解決方案它能記錄終端的所有輸入輸出但把它和Tmux優(yōu)雅地結(jié)合起來(lái)實(shí)現(xiàn)“無(wú)感”的、自動(dòng)化的日志記錄里面有不少門道。比如如何為每個(gè)Tmux窗口或窗格單獨(dú)生成日志文件如何避免日志文件無(wú)限膨脹如何讓這個(gè)機(jī)制在每次啟動(dòng)Tmux時(shí)自動(dòng)生效而不需要你手動(dòng)敲一堆命令最近在社區(qū)里關(guān)于“mobaxterm保存日志”、“vs調(diào)試信息保存到日志文檔同時(shí)打印顯示”的討論也很多這說(shuō)明大家對(duì)于終端輸出持久化的需求是普遍且強(qiáng)烈的。尤其是當(dāng)你在處理“慢查詢?nèi)罩尽狈治?、“redis日志”監(jiān)控或者排查“android保存異常前后關(guān)鍵日志、內(nèi)核異?!边@類復(fù)雜問(wèn)題時(shí)一份完整的、按時(shí)間或會(huì)話組織的終端記錄其價(jià)值不亞于一份詳細(xì)的調(diào)試報(bào)告。所以這篇文章的目的就是分享一套我經(jīng)過(guò)多年實(shí)踐打磨出來(lái)的、在Linux環(huán)境下為Tmux會(huì)話自動(dòng)保存日志的完整方案。我會(huì)從最核心的原理講起一步步拆解配置方法并重點(diǎn)分享那些容易踩坑的細(xì)節(jié)和高級(jí)用法讓你不僅能“抄作業(yè)”更能理解背后的“所以然”。2. Tmux日志記錄的核心原理與工具選型在動(dòng)手之前我們必須搞清楚兩件事第一Tmux本身是如何處理屏幕內(nèi)容的第二有哪些工具可以捕獲這些內(nèi)容。Tmux的核心是一個(gè)客戶端-服務(wù)器模型。當(dāng)你運(yùn)行tmux命令時(shí)會(huì)啟動(dòng)一個(gè)服務(wù)器進(jìn)程tmux server。這個(gè)服務(wù)器管理著所有的會(huì)話session、窗口window和窗格pane。你在終端里看到的實(shí)際上是Tmux客戶端渲染出的一個(gè)“視圖”。所有在窗格中運(yùn)行的進(jìn)程比如bash, vim, top的輸出都會(huì)先被Tmux服務(wù)器捕獲然后再轉(zhuǎn)發(fā)給連接的客戶端進(jìn)行顯示。這就給我們提供了兩個(gè)攔截日志的切入點(diǎn)在進(jìn)程層面攔截在進(jìn)程如bash和Tmux服務(wù)器之間插入一個(gè)記錄器。這就是script命令的工作方式。script會(huì)啟動(dòng)一個(gè)新的shell并記錄這個(gè)shell及其所有子進(jìn)程的所有輸入輸出。在Tmux層面攔截直接讓Tmux服務(wù)器把它要發(fā)送給客戶端的內(nèi)容額外保存一份到文件。Tmux內(nèi)置了pipe-pane命令和capture-pane命令可以做到這一點(diǎn)。方案對(duì)比與選型script命令方案原理通過(guò)exec script -f log.txt替換當(dāng)前窗格的shell開始記錄。優(yōu)點(diǎn)記錄非常原始和完整包括控制字符、顏色碼如果使用-f參數(shù)。它是操作系統(tǒng)自帶工具無(wú)需額外安裝。缺點(diǎn)與Tmux結(jié)合時(shí)需要一些技巧。一個(gè)script進(jìn)程只記錄一個(gè)窗格。如果直接在~/.bash_profile里啟動(dòng)script可能會(huì)遇到遞歸調(diào)用或記錄不完整的問(wèn)題比如“vi ~/.bash_profile 報(bào)錯(cuò)e325: attention”這種錯(cuò)誤可能就和環(huán)境變量或終端狀態(tài)被script改變有關(guān)。Tmux內(nèi)置pipe-pane方案原理在Tmux內(nèi)部使用pipe-pane命令將一個(gè)窗格的輸出實(shí)時(shí)管道傳輸pipe到一個(gè)外部命令如cat log.txt或文件中。優(yōu)點(diǎn)與Tmux原生集成配置靈活可以綁定到快捷鍵可以方便地為不同窗格指定不同日志文件。缺點(diǎn)默認(rèn)可能不記錄窗格中更早的歷史內(nèi)容需要結(jié)合capture-pane -S -來(lái)保存初始內(nèi)容。對(duì)于已經(jīng)存在的窗格需要手動(dòng)開啟。Tmux內(nèi)置capture-pane方案原理將窗格當(dāng)前可見(jiàn)或指定范圍的內(nèi)容一次性捕獲并保存到Tmux的緩沖區(qū)或文件中。通常用于快照而非持續(xù)流式記錄。優(yōu)點(diǎn)適合定時(shí)備份或手動(dòng)保存特定時(shí)刻的輸出。缺點(diǎn)不是自動(dòng)的持續(xù)記錄。我的選擇與理由對(duì)于“自動(dòng)保存”這個(gè)核心需求pipe-pane方案是更優(yōu)雅、更貼合Tmux哲學(xué)的選擇。它允許我們?cè)赥mux會(huì)話的生命周期內(nèi)動(dòng)態(tài)地控制日志記錄并且可以很容易地通過(guò)Tmux配置文件~/.tmux.conf實(shí)現(xiàn)自動(dòng)化。script命令更適合在非Tmux環(huán)境或者對(duì)記錄格式有非常嚴(yán)格要求的場(chǎng)景下使用。因此接下來(lái)的實(shí)戰(zhàn)將圍繞Tmux的pipe-pane命令展開。我們會(huì)設(shè)計(jì)一個(gè)機(jī)制每當(dāng)創(chuàng)建一個(gè)新的Tmux窗格時(shí)自動(dòng)為其啟動(dòng)日志記錄并將日志文件以“會(huì)話名-窗口索引-窗格索引-時(shí)間戳”的格式保存到指定目錄。這樣日志不僅自動(dòng)保存了還具備了良好的可追溯性。3. 實(shí)戰(zhàn)配置實(shí)現(xiàn)Tmux窗格日志自動(dòng)記錄理論清晰了現(xiàn)在我們來(lái)動(dòng)手實(shí)現(xiàn)。我們的目標(biāo)是修改Tmux的配置文件使得任何新創(chuàng)建的窗格都能自動(dòng)開始將輸出記錄到獨(dú)立的日志文件中。3.1 基礎(chǔ)環(huán)境與配置文件準(zhǔn)備首先確保你有一個(gè)可用的Tmux環(huán)境。大部分Linux發(fā)行版都可以通過(guò)包管理器安裝。例如在CentOS/Rocky Linux上sudo yum install tmux在Ubuntu/Debian上sudo apt install tmux。Tmux的核心配置文件是用戶家目錄下的~/.tmux.conf。如果不存在創(chuàng)建它touch ~/.tmux.conf所有后續(xù)的配置都將寫入這個(gè)文件。修改后需要重啟Tmux服務(wù)器tmux kill-server然后重新進(jìn)入或在現(xiàn)有會(huì)話中按前綴鍵默認(rèn)是Ctrlb后輸入:source-file ~/.tmux.conf來(lái)重新加載配置。3.2 核心配置腳本解析我們將把自動(dòng)日志記錄的邏輯寫成一個(gè)Tmux的“鉤子”hook綁定到“窗格創(chuàng)建完成”這個(gè)事件上。以下是完整的配置段落你可以直接添加到你的~/.tmux.conf文件末尾# ~/.tmux.conf - 自動(dòng)日志記錄配置 # 1. 定義日志存儲(chǔ)目錄 set -g log_dir “$HOME/.tmux/logs” # 使用$HOME變量兼容性更好 # 2. 創(chuàng)建日志目錄如果不存在 run-shell “mkdir -p #{log_dir} 2/dev/null || true” # 3. 定義自動(dòng)開啟日志記錄的函數(shù)/命令 set -g plugin ‘tmux-plugins/tmux-logging’ # 注意上面這行是如果你使用Tmux Plugin Manager (TPM)來(lái)安裝插件時(shí)的寫法。 # 但我們這里采用純配置實(shí)現(xiàn)不依賴外部插件所以可以注釋掉或刪除。 # 4. 核心為每個(gè)新窗格綁定自動(dòng)日志記錄 set-hook -g after-new-window ‘run-shell “tmux pipe-pane -t #{session_name}:#{window_index}.#{pane_index} ‘exec cat #{log_dir}/#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d_%H%M%S).log”’ set-hook -g pane-focus-in ‘if-shell -F “#{:#{pane_start_command},}” “run-shell ‘tmux pipe-pane -t #{session_name}:#{window_index}.#{pane_index} ‘exec cat #{log_dir}/#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d_%H%M%S).log’’”’配置逐行詳解第1行set -g log_dir “$HOME/.tmux/logs”-g表示全局設(shè)置。log_dir是我們自定義的一個(gè)Tmux用戶選項(xiàng)user option用來(lái)存儲(chǔ)日志目錄路徑。我選擇$HOME/.tmux/logs因?yàn)樗[藏在用戶目錄下且與Tmux相關(guān)。你可以根據(jù)習(xí)慣修改為/var/log/tmux需要sudo權(quán)限或$HOME/logs/tmux。使用$HOME而不是~因?yàn)樵赥mux配置中~可能不會(huì)被正確展開。第2行run-shell “mkdir -p #{log_dir} 2/dev/null || true”這是一個(gè)在加載配置時(shí)執(zhí)行的shell命令。mkdir -p確保日志目錄存在-p參數(shù)表示如果父目錄不存在則一并創(chuàng)建。2/dev/null將錯(cuò)誤輸出比如目錄已存在重定向到空設(shè)備避免干擾。|| true確保即使命令失敗極少數(shù)情況也不會(huì)導(dǎo)致整個(gè)配置加載失敗。第4-5行set-hook -g after-new-window …和set-hook -g pane-focus-in …這是實(shí)現(xiàn)自動(dòng)化的關(guān)鍵。set-hook用于綁定事件。after-new-window在新建窗口后觸發(fā)。注意在Tmux中新建窗口時(shí)會(huì)自動(dòng)創(chuàng)建一個(gè)窗格所以這個(gè)鉤子能捕獲到新窗格的創(chuàng)建。pane-focus-in當(dāng)焦點(diǎn)進(jìn)入一個(gè)窗格時(shí)觸發(fā)。我們配合條件判斷使用目的是為了處理那些在會(huì)話恢復(fù)tmux attach時(shí)已經(jīng)存在但尚未開始記錄的舊窗格。if-shell -F “#{:#{pane_start_command},}”這是一個(gè)條件判斷。#{pane_start_command}是窗格啟動(dòng)時(shí)運(yùn)行的初始命令。如果它為空通常意味著這個(gè)窗格啟動(dòng)的是一個(gè)默認(rèn)shell比如bash并且我們預(yù)設(shè)的日志記錄命令pipe-pane還沒(méi)有運(yùn)行。這個(gè)條件判斷可以防止對(duì)已經(jīng)開啟日志記錄的窗格重復(fù)執(zhí)行命令。run-shell ‘tmux pipe-pane …’這是實(shí)際執(zhí)行日志記錄的命令。我們通過(guò)run-shell在Tmux內(nèi)部調(diào)用tmux命令本身。pipe-pane命令詳解-t #{session_name}:#{window_index}.#{pane_index}-t指定目標(biāo)。#{session_name},#{window_index},#{pane_index}是Tmux提供的格式變量能唯一標(biāo)識(shí)當(dāng)前窗格。這確保了命令作用于正確的窗格。‘exec cat #{log_dir}/#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d_%H%M%S).log’這是pipe-pane要執(zhí)行的命令。exec cat file這是一個(gè)經(jīng)典的技巧。exec會(huì)讓當(dāng)前shell進(jìn)程被cat命令替換cat從標(biāo)準(zhǔn)輸入讀取數(shù)據(jù)并追加到文件。這樣窗格的輸出流就通過(guò)管道源源不斷地寫入日志文件。使用是追加模式避免覆蓋。文件名模板#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d_%H%M%S).log#{session_name}會(huì)話名如mysession。W#{window_index}窗口索引從0開始如W0。P#{pane_index}窗格索引從0開始如P0。$(date %Y%m%d_%H%M%S)執(zhí)行命令時(shí)的時(shí)間戳精確到秒。例如20231026_143022。這是關(guān)鍵它為每次日志記錄會(huì)話生成唯一文件名避免了多個(gè)窗格或多次記錄相互覆蓋。也方便你按時(shí)間查找日志。重要提示上面的配置使用了兩個(gè)鉤子并且pane-focus-in里的命令和after-new-window里的幾乎一樣。在實(shí)際測(cè)試中我發(fā)現(xiàn)有時(shí)僅靠after-new-window在復(fù)雜場(chǎng)景如從已有會(huì)話恢復(fù)下可能不夠可靠。pane-focus-in作為一個(gè)補(bǔ)充觸發(fā)器能確保當(dāng)你切換到某個(gè)未開始記錄的舊窗格時(shí)自動(dòng)為其開啟日志。這是一種防御性編程思維。3.3 配置驗(yàn)證與手動(dòng)控制添加配置并重載后新建一個(gè)Tmux窗口或窗格然后立刻檢查日志目錄ls -la ~/.tmux/logs/你應(yīng)該能看到類似mysession_W0_P0_20231026_143022.log的文件正在被創(chuàng)建并且文件大小會(huì)隨著你在該窗格中的操作而增長(zhǎng)。手動(dòng)控制命令 雖然配置是自動(dòng)的但了解手動(dòng)命令對(duì)調(diào)試和高級(jí)管理很有幫助。為指定窗格開啟日志記錄在Tmux會(huì)話內(nèi)按前綴鍵后輸入:pipe-pane -o ‘exec cat /tmp/tmux.log’-o參數(shù)表示僅輸出不記錄輸入。如果你需要記錄輸入即你敲的命令可以去掉-o但要注意這可能會(huì)記錄密碼等敏感信息停止當(dāng)前窗格的日志記錄:pipe-pane不帶任何參數(shù)的pipe-pane命令會(huì)關(guān)閉當(dāng)前窗格的管道。查看當(dāng)前窗格是否正在記錄:display-message “#{pane_in_mode}”如果返回1通常表示該窗格正處于某種特殊模式如復(fù)制模式或…正在管道傳輸。但這不是一個(gè)百分百準(zhǔn)確的指標(biāo)。更直接的方法是查看進(jìn)程樹pstree或檢查日志文件是否在增長(zhǎng)。4. 高級(jí)優(yōu)化與常見(jiàn)問(wèn)題排查基礎(chǔ)功能實(shí)現(xiàn)了但在生產(chǎn)環(huán)境長(zhǎng)期使用我們還需要考慮更多日志輪轉(zhuǎn)、性能影響、異常處理等。下面分享幾個(gè)我踩過(guò)坑后總結(jié)的優(yōu)化點(diǎn)。4.1 日志輪轉(zhuǎn)與清理策略日志文件不加以管理遲早會(huì)撐爆磁盤。我們不應(yīng)該在Tmux配置里做復(fù)雜的日志輪轉(zhuǎn)如logrotate那應(yīng)該是系統(tǒng)層面的任務(wù)。但我們可以通過(guò)優(yōu)化日志生成策略來(lái)配合。1. 按日或按會(huì)話分割日志上述配置使用了精確到秒的時(shí)間戳這會(huì)導(dǎo)致大量小文件。一個(gè)更好的策略是按天分割。修改pipe-pane命令中的文件名部分‘exec cat #{log_dir}/#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d).log’這樣同一天同一個(gè)窗格的所有輸出都會(huì)進(jìn)入同一個(gè)文件。文件大小可控也便于按天歸檔。2. 集成系統(tǒng)logrotate在/etc/logrotate.d/下創(chuàng)建一個(gè)配置文件例如tmux$HOME/.tmux/logs/*.log { daily missingok rotate 30 compress delaycompress notifempty create 0640 $USER $USER }這個(gè)配置會(huì)每天輪轉(zhuǎn)日志保留30天并壓縮舊日志。create指令確保新創(chuàng)建的日志文件權(quán)限正確。3. 在Tmux會(huì)話結(jié)束時(shí)清理有時(shí)一個(gè)臨時(shí)會(huì)話的日志無(wú)需保留??梢栽O(shè)置一個(gè)鉤子在會(huì)話銷毀時(shí)刪除其對(duì)應(yīng)的日志文件。但這需要更復(fù)雜的腳本因?yàn)橐粋€(gè)日志文件可能對(duì)應(yīng)多個(gè)窗格且會(huì)話名可能重復(fù)。一個(gè)更簡(jiǎn)單的做法是定期手動(dòng)清理或依賴上面的logrotate。4.2 性能影響與注意事項(xiàng)I/O負(fù)載pipe-pane會(huì)將所有輸出實(shí)時(shí)寫入磁盤。對(duì)于輸出極其頻繁的窗格例如tail -f一個(gè)巨大的日志文件這可能會(huì)增加I/O壓力。在機(jī)械硬盤上需要留意。對(duì)于絕大多數(shù)開發(fā)、運(yùn)維操作影響微乎其微。網(wǎng)絡(luò)延遲感知寫入本地磁盤通常很快但如果日志目錄位于網(wǎng)絡(luò)存儲(chǔ)NFS上可能會(huì)引入延遲極端情況下可能讓終端感覺(jué)“卡頓”。磁盤空間監(jiān)控務(wù)必監(jiān)控日志目錄所在磁盤的空間使用情況??梢詫懸粋€(gè)簡(jiǎn)單的cron任務(wù)或systemd timer來(lái)檢查并報(bào)警。敏感信息泄露切記這會(huì)記錄終端上顯示的所有明文信息包括你輸入的密碼、密鑰、API Token等。因此避免在開啟自動(dòng)日志的Tmux窗格中輸入密碼。使用ssh-agent,gpg-agent或交互式密碼輸入工具。考慮使用pipe-pane -o只記錄輸出不記錄輸入。但輸入的命令行本身也常是調(diào)試的關(guān)鍵信息這需要權(quán)衡。確保日志目錄的權(quán)限設(shè)置正確如700僅允許所有者讀寫。對(duì)于包含敏感信息的臨時(shí)會(huì)話可以在創(chuàng)建會(huì)話時(shí)臨時(shí)禁用自動(dòng)日志或者事后安全地刪除日志文件。4.3 常見(jiàn)問(wèn)題與排查指南即使配置正確也可能遇到問(wèn)題。下面是一些典型場(chǎng)景和排查思路。問(wèn)題1日志文件沒(méi)有創(chuàng)建或沒(méi)有內(nèi)容。檢查配置是否加載在Tmux中按Ctrlb然后輸入:show-options -g log_dir查看log_dir變量是否設(shè)置正確。檢查目錄權(quán)限運(yùn)行l(wèi)s -ld ~/.tmux/logs/確保目錄存在且當(dāng)前用戶有寫權(quán)限。檢查鉤子是否觸發(fā)可以暫時(shí)在鉤子命令中加入調(diào)試信息。例如將run-shell部分改為run-shell “echo ‘Hook triggered for #{session_name}:#{window_index}.#{pane_index} at $(date)’ /tmp/tmux-hooks.log”然后新建窗格查看/tmp/tmux-hooks.log文件是否有輸出。這能幫你確認(rèn)是配置沒(méi)生效還是pipe-pane命令本身有問(wèn)題。檢查pipe-pane命令語(yǔ)法Tmux命令對(duì)引號(hào)嵌套非常敏感。確保你的配置文件中引號(hào)是匹配的。建議使用單引號(hào)包裹整個(gè)exec cat …命令就像示例中那樣。查看Tmux服務(wù)器日志啟動(dòng)Tmux時(shí)加上-vv參數(shù)tmux -vv new-session可以輸出詳細(xì)日志到標(biāo)準(zhǔn)錯(cuò)誤或文件有助于診斷。問(wèn)題2日志記錄意外停止。窗格中的進(jìn)程崩潰或結(jié)束如果窗格中的主進(jìn)程如bash退出pipe-pane的管道也會(huì)終止。這是預(yù)期行為。手動(dòng)誤關(guān)閉不小心在窗格中執(zhí)行了不帶參數(shù)的:pipe-pane命令。Tmux服務(wù)器重啟如果Tmux服務(wù)器重啟所有窗格的管道狀態(tài)會(huì)丟失。我們的pane-focus-in鉤子會(huì)在你重新聚焦時(shí)嘗試恢復(fù)但前提是窗格還在。問(wèn)題3如何為已經(jīng)存在的舊會(huì)話/窗格開啟自動(dòng)日志我們的pane-focus-in鉤子就是為了解決這個(gè)問(wèn)題。你只需要切換到那個(gè)舊的窗格鉤子就會(huì)觸發(fā)如果條件滿足。如果沒(méi)觸發(fā)可以手動(dòng)執(zhí)行一次:pipe-pane -o ‘exec cat …’命令。問(wèn)題4我想記錄更早的、創(chuàng)建日志之前的內(nèi)容。pipe-pane只記錄從命令執(zhí)行后開始的內(nèi)容。如果你想保存窗格中當(dāng)前已有的回滾歷史scrollback可以在開啟持續(xù)記錄前先手動(dòng)保存一次快照# 在目標(biāo)窗格中先按前綴鍵(Ctrlb)然后輸入 :capture-pane -S -300 # 捕獲從300行之前到現(xiàn)在的所有內(nèi)容 :save-buffer ~/.tmux/logs/history_snapshot.log # 保存到文件 # 然后再開啟pipe-pane進(jìn)行持續(xù)記錄5. 延伸應(yīng)用打造終端工作流與日志分析自動(dòng)日志記錄不僅僅是一個(gè)“備份”功能。當(dāng)它成為你工作流的一部分時(shí)可以解鎖更多高效用法。5.1 與監(jiān)控和告警集成想象一下你有一個(gè)在Tmux窗格中長(zhǎng)時(shí)間運(yùn)行的后臺(tái)任務(wù)比如一個(gè)數(shù)據(jù)處理的Python腳本。你可以結(jié)合簡(jiǎn)單的shell腳本來(lái)監(jiān)控日志#!/bin/bash # monitor_tmux_log.sh LOG_DIR“$HOME/.tmux/logs” SESSION“data_processing” WINDOW0 PANE0 LOG_FILE$(ls -t “$LOG_DIR”/${SESSION}_W${WINDOW}_P${PANE}_*.log 2/dev/null | head -1) if [ -z “$LOG_FILE” ]; then echo “No log file found for ${SESSION}:${WINDOW}.${PANE}” exit 1 fi # 持續(xù)監(jiān)控日志文件查找錯(cuò)誤關(guān)鍵詞 tail -F “$LOG_FILE” | while read line; do if echo “$line” | grep -q “ERROR\|CRITICAL\|FAILED”; then # 發(fā)送告警例如通過(guò)郵件、Slack webhook等 echo “ALERT found in $LOG_FILE: $line” | mail -s “Tmux Task Alert” your-emailexample.com # 或者播放一個(gè)聲音 paplay /usr/share/sounds/freedesktop/stereo/alarm-clock-elapsed.oga 2/dev/null fi done這個(gè)腳本會(huì)找到指定窗格最新的日志文件然后tail -F持續(xù)跟蹤一旦發(fā)現(xiàn)包含“ERROR”等關(guān)鍵詞的行就觸發(fā)告警。你可以用cron或systemd服務(wù)來(lái)啟動(dòng)這個(gè)監(jiān)控腳本。5.2 基于日志的復(fù)盤與知識(shí)管理每天下班前花5分鐘瀏覽一下~/.tmux/logs/目錄下的日志。你可能會(huì)發(fā)現(xiàn)某個(gè)復(fù)雜命令的成功參數(shù)組合。一個(gè)之前花了半小時(shí)解決的錯(cuò)誤其解決方案被完整記錄了下來(lái)。一段有用的代碼片段或配置輸出。你可以建立一個(gè)簡(jiǎn)單的知識(shí)庫(kù)將有價(jià)值的日志片段整理歸檔。例如用一個(gè)筆記軟件如Obsidian, Logseq或一個(gè)簡(jiǎn)單的Git倉(cāng)庫(kù)來(lái)管理。給日志文件配上好的命名規(guī)范我們之前的配置已經(jīng)做到了搜索起來(lái)會(huì)非常方便。5.3 替代方案淺析何時(shí)不用Tmux內(nèi)置方案雖然pipe-pane方案很優(yōu)雅但有些場(chǎng)景下你可能需要考慮其他工具需要記錄精確時(shí)序和終端控制序列如果你在做終端應(yīng)用的性能分析或錄制終端操作視頻script命令的-t參數(shù)可以輸出帶時(shí)間戳的數(shù)據(jù)流配合scriptreplay可以完美回放。這是pipe-pane難以替代的。環(huán)境限制無(wú)法修改Tmux配置比如在臨時(shí)租賃的服務(wù)器或嚴(yán)格管控的環(huán)境。這時(shí)你可以在啟動(dòng)Tmux之前先用script命令包裝script -f my_session.log tmux new-session -s mysession這樣整個(gè)Tmux會(huì)話包括所有子窗口的輸出都會(huì)被記錄到一個(gè)文件。缺點(diǎn)是所有窗格混在一起且文件會(huì)非常大。使用第三方終端復(fù)用器比如screen命令。screen也有類似的日志功能Ctrla, H開始/停止記錄但功能和集成度不如Tmux的pipe-pane靈活。最后再分享一個(gè)我個(gè)人的小技巧我會(huì)在~/.bash_profile或~/.zshrc里設(shè)置一個(gè)別名快速搜索今天的Tmux日志alias tlog“grep -r ‘\$1’ ~/.tmux/logs/*$(date %Y%m%d)*.log 2/dev/null | head -20”這樣在終端里輸入tlog “Connection refused”就能快速搜索今天所有Tmux日志里出現(xiàn)的連接錯(cuò)誤對(duì)于問(wèn)題排查來(lái)說(shuō)效率極高。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
久久九九婷婷| 天天射综合网站| 六月色婷婷| 久热九九| 天堂久久性| 欧美电影在线观看| 激情五月婷婷网| 天天开心AV色综合婷婷五月天| 五月婷婷影| 五月婷婷综合激情小说| 丁香五月性| www.com五月天| 六月婷婷网| 国内久久亭亭| 伊人久久大香天蕉亚洲特级| 久久久人人操A V| 99热这里有精品| 五月久视频| 五月色丁香成人| 色婷婷a v| 无码字幕中文| 久久久精品免费啪啪国| 亚洲成人AV电影在线| 在线婷婷| 玖玖资源在线视频| 五月天综合色| 五月天偷拍| 综合色色网| 久 久9 9 热 视 频| 思思久久网| 色婷婷综合影院| 欲求不满的人妻| 99网| av在线婷婷| 久操热线| 99视频在线观看地址| 亚洲免费婷婷| AA丁香综合激情| 欧美在线97| 色婷婷69| 色综合色综合网| 人人干人人看| 日韩精品无码一区二区| 婷婷色色欧美综合网| 老司机日日夜夜青草| 五月天开心网| 97色婷婷| 99在线精品免费视频| 91碰碰碰| 亚洲黄色操逼| 成人午夜免费电影| 久久久人妻久久久| 五月天开心婷婷久久| 色9色| 激情网 五月天| 六月婷五月丁香| 婷婷色色综合激情| 久久久久久久合一狠狠做深爱| WWW.色婷婷.COM| 日日操人人操| www.色婷婷.com| 五月婷婷偷拍| 亚洲亚洲人成综合网络| 91精品久| 婷婷五月激情综合| 丁香综合网| 婷婷五月天视频亚洲| 亚洲国产精品VA在线看黑人| 丁香五月Av| 久久久久er热| 影音先锋五月天婷婷丁香在线观看| 在线综合啪| 丁香香五月激情免费视频| jiqingtaose五月天| 丁香五月激情六月欧亚激情综合导航| 激情五月五月五月婷婷| 99在线免费视频| 久久婷婷五月天| 二色av| 99热99精品在线观看| 婷婷五月天最新网址| 久久九⑨| 天天草婷婷五月| 天天久久综合| 啪啪综合网| 最近中文字幕大全免费版在线 | 一本久道综合99| 九九碰九九爱97超碰| 天天做天天双| 色婷婷9| 婷婷亚洲综合| 麻豆雪千夏| www,五月天com| 黑人糟蹋人妻HD中文字幕| 大香蕉啪啪啪| 99色综合网| 五月婷婷成人网首页| 丁香婷婷婷五月| 无码人妻电影| 9|在线观看视频| 久久久WWW| 五月婷婷少妇之| 国产成人99久久亚洲综合精品| 日韩成人av在线| 午夜天天精品视频| 九九视频这里只有精品在线播放| 色综合网址| 久久婷婷丁香花综合网| 婷婷的激情五月| 99精品在这里| 99久久综合狠狠综合久久| 色婷婷影| 亚洲日日日| 久久精品人妻| 亚洲99综合| 天天天日天天天干| 超碰av在| 九九操综合网| 欧美 日韩 人妻 高清 中文| 天天摸.天天mo| 婷婷五月天高清无码| 97精品综合久久| 激情五月婷婷视频一区二区三区| 午夜激情五月天| 久久草大香蕉| 五月丁香婷婷无码中文| 五月天国产| 久久婷婷东京热| 亭亭五月激情亚洲在线| 91在线就要啪| 精品99只有。| 玖玖色综合色| 婷婷五月深深爱| 婷婷五月丁香五月| 欧美美女国产日韩一区二区久 | caop在线| 五月婷网| 开心婷婷中文字慕| 99视频内射三四| 色色色9 9 9| 久久这里只有精品无码| 五月婷婷涩涩爱| 99视频久久免费视频| 99久久99九九99九九九| 99噜噜噜在线播放| 国产精品99久久久久久久女警| 九月色婷婷| 大香蕉五月| 激情网五月婷婷| 免费观看全黄做爰的视频| 99热超碰在线| 免费观看的av| 五月成人综合| 97人妻碰碰碰久久| 色色婷婷丁香| 五月丁香WWW| 五月综合久久| 欧美爆乳一区二区三区| 五月色亚洲| 超碰人人干| 久久狠婷婷| 婷婷五月激情图片| 99天堂网| 国产午夜伦鲁鲁| 人妻熟妇六区| 五月天婷婷激情在线色图| 激情欧美丁香五月| 亚洲九九夜夜| 午夜微拍福利| 九九99精品视频| 99热在线观看精品| 久久视频在线视频| 五月激情在线| 99热精品网| 99在线精品免费视频| 五月婷婷婷自由综合| 操草草草| 人人爱国产| 九九热九九| 激情五月婷婷五月| 91婷婷丁香五月亚洲| 婷婷五月深爱五月| 日韩啪啪视频| 婷婷五月色综合香五月| 9热视频在线观看| 九九色热| 亚洲另类毛片| 色噜噜狠狠色综合日日| 婷婷五月丁香五月综合网| 在线你懂的亚洲欧| 激情图片亚洲| 人人爱国产| 天天日人人爽| 五月丁香六月激情综合网| 国产精品激情AV久久久青桔| 中文字幕AV网址| 色婷婷五月天亚洲| 婷婷五月电影| 大香蕉视频婷| 极品少妇XXXX精品少妇偷拍| 播五月丁香三月婷婷| 超碰人人在线| 97伊人综合婷婷| 99热婷婷| www.夜夜操.com| 综合五月天婷婷色| 三区激情四射av| 碰久久精品w| 九九99免费理论| 亭亭色天香| 丁香五月天狠狠操| YW无码| 亚洲色五月| 热91久| 婷婷五月天成人| bbwcuckold精品熟妇| 欧美偷偷操| 4399成人黄A片| www.亚洲激情| 五月在在观看| 色综久久AV| 极品九九九九九九| 另类亚洲电影| 最新国产AV| 亭亭色网| 久久女婷| 婷婷激情啪啪| 中文字幕91,综合| 日本无码专区| 婷婷情色开心五月天99| 9久热| 97九色视频| 五月天婷婷乱| 欧美综合丁香网| 亚洲欧美婷婷五月色综合| 26uuu成人网| 天天爽夜夜操| 国产精产国品一二三在观看| 色婷婷成人做爰A片免费看网站| 婷婷色丁香五月| 五月天六月色| 天天干天天干天天干天天干天天干| 久久性爱网站| 亭亭五月天黑人2014| 九九这里都是精品| caop在线| 激情小说视频图片| 久热91| 日韩999| www.97碰碰com| 丁香五月天堂网| 色综合久久88色综合天天| 日日夜夜爽爽| 丁香五月成人社区| 午夜婷婷久久| 91成人性爱视频| 五月天色色网站| 婷婷射图| 亚洲成人综合在线| 九久久九精品视频| 综合超碰熟| 丁香婷婷五月人体| 色碰干| 99在线免费视频| 骚五月婷婷| 影音先锋91| 久操综合| 欧美天天综合网站上去吧| 丁香六月天AV| 华人在线免费| 五月色丁香| 九月丁香| 天天做天天爰天天爽天天无遮挡| 婷婷五月激情在线视频| 激情综合99| 操久久网| 5月丁香美女影院| Www.se.久久| 怡春院天天干| 少妇激情基地| 国产一二三四五六七八视频| 久热AA| 欧美丁香婷婷五月| 五月丁香婷婷钟和色图| 久青操| 婷婷综合久久| 婷婷.com| 超碰99热| 男人視頻站| 日本精品99| 五月天色婷伊人| 狠狠操.COM| 俺也去在线视频| 秋霞成人毛片一级A片| 色五月欧美| 久久综合九色综合97婷婷| 久久XX日本综合| 99爽视频| chaopengdaxiangjiao| 久久久久久久久久婷婷| 色色影院aaaav| 日本五月天一页| 日韩成人无码人妻| 任你干线上免费视频有3吗| 9久久AV| 亚洲综合色网站| 色五月在线观看| 婷婷五月天久久久| 欧美超碰亚洲| 97色色色色色色色色色色色色色| 九九九色综合| 91久久九九| 婷婷色激情网| 玖玖婷婷综合| 97成人超碰免| 天天爽天天摸| 伊人在线视频| 天天日日夜夜爽| 色狠狠综合入口| 亚洲无码色色| 香蕉久久六月| 丁香五月色| 色婷婷六月| 婷婷五月综激情| 日本强伦片中文字幕免费看| 日韩精品999| 亚洲综合婷婷五月天| 97资源碰碰| 日韩AV免费| 五月丁香网视频| 99re在线精品视频| 播四月婷婷六月丁香| 99re这里只有| 久久三级视频| 婷香五月| 性高潮久久久久久-九九九九九九九九九九热-成人AV | 在线中文AV| 婷婷午夜激情| 日韩AV片| 伊人www22综合色| 久草热视频在线观看| 国产XXXX搡XXXXX搡麻豆| 激情综合五月天| 丁香六月成人| 国产成人亚洲综合亚洲| 婷婷深爱五月丁香| 国产中文字幕在线视频免费观看| 婷婷五月天小说网| 久久九九一區| 五月婷婷五月天在线| 超碰熟女农村在线69| 久久婷婷丁香五月一二三| 操逼六区| 丁香五月另类色婷婷麻豆| 久婷五月| 久操无码| 这里只有精彩视频| 丁香八月综合激情| 日本不卡一区二区三区| 影音先锋 婷婷| 亚洲视频在线观看| 夜夜骑天天玩天天日| 亚州在线中文字幕| 丁香六月久| 操操综合网婷婷| 欧美激情2025| 综合色视频| 六月婷婷五月丁香| 精品久久99码| 国产肥白大熟妇BBBB视频| 五月六月激情婷婷| 美女久久天堂| 夜夜躁婷婷AV| 婷婷激情丁香五月婷婷激情丁香五月婷婷| 婷婷五月丁香五月| 五月天色婷婷基地| 久久婷婷激情久久| 99热精品无码| 激情丁香网| 91狼友视频在线观看| 丁香五月停停av| 五六月婷婷久久| 欧美国产一区二区三区| 丁香六月色婷婷| 色香欲综合| 思思视频精品| 丁香五月婷综合| 色色色网站| 久久99操| 丁香婷婷AV| 久久免费精彩视频| 琪琪理论片| 97一区二区| 五月天啪啪啪| 婷婷色五月天第7色| 亚洲第一成人无码A片| 99综合一区| 国内久久亭亭| 国产欧美熟妇另类久久久| 激情网婷婷婷| 国产韩日亚洲美州欧亚综合在线| 雪千夏麻豆| 草综合14| 狠狠擼综合| 九九热在线视频观看免费10| 色综合五月天| 狠狠插狠狠操| 久久人妻乱子伦| 色综合久久88色综合天天| 亚洲99综合| 激情五月无码| 丁香五月天黄色片| 大香蕉懂9| 泰州成人视频| 激情六月天| 久久只有精品| 九月激情网| 色色五月天 亚洲| 欧美久久婷婷| 五月色婷婷综合| 五月天激日本色情在线| 色婷婷狠| 黄色99热| 色欲五月丁香| 色婷婷五月天| 狠狠干夜夜干| 大香蕉天堂| 婷婷丁香五月天在线| 亚洲六月色婷婷| 国产精品A片在线| 亚洲色综合| 婷婷五月天免费视频在线观看| 婷婷色播婷婷| 六月婷欧美| 丁香五月天天久久综合小说| 久久婷婷视频| 色五月天丁香| 五月婷婷五月天| 天天干天天色天天干| 大香蕉五月天| 色域五月婷婷丁香| 六月婷婷视频| 碰碰人人漕| 青青草大香| 五月丁香六月婷| 婷婷五月综合久久中文字幕| 夜夜爽天天爽| 婷婷六月丁香五月| 五月丁香啪啪| 色99在线视频| 亚洲这里只有精品| 天天婷婷综合亚洲亚洲| 亚洲欧美999| 五月丁香六月合| 成人五月天色天堂| 婷婷激情丁香五月婷婷激情丁香五月婷婷| 婷婷五月花| 亚州操逼网| 9色在线视频精品观看| 91肏肏肏| 五月天婷婷狂暴白浆| 日本猛少妇色XXXXX猛叫| 天天做夜夜爽| 婷婷五月天av| 97超碰婷婷五月天| www.第四色99| 综合另类激情| 综合色色综合| 欧美色色色色色色色| 成人av观看| 91激情五月开心| 欧美日韩成人高清在线| 啪啪激情综合| 五月丁香六月婷婷,婷| 婷婷激情伍月网| 久久er免费视频| 五月欧美色播| 激情WWW| 丁香八月综合激情| 亚洲日日操| 色色色综合色| 激情五月天色网站| 色99色| 天堂伊人干| 免费在线观看av网站| 亚洲成人综合网在线免费观看| 久9热在线免费观看| 五月天伊人久久| 六月大香蕉| av在线资源| 婷婷激情五月天激情在线| 婷婷六月综合在线| 色五月第四色| 五月丁香六月香香蕉| 五月丁香香蕉| 日本婷婷激情四射中文字幕在线观看| 老师把我爽高潮了免费A片| 色婷婷综合综合网| 噜噜噜噜噜日本视频| 久久网思思| 婷婷久久色| 久久久久久激情| 99这里有精品视频| 激情五月婷婷她| 色狠狠综合| 逼逼AV| 五月婷婷视频在线观看| 99热这里是精品| 久久婷婷网址| 五月色情婷婷开心五月天| 丁香五月激情婷婷| 国产成人+综合亚洲+天堂| 国产高潮A片羞羞视频涩涩| 51精品国内探花| 亚洲精品无码久久| 26uuu亚洲| www久久99| 婷婷操逼网| 九九热在线观看视频| 色播播五月天| www.婷婷.com| 激情综合五月色丁香婷婷 | 婷婷五月丁香久久| 深爱激情网综合| 狠狠爱综合网| 99热一本久道| 色 五月俺去也| 五月婷婷啪啪网| 婷婷六月丁香五月图区| 夜夜夜天天操| aaa久久| 婷婷丁香综合网| 第四色婷婷丁香五月| 久久99最新| 播五月开心婷婷欧美综合| 欧美私人家庭影院| 人人干人人干骚美女| 丁香色五月天| 五月刺激丁香月综合| 爱射综合| 天天操加勒比| 色色婷婷色色| 深爱激情六月天| 国产精产国品一二三在观看| 99热在线观看免费中文| 婷婷成人AV| 婷婷久久爱| 五月婷无码| 99热这里只有精品3| 操逼巨乳91| 成人综合伍月天| 99在线精品视频| 成片免费观看视频大全| 国产操碰| 色色色婷婷五月| 天天爽天天爽视频| 国产探花一片区| Www.婷婷五月| 婷婷五月综合性爱| 激情婷婷丁香色五月| AA丁香综合激情| 狠狠操狠狠操AV| 九九色欲网| 99热99思午夜精品| 亚洲色五月婷婷| 亚洲av电影在线| 九九久久综合网站| 91色五月在线观看| 99成人免费热视频| 久久天堂色| 国产精品色婷婷AV综合色色| 丁香五月天社区婷婷| 俺也高清无码高清视频| 91九九精品| 五月天狠狠| 极品九九九九九九| 91大神操美女| 91日韩在线| 99re6久热只有精品6在线直播| 亚洲成人免费在线| 五月丁香成人网| 97婷婷丁香五月天激情图片| 激情综合婷婷| 日韩国产在线精品| 婷婷色五月丁香六月欧美啪| 久久在线大香蕉| 久9久9热久热| 五月婷婷五月丁香综合| 色香蕉婷婷| 亚洲99精品欧美一区| 亚洲色婷婷久久99精品91| 九九精品热播| 五月婷婷开心深| 一级片操逼视频| 激情99在线视频| 婷婷色偷拍| 色99在线| 天天干肏夜夜| 久久九九@| 五月婷婷综合网| 开心婷婷五月花| 丁香狠狠色婷婷久久无码视频| www.五月丁香| 激情五月丁香婷婷夜夜操| 日本少妇裸体做爰高潮片 | 五月天婷婷高清无码| www.99久久久久99| 久热免费| 激情五月色在线播放| 综合久久五月天| 色色无码| 99亚洲视频| 五月丁香婷婷激情在线视频| 日本三级网址| 99热在线观看| 91久久九久久九久久九久久九久久| 天天日天天舔天天摸| 性爱激情综合网| 国产在线黄色| 79色色| AV伊人青草丁香六月| 欧美 色婷婷| 色久女| www.热99热| 丁香激情网| 伊人大综合| 色色综合网站| 激情综合五月开心狠狠| 五月丁香久久久日婷婷久久婷婷日| 久久五月天丁香花| 欧美大肥婆大肥BBBBB| www.夜夜操.com| 六月婷婷色五月| 成人精品人妻| 97色综合视频| 激情内射人妻1区2区3区| 久操综合| 操操操Av| 婷婷五月天成人网站| 国产精品电影| 国产色网站| 99干免费视频| 大陆极品少妇内射AAAAAA| 91狠狠色色丁香婷婷综合久久| 婷婷丁香激情五月天色色| 超碰99在线| 五月丁香在线观看99| 中日韩美欧成人一区二区精品在线| 亚洲精品成人| 五月婷婷六月天| 婷婷五月天资源| 99这里只有免费的小视频在线观看| 玖玖爱综合网| 9热精品| 亚洲Av成人在线观看| 综合AV网| 亚洲第一精品成人999久久精品| 草草影院爱爱| 91九色白丝| 国产乱妇无乱码大黄AA片| 亚洲九区| 91久热| 久久久激情视频| 五月天婷婷激情| 色五婷婷开心缴| 天天做天天爱天天综合| 亚洲va欧洲va国产va不卡| 九九九九九九九热| 99爱免费视频在线观看| 99黄色| 天天cha成人综合网| 激情五月婷婷网在线观看| 高清无码.com| 99超在线| 五月丁香在线婷婷蜜桃| 九九免费在线视频| 九九热这里只有国产精品| 婷婷激情综合网| 亚洲激情丁香五月基地| site:publishdd.com| 人人干AV| 操人妻视频91| www.色婷婷.com| 亚洲综合五月天婷婷丁香| 丁香五月婷婷综合精品素人| 婷婷五月综合网| 婷婷综合色色| AV电影在线播放| 99ER热精品视频| 天天干天天日蜜臀av| 9色资源在线| 国内在线99视频| 婷婷丁香社区| 五月婷在线观看| 色色网站在线免费观看视频| 婷婷成人综合五月| 99乱视频| 9久久精品| 国产人妻777人伦精品HD| av一级棒av| 超级碰碰碰久久网站| 五月丁香九九| 色综合色综合婷婷热| 天天色五月| 五月激情偷拍| 国产91视频| 成人综合网站| 91精品丝袜久久久久久久久粉嫩| 四色永久成人网站| 激情五月婷婷综合网| 久久国产色| 26uuu欧美日本| 丁香情色五月| 婷婷涩五月| 五月色情网| 激情綜合W W W,激情五月天| 狠狠色综合网站久久久久| 丁香五月婷婷免费视频| 99啪啪网| 欧美性爱特黄一级aaaassss| 97色天堂| 激情婷婷狠狠干综合| 骚五月婷婷| 青青五月天婷婷| 五月婷婷五月天| AA丁香综合激情| 婷婷丁香社区| 伊人五月人妻精品| 97视频91| 奇米色大香蕉| 99re这里只有精品国产99| 激情五月,色播五月| 成人丁香五月| caopeng97人人| 婷婷丁香五月天色区| 五月婷婷久久大香蕉| 秋霞少妇AV网站| 五月丁香大香蕉| 噜噜网免费视频| 少妇大叫太大太粗太爽了A片| 丁香 亚洲 久久| 亚洲性图一区二区| www.婷婷五月天| 久9精品| 婷婷五月天成人综合网| 狠狠操综合| 亚洲综合视频网| 丁香婷婷五月| 26uuu成人网| 六月婷婷狠狠| 久热这里只有精品6| 日本乱论99| 天天日日夜夜爽。| 99re热视频这里只精品| 天天色综合天天| 综合色影院| 亚洲成人综合网在线免费观看| 五月丁香婷婷五月色| 色婷婷综合网| 爆乳熟妇一区二区三区爆乳| 丁香五月天婷婷激情| www日本熟妇99在线视频| 天天上天天爽| 色色五月婷婷| 人妻久久久久久久久妻久久久久久久久| 日亚二欧美| 99热精品网| 五月丁香六月婷婷久久| 国产精品成人网址| 亚洲久久婷婷| 午夜伊人大香蕉| 婷婷色系婷色| 青草青草视频2免费观看| 色播五月婷婷综合| 97福利视频| 深爱五月激情网| 五月天播播| 五月天婷婷色色| 小视频久久久aaa| 99超级碰免费视频| 久热免费| 梁铮版《蜘蛛女侠》在线| 天天干天天拍| 天天日狠狠| 777影视理论片大全在线观看 | 991精品在线视频| www.久久久久久久久久久| 婷婷无码五月天| 精品九九网| 五月丁香成年黄色| A片一曲| 26uuu成人网| 99热www.| 狠狠一日| 成人va在线播放| 亚洲午夜电影| 天天天天天天操| 久久网站观看免费欧洲国产 | 色五月综合网| 五月天婷婷色| 婷婷五月天亚洲激情戏精品| 2015在线中文字幕| 99视频| 丁香五月色色| 麻豆AV一区二区三区| 丁香5月啪啪| www久久久久久久| 婷婷激情五月| 婷婷五月综合色中文字幕| 麻豆WWWCOM内射软件| 婷婷五月天六月| 色爽九九| 婷婷五月天小说| 五月开心深深爱激情综合 | 97碰碰视频在线观看| 激情五月黄色小说| 9 7总站超级碰免费视频| 婷婷五月色播| 天天婷婷综合| 色色色九九九五月婷婷| 色播五月综合网| 久久五月视频| 97超级免费无码| 日韩啪啪视频| 五月亭亭综合五码| 久热 91| 99干日日干| 综合五月天| 婷婷综合激情五月中文字幕| 91干99| 五月色网| 色综合日日| 亚洲熟女色| 91av传媒高清在线视频网| 色色99| 99热综合在线观看| www..999热久| 色九四色| 婷婷丁香18| 99热这里只有精品2| aaaaa黄色| 五月丁香婷婷99| 婷婷五月成人| 五月天婷婷綜合院| 狠狠插狠狠| 狠狠舔| 综合激情专区| 韩国中文字幕91| 婷婷激情五月综合| 综合色播| 久久九精品| 激情小说五月天社区丁香| 久久五月婷综合网| 麻豆WWWCOM内射软件| 黄网免费看| 综合久久六月| 五月在在观看| 九月婷婷综合| 99热精品99| 91九色 熟| 色婷婷成人做爰A片免费看网站| 五月婷婷影| 99er热精品视频| 99精品在| 亚洲精品五十一区| 9久久精品| www一起操| 999九九九久久久99HD| 在线看的免费网站| 九九精品免费| 丁香色五月 97干| 婷婷爱五月| 亚洲六月色| 久久九九大香蕉电院| 99小精品| 天天做综合| 9l视频自拍9l九色成人| 激情綜合網址| 成人色图情色成人网 www.5b5b5bcom 五月天| 欧美成人AAA片一区国产精品| 九九热这里只有精品6| 五月丁香91| 另类图片激情五月| 狠狠爱五月婷婷| 五月婷婷丁香五月| 色婷久久| 五月开心网| 久久激情五月| 色五月五月天色婷婷色五月| 色综合色| 五月天婷婷AV| 丁香婷婷色九月| 夜夜躁婷婷AV| 色色色国产| 亚洲综合视频在线| 婷婷五月天综合网| 狠狠色婷婷777| 五月婷婷性爱| 色婷婷丁香五月| 亚州色色色| 婷婷久热| 久久精品一区二区三区四区| 最近免费中文字幕大全高清大全1| 久久小视频| 久久一级AV| 9热超碰| www.91AV.COM| 啪啪丁香五月| 色色五月天激情| 色五月xxx| 色综合五月在线| 五月婷婷激情中心| 亚洲第一第二网站| 久久婷婷网站| 色婷婷久久| AV中文网| 无码一级片| 激情综合网址| 少妇日麻屄| 婷婷激情丁五月| 婷婷激情社区| 成人国产综合| 亚洲综合另类| 99碰碰碰| 99久在线精品| 99热精品网| 17.c黄色| 日韩久热| 五月婷在线| 玖玖伊人网| 丁香五月激情啪| 2050人人操免费工开爱| 五月综合影院| 久久婷网| 青青草国产亚洲精品久久| 97se在线视频| 四色永久成人网站| 婷婷五月天亚洲激情戏精品| 五月激情小说网| 五月婷婷六月丁香| 青青草婷婷五月天| 久久久婷丁香五月天激情综合| 久久欧洲久久| 婷婷五月美女直播| 日日综合网| 91女人18毛片水多国产| 另类视频综合| 五月婷婷网站| www夜夜操| 色色色色色日韩午夜激情| 色5月婷婷| 日韩精品无码99| 日夜操B| 果冻传媒A片一二三区| 91精品国产91久久久久青草| AV国产有码| 五月丁香综合啪啪| 激情综合九| 久久九九怡红院| 天天久| 99国产精品久久久久久久久久久| 青青草网武则天| www.五月激情.com| 五月丁香亭亭操逼| 99色人| 五月丁香久久网| 亚洲人人操| 丁香婷婷九月在线| AA丁香综合激情| 亚洲综合激情五月久久| 国产精产国品一二三在观看| 色五月婷婷综合| 五月婷婷,六月丁香| 日本精品人妻无码77777| 99热在线观看精品| 亭亭五月色男人| 亚洲第一成人无码A片| 九九激情综合| 激情五月婷黄版| 成人AV播放| 亚洲五月天天| 狠狠干夜夜干| 婷婷九月亚洲| 99这里| .肏屄视频一区二区| 婷婷丁香五月天综合网| 丁香五月色情| 日本97在线视频| 天天干天天日天天操| 色欲五月丁香| 色婷婷色五月丁香| 久久99网站| 丁香婷婷久久 | 97色在线视频| 六月撸婷婷| 五月天激情图片网| 婷婷五月天黄色小说| 天天日天天肏天天奸| 天天摸天天舔天天爽| 日本色五月| 啪啪综合网| 日本三级日本三级99| 日本一毛片| 狠狠狠狠狠狠色| 丁香五月婷婷Av| 五月丁香影视| 丁香五月婷婷色偷偷| 美女五月天| 亚洲婷婷丁香五月| 婷婷五月六| 国产色99| 天天肏天天肏天天肏| aaaa.黄| 色婷婷六月| 激情综合网色五月| 91久久色| 亚洲不卡| 99这里只有精品视频| 丁香五月天欧洲在线| 婷婷激情综合网| 婷婷 激情 五月| 97在线观看| 色婷婷狠狠久久综合五月| 久久R激情| 婷婷五月成人系列| 免费啪啪啪网站| 五月99久久| 92久久| 九九RE视频在线精品| 五月天久久婷婷婷| 99精品丁香五月| 亚洲另类噜噜| 亚洲色婷婷五月天| 91丨九色丨熟女| 九九九这里只有精品| 婷婷五月天av| 思思热在线视频99| 激情五月婷婷她| 9色在线视频| 丁香五月 综合| 91人妻人人操| 亚洲综合五月天婷婷丁香| 婷婷五月情| 国产精品涩涩涩视频网站| 五月丁香亭亭天天舔| 综合久久综合综合| 丁香五月天网站| 99热国产在| 精品自拍99| 久久久五月五丁香| 伊人五月婷婷| 亚洲韩国日产综合AV| 大香蕉久久久久| 天天人人天天爽| 丁香六月天婷婷| 天天肏视频| www.五月天婷婷姐姐| 久热伊人在91| 欧美性丁香色色五月天干干| 激情亚洲婷婷六月| 成人色图情色成人网 www.5b5b5bcom 五月天 | 国产成人片| 五月婷婷丁香婷婷| 丁香五月在线伊人| 婷婷六月丁综合| 99热最新| 这里只有精品网| 日韩九九视频| 色综合五月| 激情五月丁香五月| 色五月在线视频观看| 91se在线视频| 中文不卡av| 在线综合网| 色爱亚洲| 婷婷舔| 色三级色三级| 亚洲欧美成人在线观看| 日本99热| 亚洲久久激情| 色婷婷色五月丁香| 综合色五月天| 9久热在线视频| 操操啪| 五月天丁香成人社| 五月精品免费XXX| 色性综合| 天堂综合久久| 先锋影音男人的天堂AV| 囯产精品久久欠久久久久久九大| 五月六月婷| 玖玖九九99| 99精品视频在线观看免费| 激情五月婷色| 亚洲国产精品二二三三区| 亚洲av网站| 色播五月婷婷| 婷婷五月天亚洲图片| 天天做天天要天天爱| 二级黄色毛片| 婷婷六月成人| 人妻丰满精品一区二区A片| 日良久久| 五月花婷婷| 久热网站| 婷婷五月天亚洲综合网| 色狠狠999综合网| 午夜天堂啪啪| 六月婷婷综合久久| 日韩激情网站| 五月婷性爱| 成人超碰网| 精品人妻伦九区久久AAA片| 色色激情五月天| 色婷婷69| 色综合五月| 五月丁香六月情| 日本成人噜噜| 蜜乳国产网站| 97激情五月天| 亚洲人人96@| 涩涩涩,com| 热的国产99热| 99热网站| 超碰99在线| 综合色播| 婷婷色导航| 成人av免费观看| 丁香色色网| 色色操| 丁香五月天导航| 91久久久久久久| 97人人操人人爽| 超碰国产在线| 丁香五月香蕉在线| 久久人妻久久久久| 五月丁香怕啪啪| 色婷婷婷av| 精品国产va久久久久久久| 99热6这里只有精品6| 丁香五月另类小说在线阅读| 狠狠干总合| 五月丁香欧美| 婷婷色av| 婷婷狠狠操| 另类精品视频在线观看| 99色中文| 五月天色婷婷综合| 丁香六月综合激情| 色www久视频| 九九中文色色| 七七色色综合| 啊V视频在线观看| 永久的网站AAAA| 天天综合插插| 深夜A片| 超碰99资源站| 国产成人亚洲综合A∨婷婷| 深爱五月婷婷| 猫咪伊人AV| 婷婷丁香成人五月天| 日本69日人视频| 婷婷六月爽| 99热在线观看这里只有精品| www.五月天婷婷| 九九九九国产| 黄桃AV无码免费一区二区三区| 草草色情综合网| 99久久五月丁香野外| 五月天色图| 色五月婷婷开心| 精品人妻一区二区| 亚洲色网址| 色五月婷婷成人| 99热99| WWW.天天日| 99er6热在线观看精品6| 狠狠色五月| 狠狠干综合| 婷婷丁香五月天色色| 欧美精品999| 五月婷在线色视频| 激情视频综合| 可以看的av| 色婷婷亚洲在线观看| 这里只有精品视频222| 六月婷婷亚洲| 久久九区| 日本操B视频| 99在线视频播放| 啪啪激情网站| 色久女| www.金莲av| 五月天激情图片| 丁香五月六月婷婷综合激情| 色六月婷婷| 日本eVa一区=区视频| 秋霞成人毛片一级A片| 去干网最新版本亚洲版| 久久久91| 91女人18毛片水多国产| 婷婷她六月天| 五月婷婷av| 国产69久久久欧美黑人A片| 久草狼人| 婷婷五月丁香久久| 久久99网| 五月婷婷七月丁香| 爱的综合网| 97色碰| 97人人看一| 狠狠干狠狠干狠狠干狠狠干| 99色综合网| 最新久久99视频网站| 亚洲性爱干干| www,久久久| 91九色PORNY中文啦| 久久伊人日日夜夜| 色情综合| 人妻激情视频| 五月天停停成人网| 99免费在线视频| 丁香婷婷五月激情| 99这里只有精| 91干婷婷| 婷婷五月综合欧美在线播放| 色色丁香五月天| 欧美亚洲成人在线| 激情久久综合网| 少妇高潮A片无套内谢麻豆传| 色综合激情| 日韩黄色电影| 五月丁香六月婷婷激情四射| 五月天自拍视频| 91日韩在线| 亚洲欧美成人在线| 99久精品视频| 一起草aV| 激情五月天小说| 玖玖九九超碰| 婷婷中文字幕版| WWW.桔色成人.COM| 婷婷第六色| 色婷婷五月综合| www.91久久| 九月激情网| 激情综合九月| 在线看片av| 六月丁香色色| 色婷婷88| 丁香婷婷色色| 狠狠99| 色婷婷88| 九九AV在线| 久久作爱| 精品激情| www激情| 婷婷五月天久久| 俺也去在线久久精品23欧美综合视频网站,丰满人妻一区二区三区在线视频53,丰满 | 五月丁香好婷婷A片网| 第四色婷婷色五月| 十月色综合| 中文字幕婷婷在线| 噜噜在线| 午夜爱插插| 久久五月视频|