免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Tmux自動(dòng)保存會(huì)話日志:原理、配置與生產(chǎn)環(huán)境實(shí)踐

Tmux自動(dòng)保存會(huì)話日志:原理、配置與生產(chǎn)環(huán)境實(shí)踐 1. 為什么需要自動(dòng)保存Tmux會(huì)話日志如果你和我一樣日常開發(fā)、運(yùn)維或者長(zhǎng)時(shí)間跑任務(wù)都離不開Tmux那你肯定遇到過(guò)這種糟心事一個(gè)跑了三天三夜的編譯任務(wù)或者一個(gè)正在調(diào)試的復(fù)雜服務(wù)因?yàn)榫W(wǎng)絡(luò)閃斷、終端意外關(guān)閉甚至只是手滑關(guān)掉了終端窗口整個(gè)Tmux會(huì)話連同里面所有寶貴的輸出信息瞬間消失。更讓人抓狂的是有時(shí)候一個(gè)關(guān)鍵的錯(cuò)誤信息就在你眼皮子底下閃過(guò)還沒(méi)來(lái)得及細(xì)看就被后續(xù)的日志刷掉了。這時(shí)候你恨不得能把屏幕上的每一個(gè)字符都“焊”下來(lái)。這就是我們今天要解決的問(wèn)題。Tmux本身是一個(gè)強(qiáng)大的終端復(fù)用器它能讓會(huì)話在后臺(tái)持續(xù)運(yùn)行但它默認(rèn)并不負(fù)責(zé)把屏幕上滾過(guò)的所有內(nèi)容持久化到磁盤。script命令是一個(gè)經(jīng)典的解決方案它能記錄終端的所有輸入輸出但把它和Tmux優(yōu)雅地結(jié)合起來(lái)實(shí)現(xiàn)“無(wú)感”的、自動(dòng)化的日志記錄里面有不少門道。比如如何為每個(gè)Tmux窗口或窗格單獨(dú)生成日志文件如何避免日志文件無(wú)限膨脹如何讓這個(gè)機(jī)制在每次啟動(dòng)Tmux時(shí)自動(dòng)生效而不需要你手動(dòng)敲一堆命令最近在社區(qū)里關(guān)于“mobaxterm保存日志”、“vs調(diào)試信息保存到日志文檔同時(shí)打印顯示”的討論也很多這說(shuō)明大家對(duì)于終端輸出持久化的需求是普遍且強(qiáng)烈的。尤其是當(dāng)你在處理“慢查詢?nèi)罩尽狈治?、“redis日志”監(jiān)控或者排查“android保存異常前后關(guān)鍵日志、內(nèi)核異?!边@類復(fù)雜問(wèn)題時(shí)一份完整的、按時(shí)間或會(huì)話組織的終端記錄其價(jià)值不亞于一份詳細(xì)的調(diào)試報(bào)告。所以這篇文章的目的就是分享一套我經(jīng)過(guò)多年實(shí)踐打磨出來(lái)的、在Linux環(huán)境下為Tmux會(huì)話自動(dòng)保存日志的完整方案。我會(huì)從最核心的原理講起一步步拆解配置方法并重點(diǎn)分享那些容易踩坑的細(xì)節(jié)和高級(jí)用法讓你不僅能“抄作業(yè)”更能理解背后的“所以然”。2. Tmux日志記錄的核心原理與工具選型在動(dòng)手之前我們必須搞清楚兩件事第一Tmux本身是如何處理屏幕內(nèi)容的第二有哪些工具可以捕獲這些內(nèi)容。Tmux的核心是一個(gè)客戶端-服務(wù)器模型。當(dāng)你運(yùn)行tmux命令時(shí)會(huì)啟動(dòng)一個(gè)服務(wù)器進(jìn)程tmux server。這個(gè)服務(wù)器管理著所有的會(huì)話session、窗口window和窗格pane。你在終端里看到的實(shí)際上是Tmux客戶端渲染出的一個(gè)“視圖”。所有在窗格中運(yùn)行的進(jìn)程比如bash, vim, top的輸出都會(huì)先被Tmux服務(wù)器捕獲然后再轉(zhuǎn)發(fā)給連接的客戶端進(jìn)行顯示。這就給我們提供了兩個(gè)攔截日志的切入點(diǎn)在進(jìn)程層面攔截在進(jìn)程如bash和Tmux服務(wù)器之間插入一個(gè)記錄器。這就是script命令的工作方式。script會(huì)啟動(dòng)一個(gè)新的shell并記錄這個(gè)shell及其所有子進(jìn)程的所有輸入輸出。在Tmux層面攔截直接讓Tmux服務(wù)器把它要發(fā)送給客戶端的內(nèi)容額外保存一份到文件。Tmux內(nèi)置了pipe-pane命令和capture-pane命令可以做到這一點(diǎn)。方案對(duì)比與選型script命令方案原理通過(guò)exec script -f log.txt替換當(dāng)前窗格的shell開始記錄。優(yōu)點(diǎn)記錄非常原始和完整包括控制字符、顏色碼如果使用-f參數(shù)。它是操作系統(tǒng)自帶工具無(wú)需額外安裝。缺點(diǎn)與Tmux結(jié)合時(shí)需要一些技巧。一個(gè)script進(jìn)程只記錄一個(gè)窗格。如果直接在~/.bash_profile里啟動(dòng)script可能會(huì)遇到遞歸調(diào)用或記錄不完整的問(wèn)題比如“vi ~/.bash_profile 報(bào)錯(cuò)e325: attention”這種錯(cuò)誤可能就和環(huán)境變量或終端狀態(tài)被script改變有關(guān)。Tmux內(nèi)置pipe-pane方案原理在Tmux內(nèi)部使用pipe-pane命令將一個(gè)窗格的輸出實(shí)時(shí)管道傳輸pipe到一個(gè)外部命令如cat log.txt或文件中。優(yōu)點(diǎn)與Tmux原生集成配置靈活可以綁定到快捷鍵可以方便地為不同窗格指定不同日志文件。缺點(diǎn)默認(rèn)可能不記錄窗格中更早的歷史內(nèi)容需要結(jié)合capture-pane -S -來(lái)保存初始內(nèi)容。對(duì)于已經(jīng)存在的窗格需要手動(dòng)開啟。Tmux內(nèi)置capture-pane方案原理將窗格當(dāng)前可見(jiàn)或指定范圍的內(nèi)容一次性捕獲并保存到Tmux的緩沖區(qū)或文件中。通常用于快照而非持續(xù)流式記錄。優(yōu)點(diǎn)適合定時(shí)備份或手動(dòng)保存特定時(shí)刻的輸出。缺點(diǎn)不是自動(dòng)的持續(xù)記錄。我的選擇與理由對(duì)于“自動(dòng)保存”這個(gè)核心需求pipe-pane方案是更優(yōu)雅、更貼合Tmux哲學(xué)的選擇。它允許我們?cè)赥mux會(huì)話的生命周期內(nèi)動(dòng)態(tài)地控制日志記錄并且可以很容易地通過(guò)Tmux配置文件~/.tmux.conf實(shí)現(xiàn)自動(dòng)化。script命令更適合在非Tmux環(huán)境或者對(duì)記錄格式有非常嚴(yán)格要求的場(chǎng)景下使用。因此接下來(lái)的實(shí)戰(zhàn)將圍繞Tmux的pipe-pane命令展開。我們會(huì)設(shè)計(jì)一個(gè)機(jī)制每當(dāng)創(chuàng)建一個(gè)新的Tmux窗格時(shí)自動(dòng)為其啟動(dòng)日志記錄并將日志文件以“會(huì)話名-窗口索引-窗格索引-時(shí)間戳”的格式保存到指定目錄。這樣日志不僅自動(dòng)保存了還具備了良好的可追溯性。3. 實(shí)戰(zhàn)配置實(shí)現(xiàn)Tmux窗格日志自動(dòng)記錄理論清晰了現(xiàn)在我們來(lái)動(dòng)手實(shí)現(xiàn)。我們的目標(biāo)是修改Tmux的配置文件使得任何新創(chuàng)建的窗格都能自動(dòng)開始將輸出記錄到獨(dú)立的日志文件中。3.1 基礎(chǔ)環(huán)境與配置文件準(zhǔn)備首先確保你有一個(gè)可用的Tmux環(huán)境。大部分Linux發(fā)行版都可以通過(guò)包管理器安裝。例如在CentOS/Rocky Linux上sudo yum install tmux在Ubuntu/Debian上sudo apt install tmux。Tmux的核心配置文件是用戶家目錄下的~/.tmux.conf。如果不存在創(chuàng)建它touch ~/.tmux.conf所有后續(xù)的配置都將寫入這個(gè)文件。修改后需要重啟Tmux服務(wù)器tmux kill-server然后重新進(jìn)入或在現(xiàn)有會(huì)話中按前綴鍵默認(rèn)是Ctrlb后輸入:source-file ~/.tmux.conf來(lái)重新加載配置。3.2 核心配置腳本解析我們將把自動(dòng)日志記錄的邏輯寫成一個(gè)Tmux的“鉤子”hook綁定到“窗格創(chuàng)建完成”這個(gè)事件上。以下是完整的配置段落你可以直接添加到你的~/.tmux.conf文件末尾# ~/.tmux.conf - 自動(dòng)日志記錄配置 # 1. 定義日志存儲(chǔ)目錄 set -g log_dir “$HOME/.tmux/logs” # 使用$HOME變量兼容性更好 # 2. 創(chuàng)建日志目錄如果不存在 run-shell “mkdir -p #{log_dir} 2/dev/null || true” # 3. 定義自動(dòng)開啟日志記錄的函數(shù)/命令 set -g plugin ‘tmux-plugins/tmux-logging’ # 注意上面這行是如果你使用Tmux Plugin Manager (TPM)來(lái)安裝插件時(shí)的寫法。 # 但我們這里采用純配置實(shí)現(xiàn)不依賴外部插件所以可以注釋掉或刪除。 # 4. 核心為每個(gè)新窗格綁定自動(dòng)日志記錄 set-hook -g after-new-window ‘run-shell “tmux pipe-pane -t #{session_name}:#{window_index}.#{pane_index} ‘exec cat #{log_dir}/#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d_%H%M%S).log”’ set-hook -g pane-focus-in ‘if-shell -F “#{:#{pane_start_command},}” “run-shell ‘tmux pipe-pane -t #{session_name}:#{window_index}.#{pane_index} ‘exec cat #{log_dir}/#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d_%H%M%S).log’’”’配置逐行詳解第1行set -g log_dir “$HOME/.tmux/logs”-g表示全局設(shè)置。log_dir是我們自定義的一個(gè)Tmux用戶選項(xiàng)user option用來(lái)存儲(chǔ)日志目錄路徑。我選擇$HOME/.tmux/logs因?yàn)樗[藏在用戶目錄下且與Tmux相關(guān)。你可以根據(jù)習(xí)慣修改為/var/log/tmux需要sudo權(quán)限或$HOME/logs/tmux。使用$HOME而不是~因?yàn)樵赥mux配置中~可能不會(huì)被正確展開。第2行run-shell “mkdir -p #{log_dir} 2/dev/null || true”這是一個(gè)在加載配置時(shí)執(zhí)行的shell命令。mkdir -p確保日志目錄存在-p參數(shù)表示如果父目錄不存在則一并創(chuàng)建。2/dev/null將錯(cuò)誤輸出比如目錄已存在重定向到空設(shè)備避免干擾。|| true確保即使命令失敗極少數(shù)情況也不會(huì)導(dǎo)致整個(gè)配置加載失敗。第4-5行set-hook -g after-new-window …和set-hook -g pane-focus-in …這是實(shí)現(xiàn)自動(dòng)化的關(guān)鍵。set-hook用于綁定事件。after-new-window在新建窗口后觸發(fā)。注意在Tmux中新建窗口時(shí)會(huì)自動(dòng)創(chuàng)建一個(gè)窗格所以這個(gè)鉤子能捕獲到新窗格的創(chuàng)建。pane-focus-in當(dāng)焦點(diǎn)進(jìn)入一個(gè)窗格時(shí)觸發(fā)。我們配合條件判斷使用目的是為了處理那些在會(huì)話恢復(fù)tmux attach時(shí)已經(jīng)存在但尚未開始記錄的舊窗格。if-shell -F “#{:#{pane_start_command},}”這是一個(gè)條件判斷。#{pane_start_command}是窗格啟動(dòng)時(shí)運(yùn)行的初始命令。如果它為空通常意味著這個(gè)窗格啟動(dòng)的是一個(gè)默認(rèn)shell比如bash并且我們預(yù)設(shè)的日志記錄命令pipe-pane還沒(méi)有運(yùn)行。這個(gè)條件判斷可以防止對(duì)已經(jīng)開啟日志記錄的窗格重復(fù)執(zhí)行命令。run-shell ‘tmux pipe-pane …’這是實(shí)際執(zhí)行日志記錄的命令。我們通過(guò)run-shell在Tmux內(nèi)部調(diào)用tmux命令本身。pipe-pane命令詳解-t #{session_name}:#{window_index}.#{pane_index}-t指定目標(biāo)。#{session_name},#{window_index},#{pane_index}是Tmux提供的格式變量能唯一標(biāo)識(shí)當(dāng)前窗格。這確保了命令作用于正確的窗格。‘exec cat #{log_dir}/#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d_%H%M%S).log’這是pipe-pane要執(zhí)行的命令。exec cat file這是一個(gè)經(jīng)典的技巧。exec會(huì)讓當(dāng)前shell進(jìn)程被cat命令替換cat從標(biāo)準(zhǔn)輸入讀取數(shù)據(jù)并追加到文件。這樣窗格的輸出流就通過(guò)管道源源不斷地寫入日志文件。使用是追加模式避免覆蓋。文件名模板#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d_%H%M%S).log#{session_name}會(huì)話名如mysession。W#{window_index}窗口索引從0開始如W0。P#{pane_index}窗格索引從0開始如P0。$(date %Y%m%d_%H%M%S)執(zhí)行命令時(shí)的時(shí)間戳精確到秒。例如20231026_143022。這是關(guān)鍵它為每次日志記錄會(huì)話生成唯一文件名避免了多個(gè)窗格或多次記錄相互覆蓋。也方便你按時(shí)間查找日志。重要提示上面的配置使用了兩個(gè)鉤子并且pane-focus-in里的命令和after-new-window里的幾乎一樣。在實(shí)際測(cè)試中我發(fā)現(xiàn)有時(shí)僅靠after-new-window在復(fù)雜場(chǎng)景如從已有會(huì)話恢復(fù)下可能不夠可靠。pane-focus-in作為一個(gè)補(bǔ)充觸發(fā)器能確保當(dāng)你切換到某個(gè)未開始記錄的舊窗格時(shí)自動(dòng)為其開啟日志。這是一種防御性編程思維。3.3 配置驗(yàn)證與手動(dòng)控制添加配置并重載后新建一個(gè)Tmux窗口或窗格然后立刻檢查日志目錄ls -la ~/.tmux/logs/你應(yīng)該能看到類似mysession_W0_P0_20231026_143022.log的文件正在被創(chuàng)建并且文件大小會(huì)隨著你在該窗格中的操作而增長(zhǎng)。手動(dòng)控制命令 雖然配置是自動(dòng)的但了解手動(dòng)命令對(duì)調(diào)試和高級(jí)管理很有幫助。為指定窗格開啟日志記錄在Tmux會(huì)話內(nèi)按前綴鍵后輸入:pipe-pane -o ‘exec cat /tmp/tmux.log’-o參數(shù)表示僅輸出不記錄輸入。如果你需要記錄輸入即你敲的命令可以去掉-o但要注意這可能會(huì)記錄密碼等敏感信息停止當(dāng)前窗格的日志記錄:pipe-pane不帶任何參數(shù)的pipe-pane命令會(huì)關(guān)閉當(dāng)前窗格的管道。查看當(dāng)前窗格是否正在記錄:display-message “#{pane_in_mode}”如果返回1通常表示該窗格正處于某種特殊模式如復(fù)制模式或…正在管道傳輸。但這不是一個(gè)百分百準(zhǔn)確的指標(biāo)。更直接的方法是查看進(jìn)程樹pstree或檢查日志文件是否在增長(zhǎng)。4. 高級(jí)優(yōu)化與常見(jiàn)問(wèn)題排查基礎(chǔ)功能實(shí)現(xiàn)了但在生產(chǎn)環(huán)境長(zhǎng)期使用我們還需要考慮更多日志輪轉(zhuǎn)、性能影響、異常處理等。下面分享幾個(gè)我踩過(guò)坑后總結(jié)的優(yōu)化點(diǎn)。4.1 日志輪轉(zhuǎn)與清理策略日志文件不加以管理遲早會(huì)撐爆磁盤。我們不應(yīng)該在Tmux配置里做復(fù)雜的日志輪轉(zhuǎn)如logrotate那應(yīng)該是系統(tǒng)層面的任務(wù)。但我們可以通過(guò)優(yōu)化日志生成策略來(lái)配合。1. 按日或按會(huì)話分割日志上述配置使用了精確到秒的時(shí)間戳這會(huì)導(dǎo)致大量小文件。一個(gè)更好的策略是按天分割。修改pipe-pane命令中的文件名部分‘exec cat #{log_dir}/#{session_name}_W#{window_index}_P#{pane_index}_$(date %Y%m%d).log’這樣同一天同一個(gè)窗格的所有輸出都會(huì)進(jìn)入同一個(gè)文件。文件大小可控也便于按天歸檔。2. 集成系統(tǒng)logrotate在/etc/logrotate.d/下創(chuàng)建一個(gè)配置文件例如tmux$HOME/.tmux/logs/*.log { daily missingok rotate 30 compress delaycompress notifempty create 0640 $USER $USER }這個(gè)配置會(huì)每天輪轉(zhuǎn)日志保留30天并壓縮舊日志。create指令確保新創(chuàng)建的日志文件權(quán)限正確。3. 在Tmux會(huì)話結(jié)束時(shí)清理有時(shí)一個(gè)臨時(shí)會(huì)話的日志無(wú)需保留??梢栽O(shè)置一個(gè)鉤子在會(huì)話銷毀時(shí)刪除其對(duì)應(yīng)的日志文件。但這需要更復(fù)雜的腳本因?yàn)橐粋€(gè)日志文件可能對(duì)應(yīng)多個(gè)窗格且會(huì)話名可能重復(fù)。一個(gè)更簡(jiǎn)單的做法是定期手動(dòng)清理或依賴上面的logrotate。4.2 性能影響與注意事項(xiàng)I/O負(fù)載pipe-pane會(huì)將所有輸出實(shí)時(shí)寫入磁盤。對(duì)于輸出極其頻繁的窗格例如tail -f一個(gè)巨大的日志文件這可能會(huì)增加I/O壓力。在機(jī)械硬盤上需要留意。對(duì)于絕大多數(shù)開發(fā)、運(yùn)維操作影響微乎其微。網(wǎng)絡(luò)延遲感知寫入本地磁盤通常很快但如果日志目錄位于網(wǎng)絡(luò)存儲(chǔ)NFS上可能會(huì)引入延遲極端情況下可能讓終端感覺(jué)“卡頓”。磁盤空間監(jiān)控務(wù)必監(jiān)控日志目錄所在磁盤的空間使用情況??梢詫懸粋€(gè)簡(jiǎn)單的cron任務(wù)或systemd timer來(lái)檢查并報(bào)警。敏感信息泄露切記這會(huì)記錄終端上顯示的所有明文信息包括你輸入的密碼、密鑰、API Token等。因此避免在開啟自動(dòng)日志的Tmux窗格中輸入密碼。使用ssh-agent,gpg-agent或交互式密碼輸入工具。考慮使用pipe-pane -o只記錄輸出不記錄輸入。但輸入的命令行本身也常是調(diào)試的關(guān)鍵信息這需要權(quán)衡。確保日志目錄的權(quán)限設(shè)置正確如700僅允許所有者讀寫。對(duì)于包含敏感信息的臨時(shí)會(huì)話可以在創(chuàng)建會(huì)話時(shí)臨時(shí)禁用自動(dòng)日志或者事后安全地刪除日志文件。4.3 常見(jiàn)問(wèn)題與排查指南即使配置正確也可能遇到問(wèn)題。下面是一些典型場(chǎng)景和排查思路。問(wèn)題1日志文件沒(méi)有創(chuàng)建或沒(méi)有內(nèi)容。檢查配置是否加載在Tmux中按Ctrlb然后輸入:show-options -g log_dir查看log_dir變量是否設(shè)置正確。檢查目錄權(quán)限運(yùn)行l(wèi)s -ld ~/.tmux/logs/確保目錄存在且當(dāng)前用戶有寫權(quán)限。檢查鉤子是否觸發(fā)可以暫時(shí)在鉤子命令中加入調(diào)試信息。例如將run-shell部分改為run-shell “echo ‘Hook triggered for #{session_name}:#{window_index}.#{pane_index} at $(date)’ /tmp/tmux-hooks.log”然后新建窗格查看/tmp/tmux-hooks.log文件是否有輸出。這能幫你確認(rèn)是配置沒(méi)生效還是pipe-pane命令本身有問(wèn)題。檢查pipe-pane命令語(yǔ)法Tmux命令對(duì)引號(hào)嵌套非常敏感。確保你的配置文件中引號(hào)是匹配的。建議使用單引號(hào)包裹整個(gè)exec cat …命令就像示例中那樣。查看Tmux服務(wù)器日志啟動(dòng)Tmux時(shí)加上-vv參數(shù)tmux -vv new-session可以輸出詳細(xì)日志到標(biāo)準(zhǔn)錯(cuò)誤或文件有助于診斷。問(wèn)題2日志記錄意外停止。窗格中的進(jìn)程崩潰或結(jié)束如果窗格中的主進(jìn)程如bash退出pipe-pane的管道也會(huì)終止。這是預(yù)期行為。手動(dòng)誤關(guān)閉不小心在窗格中執(zhí)行了不帶參數(shù)的:pipe-pane命令。Tmux服務(wù)器重啟如果Tmux服務(wù)器重啟所有窗格的管道狀態(tài)會(huì)丟失。我們的pane-focus-in鉤子會(huì)在你重新聚焦時(shí)嘗試恢復(fù)但前提是窗格還在。問(wèn)題3如何為已經(jīng)存在的舊會(huì)話/窗格開啟自動(dòng)日志我們的pane-focus-in鉤子就是為了解決這個(gè)問(wèn)題。你只需要切換到那個(gè)舊的窗格鉤子就會(huì)觸發(fā)如果條件滿足。如果沒(méi)觸發(fā)可以手動(dòng)執(zhí)行一次:pipe-pane -o ‘exec cat …’命令。問(wèn)題4我想記錄更早的、創(chuàng)建日志之前的內(nèi)容。pipe-pane只記錄從命令執(zhí)行后開始的內(nèi)容。如果你想保存窗格中當(dāng)前已有的回滾歷史scrollback可以在開啟持續(xù)記錄前先手動(dòng)保存一次快照# 在目標(biāo)窗格中先按前綴鍵(Ctrlb)然后輸入 :capture-pane -S -300 # 捕獲從300行之前到現(xiàn)在的所有內(nèi)容 :save-buffer ~/.tmux/logs/history_snapshot.log # 保存到文件 # 然后再開啟pipe-pane進(jìn)行持續(xù)記錄5. 延伸應(yīng)用打造終端工作流與日志分析自動(dòng)日志記錄不僅僅是一個(gè)“備份”功能。當(dāng)它成為你工作流的一部分時(shí)可以解鎖更多高效用法。5.1 與監(jiān)控和告警集成想象一下你有一個(gè)在Tmux窗格中長(zhǎng)時(shí)間運(yùn)行的后臺(tái)任務(wù)比如一個(gè)數(shù)據(jù)處理的Python腳本。你可以結(jié)合簡(jiǎn)單的shell腳本來(lái)監(jiān)控日志#!/bin/bash # monitor_tmux_log.sh LOG_DIR“$HOME/.tmux/logs” SESSION“data_processing” WINDOW0 PANE0 LOG_FILE$(ls -t “$LOG_DIR”/${SESSION}_W${WINDOW}_P${PANE}_*.log 2/dev/null | head -1) if [ -z “$LOG_FILE” ]; then echo “No log file found for ${SESSION}:${WINDOW}.${PANE}” exit 1 fi # 持續(xù)監(jiān)控日志文件查找錯(cuò)誤關(guān)鍵詞 tail -F “$LOG_FILE” | while read line; do if echo “$line” | grep -q “ERROR\|CRITICAL\|FAILED”; then # 發(fā)送告警例如通過(guò)郵件、Slack webhook等 echo “ALERT found in $LOG_FILE: $line” | mail -s “Tmux Task Alert” your-emailexample.com # 或者播放一個(gè)聲音 paplay /usr/share/sounds/freedesktop/stereo/alarm-clock-elapsed.oga 2/dev/null fi done這個(gè)腳本會(huì)找到指定窗格最新的日志文件然后tail -F持續(xù)跟蹤一旦發(fā)現(xiàn)包含“ERROR”等關(guān)鍵詞的行就觸發(fā)告警。你可以用cron或systemd服務(wù)來(lái)啟動(dòng)這個(gè)監(jiān)控腳本。5.2 基于日志的復(fù)盤與知識(shí)管理每天下班前花5分鐘瀏覽一下~/.tmux/logs/目錄下的日志。你可能會(huì)發(fā)現(xiàn)某個(gè)復(fù)雜命令的成功參數(shù)組合。一個(gè)之前花了半小時(shí)解決的錯(cuò)誤其解決方案被完整記錄了下來(lái)。一段有用的代碼片段或配置輸出。你可以建立一個(gè)簡(jiǎn)單的知識(shí)庫(kù)將有價(jià)值的日志片段整理歸檔。例如用一個(gè)筆記軟件如Obsidian, Logseq或一個(gè)簡(jiǎn)單的Git倉(cāng)庫(kù)來(lái)管理。給日志文件配上好的命名規(guī)范我們之前的配置已經(jīng)做到了搜索起來(lái)會(huì)非常方便。5.3 替代方案淺析何時(shí)不用Tmux內(nèi)置方案雖然pipe-pane方案很優(yōu)雅但有些場(chǎng)景下你可能需要考慮其他工具需要記錄精確時(shí)序和終端控制序列如果你在做終端應(yīng)用的性能分析或錄制終端操作視頻script命令的-t參數(shù)可以輸出帶時(shí)間戳的數(shù)據(jù)流配合scriptreplay可以完美回放。這是pipe-pane難以替代的。環(huán)境限制無(wú)法修改Tmux配置比如在臨時(shí)租賃的服務(wù)器或嚴(yán)格管控的環(huán)境。這時(shí)你可以在啟動(dòng)Tmux之前先用script命令包裝script -f my_session.log tmux new-session -s mysession這樣整個(gè)Tmux會(huì)話包括所有子窗口的輸出都會(huì)被記錄到一個(gè)文件。缺點(diǎn)是所有窗格混在一起且文件會(huì)非常大。使用第三方終端復(fù)用器比如screen命令。screen也有類似的日志功能Ctrla, H開始/停止記錄但功能和集成度不如Tmux的pipe-pane靈活。最后再分享一個(gè)我個(gè)人的小技巧我會(huì)在~/.bash_profile或~/.zshrc里設(shè)置一個(gè)別名快速搜索今天的Tmux日志alias tlog“grep -r ‘\$1’ ~/.tmux/logs/*$(date %Y%m%d)*.log 2/dev/null | head -20”這樣在終端里輸入tlog “Connection refused”就能快速搜索今天所有Tmux日志里出現(xiàn)的連接錯(cuò)誤對(duì)于問(wèn)題排查來(lái)說(shuō)效率極高。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
五月婷婷五月天| 91无码一区人妻A片蜜| 天天综合色丁香| 色五月大| 婷婷五月偷拍| 五月天日日操夜夜操| 一区二区成人电影免费播放| 五月婷婷第四色| 91精品91久久久中77777久久玖玖九九 | 久草性爱| 69五月天视频| av婷婷六月丁香社区在线观看| 色婷婷五月天激情在线观看| 99热 这里只有精品 国产 日韩| 中文字幕精品无码一区二区| 久久婷婷视频| WWW,婷婷,COM| 9久热这里只有精品视频| 9色操| 久草五月天| 婷婷五月天电影在线| 97久久草草超级碰碰碰| 中文字幕网站在线观看| 九月婷婷激情久久| 国产成人综合亚洲| 婷婷五月丁香综合| 婷婷五月天丁香社区| 色五月av伊人| 97亚洲色 torrent magnet| 91色色色视频| 六月成人网| 久久精品4| 我要看激情五月天| 五月天婷婷青青| 天啪色| 另类专区在线观看| 久久九九色| 99久久6| 琪琪理论片| 丁香五婷婷| 日韩欧美四五区| 亚洲小电影在线观看黄999| 影音先锋91在线资源站| 免费观看全黄做爰的视频| 超碰在线视屏| 伊人久久大香网| 色综合五月| 香蕉久久国产AV一区二区| 天天操加勒比| 激情久久久久久| 春色激情第四色| 综合激情五月四射婷婷| 9er热在线精品视频| 五月丁香久久呀| 99久久久精品| 久草丁香婷婷五月天婷| 色伊人婷婷| 人人操人人爰人人一天天碰夜夜拍夜夜爽-中国A级毛片天天看天天谢… | 五月婷婷开心网| 超碰在线综合| 综合久久影院| 91超碰在线播放| 久久狠狠干| www夜夜操com| 99激情| 亚洲va在线∨a天堂va欧美va| 色播五月天天| A A色色| 大香蕉院线| 99超在线| 99热中文字幕久久| 亚洲综合无码| 99热在线观看精品| 婷婷五月综合激情| 婷婷字幕在线| 亚洲无线视频| 久久aaa| 欧美五月丁香啪啪响视频| 色九区| 91久久婷婷| 无码se| 色婷婷亚洲在线观看| 大香蕉懂9| 国产中文字幕在线视频免费观看| 九九99免费视频| 五月婷婷丁香深深爱| 开心久久xxx色| 丁香无月在线观看| 天天天天天久久久久久| 九热精品| 少妇性BBB搡BBB爽爽爽视頻| 成人片在线免费看| 草操AV在线| 2023天天日夜夜爽| 欧美日韩成人免费在线| 丁香六月婷婷综合| 亚洲视频国产一区| 色婷婷五月综合在线| 婷婷五月激情在线视频| 六月婷婷色综合| 五月激香蕉网| 色婷婷av在线观看| 丁香五月婷婷六月| 亚洲色久| 色色综合视频| 啪啪综合网| www99精品日韩| aaa久久久| 色播五月综合网| 欧美丁香五月97色| 国产精品香蕉| 欧美在线视频99| 婷婷五月天综合久久日美女| 日本美女天天日天天爽| www99精品| 9色在线| 丁香五月熟女| 涩涩五| 97色啪| 五月色丁香| 五月婷丁香| 激情丁香五月婷婷| 伊久久婷婷| 婷婷久久国产视频| 91久久久久久久| 专区无日本视频高清8| 五月激情在线| 日韩久久色| 五月综合影院| 青青青在线视频国产| 五月丁香久久色| 国产又色又爽又黄又免费| 日操夜操天天操不卡| 91爱操| 九九热短视频在线观看 | 五月天久久丁香| jiZZdr| 超色欲天天| 综合久久丁香婷婷,五月婷婷六月丁香,开心激情综合网,六月丁香在线观看,婷婷丁 | 久久精品婷婷| 亚洲精品久久久无码| 五月丁香欧美综合| 五月天综合视频| 久久综合香蕉国产国产蜜臀AV| 丁香五月天欧美成人| 黄色av网站在线免费播放| 国产综合激情五月久久| 天天操婷婷| 色综合另类| 婷婷五月天首页激情| 丁香五月网络网络| 久久伊人大香蕉| a v色婷婷| 色你久久| 色综合99| 亚州第一黄网| 激情综合网址| 影音先锋噜一噜| 好激情在线综合网| 国产FREESEXVIDEOS性中国| 五月丁香大相交| 色色色色色色色色网站| 男人天堂AV在线一区二区| 婷婷丁香视频| 久久日本wwww色| 婷婷色五月情| 69精品无码一区二区三区| 久久久com| 亚洲va在线| 99热这里都是精品| 久久婷婷草| 天天色综网| 人人操婷婷| 天天操天天草天天草天天| 久久精品国产AV一区二区三区 | 99在线看视频| 天天干夜夜谢| 色丁香五月天| 五月激情综合网| 日本va欧美va欧美va精品| 99精在线| 丁香五月手机视频| 狠狠干,狠狠操| www.色五月| 无码四色色色| 九九九激情综合| 狠狠干在线视频| 伊人网大香| 国产VA亚洲VA96| 91久女| 插少妇综合网| 九月丁香欧美综合| 可以看的AV| 丁香九月久久| 91无码色色| 99热99这里免费的精品| 丁香六月婷婷综合| 五月丁婷婷| 操精品9| 天天舔天天摸| 久婷婷久草| 精品人人操| 亚州操逼网| 久热99| 99re这里只有精品国产99| 欧洲色区| 99热这里只有精品官网| 噜噜狠狠| 久久9RE热视频精品98| 激情AV| 婷婷综合欧美| 久久婷婷六月综合综合| 禁欲电影完整版在线播放| 激情五月com| 亚洲成片在线观看| 天天日天天色| 成人AV免费观看| 天堂无码人妻精品AV一区| 天天添天天摸天天天天做| 伊人激情网| 婷婷五月激情五月激情| 五月婷婷无码| 99惹精品视频| 丁香五月天激情婷婷丁香六月 | 超碰成人电影| 五月丁香婷婷钟和色图| 日本三级黄色大片| www.99情趣网| 综合久久丁香婷婷,五月婷婷六月丁香,开心激情综合网,六月丁香在线观看,婷婷丁 | 大伊香蕉精品视频在线| 五月激情综合网| 午夜爱爱爱成人| 99在线观看精品| 五月天丁香色色| 天天射综合网站| 一级A片天天操夜夜操| 日韩日比视频| 久久久免费图片视频| 九九無妻| 综合网色| 天天透天天爱| 激情六月一二| 日韩色情亚洲五月天婷婷| 久操热线| 午夜色婷婷| 蜜桃人妻无码AV天堂三区| 久久香蕉丁香| 久久久久婷| 久久机热这里只有精品| 丁香5月综合啪啪| 99日韩| 激情久久婷婷| 九九综合图片网| 校花娇喘呻吟校长陈若雪视频| 婷婷激情人妻| 日本久久婷| 激情综合网五月激情网| 婷婷射丁香| 婷婷五月丁香激情色情| 逼逼AV| 五月婷丁香花| 久久网站观看免费欧洲国产 | 久婷婷婷| 亚洲AV网址| 色五婷婷开心缴| 丁香社区婷婷五月| 99在线小视频| 天天干夜夜欢| 色五月综合在线| 天天草天天日| 五月婷婷在线综合| 亚洲色频| 97婷婷色| 色婷婷影视| 午夜不卡久久精品无码免费 | 超碰2021| 东北黄色一级| 99精品自拍| 天天搞天天色综合| 五月丁香亚洲校园欧美| 丁香六月婷婷综合色| 五月天久草| 欧美超碰亚洲| 五月婷婷AV| 久久久8| 色吧五月| 我爱宗和色| 开心五月综合激情综合五月| 激情小说视频图片| 五月天丁香成人| 91综合色| 少妇被躁爽到高潮无码文| 免费无码毛片一区二区A片 | 少妇AB又爽又紧无码网站| 亚州美女| 色五月婷婷伊人| 亚洲成人九九九| 婷婷射综合| 丁香五月亚洲激情婷婷射| 国产伊人五月天| 婷婷五月天人妻| 噜噜噜噜噜色| 79精品视频在线观看,| 开心婷婷五月| 久久香视频| 色久影院| 色五月丁香激情| 俺也去在线视频| 啪啪色区| 99精彩视频| 疯狂做受XXXX高潮A片动画| 午夜激情四射影院| 久久精品99| 丁香六月视频| 99免费热视频在线| 狠狠爱五月婷婷综合六月| www.ppypp| 色婷婷丁香五月天在线观看| 五月丁香激情综合网| 婷婷五月综合性爱| 超碰人人超碰| 在线可以看的av网址| 99久久精品国产色欲| 五月天激情网站| 青青草99re| 91色噜噜狠狠狠狠色综合| 色色综合无码| 激情99| 色伦专区97中文字幕| 六月综合婷婷开心伊人| 亚洲精品一区中文字幕乱码| 色情五月天丁香社区| 再次出发二| 99热中文字幕久久| 色五月激情五月| 婷婷五月天综合在线| 九九无码| 大香蕉AV电影在线| 日本精品干| 国产成人精品一区二三区熟女在线 | 婷婷丁香六月天| 九月丁香很很色| 97久久人人| 99热成人在线观看| 五月婷婷丁香六月| 久久99婷婷| 婷婷五月激情天| www.99热这里只有精品| 中文字幕,综合,91| 亚洲综合五月天| 亚洲情综合五月天| 久热这里只有精品在线观看| 天天草天天爽| 五月六月伦理| 激情AV综合| 99热精品在线播放观看| 色综合五月天| 天天爱天天做天天日| 五月婷婷天天| 婷婷六久久| 91精品久久久久久久久久久久| 五月丁香久久久久| 99久久综合| 精品一二三区久久AAA片| 五月丁香色| 99热这里有精品| 综合AV网| 五月综合缴情网| 婷婷激情五月综合| 婷婷久久五月天亚洲欧美国产日韩在线观看| 日日夜夜狠狠| 五月丁香花激情综合网| 97碰碰视频在线观看| 亚洲视频无| 一级二级香港秋霞欧美欧美秋霞| 婷婷丁香五月综合网| 天天综合五月| 婷婷五月丁香99| 婷婷五月天伊人网在线观看视频| 五月日韩中文字幕| 天天日夜夜帕| 午夜天堂一区人妻| 熟女色专区| 大香蕉久| 婷婷天天婷婷天天澡| 可以免费观看的av| 五月婷在线色视频| 31色区视频免费看| 丁香六月婷婷五月婷婷| 2017狠狠干| 日本精品99网站| 内射综合网| 亚洲第一黄网| 婷婷六月综合在线| 5月丁香美女影院| 这里只有精品在线免费视频| 九九精品系列| 婷婷深爱五月| 开心五月婷婷激情| 国产精产国品一二三在观看| 97婷婷五月| 99re视频在线| 五月丁香成人网| 五月丁香综合激情在线观看| #NAME?| 久久超视频| 久久激情综合| 婷婷丁香五月天综合激情| 久播影院免费观看电视剧大全最新网| 97婷婷在线| 日韩欧美一级大黄网站| 99精彩视频在线观看| 欧美成人A片AAA片在线播放 | 激情综合婷婷| 超碰人人干| 激情综合五月丁香| 狠狠久久婷五月综合色| 五月丁香婷草| 激情五月六月丁香| 婷婷久久久久| 人人操9| 96精品久久久久久久久| 久久婷婷色丁香| 丁香综合久久| 伊人无码高清| 伊人久久大香线蕉av一区| 婷婷五月天天天日日夜夜| 色综合久久久综合久久网| 天天日综合网射| www,天天干| 九九热超碰| 久久9情免费| 超碰操网| 成人视频婷婷| 激情综合无码| 久久九九一區| 日韩av手机在线观看| 天天日本夜夜谢| 五月丁香久久综合| 久久9久久| 伊人在线视频| 欧美人妻一区二区| 亚洲人人操| 狠狠狠激情网| 色亚洲无码| 色婷婷丁香AV综合| 内射干少妇亚洲69XXX| 在线观看亚洲视频影院| 婷婷天天色| 丁香六月啪| 五月婷视频| 美欧日韩国产成人在战| 五月丁香六月激情欧美综合| 激情综合网亚洲色图| 国产在线黄色| 色欲影香| 情一色一乱一伦一91A| 69精品人人人人| 婷婷月综合| 婷婷色情六月| 天天干天天爽天天爽| wWwCom夜操wwW| 噜噜狠狠色综合久| 国内熟女黄色系列| 色五月激情五月| 日日夜夜狠狠| www色色com| 99啪啪视频| 激情六月天| 婷婷精品综合| 亚州色色色| 欧美性色五月天| 狠狠狠婷婷五月综合| 九九激情综合| 色色丁香| 久久亚洲婷婷综合色五月| 超碰免费电影| 人人操av| 五月丁香六月| 亚洲网综合在线| 538在线精品| 99热免费观看| 粉嫩AV久久一区二区三区| 五月丁香六月综合激情| 91一起操| 嫩BBB搡BBBB榛BBBB| 婷婷在线视频| 人人插操| 91妻人人爽人人看片| 国产91资源在线| 日韩在线看AV| 亚洲无码免费看| 久久九九九九| 97香蕉碰碰人妻国产欧美| 色婷操逼| 韩国情人在线电视剧免费观看高清版全集 | 99ri国产在线| 激情五月丁香综合蜜桃| 99热精品一区| 色婷婷色五月天| 欧美色小说婷婷| 亚洲国产成人裸舞| 久久五月丁香| 婷婷精品| 亚洲激情综合| 91综合在线视频| 人妻在线中文字幕久久| 亚洲五月六丁香激情| 热的五码久久精品| 99久久9| 亚洲乱码精品久久久久..| 欧美激情VA永久在线播放| 大香蕉综合网| 久99久在线| 丁香六月婷婷综合色| PORNY九色9l自拍视频成人| 99这里有精品久久97| 亚洲激情五月| 操骚货在线| 久久伊人大香蕉| www.色五月| 亚洲一区二区 成人网站戴套| 中文字幕在线不卡视频| 国产激情AV| 9久热这里只有精品视频| 五月天激情www| 激情六月丁香| 久久人妻超碰一区| 婷婷五月天激情综合| 五月丁香激情婷婷| 色五月色五天色情网| 五月婷婷综合在线| 亚洲愉拍99热成人精品| 伊人网碰碰| 梁铮版蜘蛛女在线观看| 五月婷婷开心五月| 婷婷婷婷色| 久久久9久| 丁香五月激情啪啪| 99热.com| 亚洲12p| 99久久五月天| 超碰成人av| 玖玖爱伊人| 中文字幕无码人妻少妇免费视频| 激情五月丁香社区| 日韩精品二三区| 99热综合| 伊人三级激情| 亚洲成人乱码av网站| 狠狠草狠狠草| 国产AV影片| 丁香六月啪啪| 国产成人高清| 成人精品一区日本无码网| 亚洲亚洲人成综合网络| 国产日产成人亚洲欧美国产VA| 五月婷婷中文网| 亚洲激情综合网| 日本A片一区| 久久激情综合| 99亚洲视频| 9九色首页| 亚洲色综久久五月| 99啪啪网| av电影在线播放| www.91.com处女在线直播| 日日色五月天| 亚洲综合九九| 久9无码视频| 99热色精品| 丁香五月婷婷香| 2017狠狠干| 综合五月丁香六月婷婷| 思思热视频| www.婷婷五月天| 亚洲色五月婷婷| 天天色凹凸| 婷婷五月伦理| 中文字幕视频色婷婷| 性爱动图国产麻豆一区二区三区| 色导航色婷婷五月天在线观看| 亚洲V国产V欧美V久久久久久| 五月天丁香六月综合| 日韩在线视频中文字幕| 97在线综合| 99热在线中文字幕| 激情四射五月天| 97人人看| 婷婷精品免费久久| 99热这里只有精品首页| 亚洲欧美婷婷五月色综合| 99热资源在线| 五月丁香激情四射综合| 六月婷婷激情| 噜综合| 五月婷婷开心网| 婷婷六月丁香开心深深爱| 99免费在线视频| 91操色| 202丰满熟女妇大| 丁香五月第九色| 日韩精品一区二区三区,四区,五区视频| xx色综合| 日日爽夜夜爽| 五月婷婷久| 五月婷婷www| 99这里只有精品| www.黄色片-久久成人国产精品在线播放-999AV| 丁香久久五月婷综合| 91人人爽狠狠狠| 大香蕉伊人99| 99这里只有免费的小视频在线观看| 国产精品国产成人国产三级| 99成人免费视频| 国产乱妇乱子在线播视频播放网站| 日批在线看| 天天视频精品9| 婷婷激情五月天视频在线| 综合久久六月| 99re这里只有| 日本乱子人伦在线视频| 国产色色色色| 色婷婷综合视频| 久久久国产精品黄毛片| 五月天婷婷丁香| 日韩一级| 日日爽日日| 五月丁香婷婷婷婷综合网| 操操熟女| 五月天婷婷基地| 成 久久| 五月天婷婷社区久久综合| 婷婷五月天视频| 欧美3AaAa大片| av在线观看免费| 日本黄 色 片| 超碰狠狠操| 2014天天爽| 欧美久久久中文字幕| 丁香五月天网站| 国产一级婬片毛片| 婷婷激情综合网| 精品99*| 久久久久久激情| 色高清无码视频| 丁香五月婷婷亚洲综合精品| 97干干干丁香| 丁香婷婷网| 伊人超碰| 色五月婷婷久久| 亚洲色区17| 婷婷五月天最新综合你懂的 | WWW.夜夜| 他改变了拜占庭| 人妻激情网| 综合五月婷婷| 日日操夜夜撸| 天天高潮夜夜爽| 激情婷婷视频在线| 97日本在线播放| 五月婷婷开心网| 婷婷久久综合| 五月婷色激情五月| 色综合爱综合| 久久婷婷五月综合97色一本| 婷婷五月中文字幕| 婷婷五月天亚洲综合网| 六月丁花香啪啪激情欧美| 婷婷五月天天天| 五月丁婷婷| 丁香五月天导航| 丁香五月黄色| 97成人视频| 亚洲狠狠色丁香婷婷综合久久| 色综合色| 青草久久五月婷伊人| 久久久久9999| 五月丁香趴趴| 日韩欧美性爱| www.久久色.com| www.五月婷婷| 亚洲99综合| 久久丝袜婷婷| 国内久久亭亭| 99久久.www| 五月天丁香综合在线| 色五月激情问网站| 91操女| 亚洲第一成人AV| www.91热久久| 亚洲最大视频网站| 99精品无码| 激情六月天婷婷| 亚洲六月色婷婷| 97色操| 香蕉婷婷色五月| 97碰| 欧美噜噜免费观看| 这里只有精品,日韩视频| site:minyis.com| 激情五月综合六月丁香婷婷狠狠干| 插逼综合网| 黄网在线免费观看| 综合天天综合| 精品一区二区三区四区五区六区介绍| 人人爱干人人爱草| 亚洲日韩26uuu| 五月天五月婷五月激情网| 亚洲欧洲色色| 免费AAAAA网| 色三级色三级| 91超碰九色| 五月叮香啪| 91狠狠色丁香婷婷综合久久精品| www.丁香六月婷婷久久天堂影院.con| 91狼友视频在线观看| 任我干视频在线观看| 嘿嘿视频免费看9| 色久综合| a69在线视频| 五月婷婷狠狠干| 逼逼AV| 99热 在线播放| | 婷婷影院A成人| 久久综合9| 日韩六六久久电影| 被强行糟蹋的女人A片| 亚洲综合字幕色色| 久久黄色免费视频| 五月丁香欧美在线| 九色视频91疯狂| 五月天婷婷色色| 欧美69久成人做爰视频| 另类丁香综合| 五月丁香六月综合情在线观看 | 日日做A爰片久久毛片A片英语| 一起操最新网址| 久99久在线观看| 99激情| 丁香五月婷婷图片综合| 爆乳熟妇一区二区三区爆乳照片| 婷婷六月丁香色| 婷婷刺激综合| 最近中文字幕2019视频1| 婷婷丁香综合| 懂色av蜜臀av粉嫩av永陈冠希| 五月天激情国产综合婷婷婷就去爱| 就爱干 在线| 久久五月天色婷婷| 超碰操日| 91Chinese在线| 欧美性二区| 天天舔天天操| 国产视频久色| 亚洲成人高清在线| 97人人看| 久久婷婷五月综合一| 色婷婷AAA| 国产VA亚洲VA96| 五月丁香操亭亭网| 国产69久久久欧美黑人A片| 人人操人人爰人人一天天碰夜夜拍夜夜爽-中国A级毛片天天看天天谢… | 五月婷无码| 婷婷五月天免费小说| 丁香六月色婷婷| 日韩色五月| 五月丁香综缴情性爱| 成人AV中文字幕| 99热18| 干一干xxxx| 久久成人精品视频| 色~性~乱~伦~噜| 碰人人97| 天天免费成年人视频| 综合激情五月天| 色综合99色| 亚洲色啪| 97AV在线视频| 亚洲熟女色| 欧美日本高清视频99| 久久机热思思热| 少妇高潮呻吟A片免费看软件| 亚洲色涩视频| 婷婷丁香在线| 99人人操| 激情五月丁香亭亭| 日韩三级视频一区二区| 久久婷婷色丁香| 婷婷午夜| 激情五月婷黄版| 99er精品视频| 日本久久极品| 热的国产99热| 婷婷丁香小说| 夜夜躁爽日日| 99热老网站| 97婷婷狠狠| 99精品偷自拍| 天天拍夜夜撸| 天天天摸夜夜夜玩| 久久99网| 久久草大香蕉| 激情五月天小说网| 久久久免费图片视频| 99在这里有精品| 久久婷婷五月综合色欧美| 另类激情五月| 无码 av电影| | 啪啪日本欧美| 色五婷婷开心缴| 青青草原爱爱网| 色噜噜狠狠色综无码久久合欧美| 五月天综合久久丁香91| 激情六月丁香| 久天综合| 五月天色影院| 99热这里只有精品98| 黄色中文字目| 欧美精品18| 精品激情| 风流少妇A片一区二区蜜桃 | 热这里只有精| 思思热在线精品视频| 五月丁香婷婷综合在线| 人人干av| 婷婷五月天综合色| 伊人久久中文网| 午夜青草资源| se婷97| 婷婷五月色情天| 色国产五月| 久久爱综合| 久久激情五月| 99资源在线视频| 激情综合网激情五月天| www.sezonghe| 五月婷婷影| 亚洲综合色网| 美女妹子后射视频网站在线观看| 婷婷五月综合社区| 色偷偷色婷婷| 五月天激情在线视频| 99精品久久久久久久久| 狼友视频在线观看18| 五月天婷婷在线观看精品男人| 男人的天堂av俄罗斯热| 日婷婷久久开心| 色婷婷丁香社综合| 亚洲综合五月天| 99热99热99热99热| 超碰成人电影| 丁香花综合永久入口| 色欲婷婷五月天| 特级片神马电影| 操一区| 中文字幕婷婷在线| 成人在线日韩| 国产婷婷五月天| 五月婷婷免费视频| 另类专区在线观看| 久久婷婷桃花五月天| 99这里都是精品| 婷婷五月天成人| 99久久精彩视频。| 午夜丁香六月婷| 香蕉97碰碰碰欧美| 日本99热| 天天噜| 狠狠撸激情综合丁香五月天俺来啦| 精品欧美性爱超级爽| 婷婷中文字幕| 日日干日日| 丁香六月视频免费观看| 久热这里只有精品性色AV| 国产成人精品一区二三区熟女在线| 日本狠狠色| WWW.桔色成人.COM| 丁香六月狠狠| 99日本精品视频热| 国产视频福利| 丁香五月婷婷少妇| 九九热这里只有精品6| 另类小说五月天| 日本VA视频| 天堂婷婷丁香六月网| 美女视频图片久久91| 激情五月天网| 婷婷色五月丁香六月欧美啪| 婷婷久久六月天| 99热99成人| 日韩成人网址| 99热99精品| 国产乱妇无乱码大黄AA片| 人人爱国产| 在线中文字幕视频| 丁香五月婷婷AV在线| 色五月婷婷五月久久| 色色综合色视频| 欧美在线视频99| 久久人妻少妇嫩草AV| 婷婷五月天综合网| 色婷婷电影网| 五月天综合| 97色色婷婷| 欧美丁香五月| 99热99热在线| 婷婷丁香五月激情| 综合图片色色| 婷婷 丁香 精品| 色日本综合| 五月婷婷中文字幕| 欧美一级毛卡片无码| 伊久大香蕉| 伊人大综合| 五月停视频天堂| 久9草在线观看视频| 91夫妻视频| 亚洲国产精品VA在线看黑人| 五月婷婷丁香六月在线| 99福利视频| 五月丁香六月婷婷综合| 噜噜视频| 丁香五月区| henhencao国产在线| 五月色婷婷影视在线电影| 婷婷激情五月天在线视频| 91婷婷五月天综合视频| 婷婷五月婷婷五月| 思思re99视频在线观看| 丁XX 成人| 婷婷五月天av| 五月丁香婷婷综合视频| 婷婷丁香五月激情密臀av| 91日日日| 99色精品| 波多野结衣AV无码Porn| 婷婷精品免费久久| 裸睡玩奶头(高H)| 国产一级黄色影片,| 三年高清大片免费观看国语| 在线成人国产| 色婷精品91| 六月色日韩| 新激情五月开心五月婷婷五月丁香五月| 五月天精品综合在线| 激情五月,婷婷五月,丁香五月| A级毛片高清免费不卡播放谢谢谢谢| 六月婷久久| 4399成人黄A片| 情五月亚洲婷婷| 天天干天天干天天干天天干天| 五月丁香婷草| 色色国产| 91青娱乐青青草| 另类激情五月在线视频欧美| 九九热精品视频| 蜜臀综合久草| 久久爱综合| 操91综合网| 激情久久久久久| 无码激情精品色婷婷久久久久| 这里只有精彩视频| 色情婷婷| 激情综合婷婷久久| 色婷丁香五月| 激情网五月婷婷| 婷婷综合激情| 风流少妇A片一区二区蜜桃 | 美女妹子后射视频网站在线观看| 五月亭亭综合五码| 97干在线视频| 97操资源婷婷| 婷丁香久综合| 日日操天天操| 丁香六月色婷婷| 搡BBBB搡BBB搡18 | 91超碰在线观看| 婷婷五月精品中文字幕| 久久99综合| 五月天婷婷激情网| 久久99免费视屏| 丁香五月婷婷骚视屏| 色区久久| 超碰高清在线| 26uuu国产精品| 99热偷拍| 亚洲4区国产欧美| 秋霞电影理论| www.射伊蕉婷婷| 亚洲精品第一国产综合亚AV | 激情精品久久| 日韩色五月| 五月开心网| 色婷婷伊人激情在线观看| 操人91| 欧美性色视频| 色婷婷丁香AV综合| 亚洲综合五月天婷婷丁香| 九九在线这里只有精品视频| 六月婷婷色综合| Av中文在线| 五月丁香综合啪啪対白| 亚洲色频| 超碰chaompinm| 激情久久久久久久久| 亚洲综合另类| 99ri精品视频在线观看| 激情五月天婷婷丁香| 丁香五月婷婷总啪啪| 欧美精品99| 婷婷五月天激情网| 影音先锋女人AA鲁色资源| 国精产品一区一区三区免费视频| 96丁香六月婷婷蜜桃综合久久| 日本色爽| 婷婷五月天综合AV| 中文字幕五月久久婷婷| 99啪| 久久伊人婷婷| 99热人人操人人操| 亚洲热久| 中文在线视频久1| 久久久久视剧HD| 深爱五月婷婷开心中文字幕| 色婷五月天| 超碰人人操在线| 99热网站| 国产67194| 常久最新免费的色吊丝| 久久中文网| 婷婷五月丁香婷婷| 欧美va视频| 亚洲综合婷婷五月| 99操逼视频| 色九九一二| 色婷婷综合网| 91人人超碰在线| 黄色AV日韩| 五月丁香六月激情综合网| 婷丁香五月天| 日韩av一区二区在线/日产精品久久久| 激情五月综亚网| 婷婷五月丁香伊人网| 校园春色亚洲色| 五月天激情电影| 久久Xx| 激情纯色婷婷五月天在线不卡视频| www.婷婷| 99re99在线看| 色热久| 九热精品| 丁香婷婷大香蕉| 婷婷五月天激情小说| 久久久久久人妻| www.91热久久| www.婷婷.com| 五月丁香亚洲校园欧美| 少妇高潮呻吟A片免费看软件| site:wpjngj.com| 狠狠干五月| 色香欲综合| 九九黄色网| 婷婷激情五月呦呦| 伊人色综合网| 五月五婷婷网| 亚洲超碰在线| 天天爽天天摸| 91日视频| 国产看真人毛片爱做A片 | 97性视频| 97久久久| WWW.桔色成人.COM| 婷婷天天色| 色色色色色色97| 六月五月天婷婷涩播在线| 丁香六月婷婷开心| 五月婷婷成人| 另类图片婷婷五月天| 最近中文字幕在线中文视频| www.色五月.com| 色五月天堂| 久草热久草在线视频| 婷婷五月六| 丁香五月婷婷啪| 综合婷| 久久婷婷伊人| 天天日天天舔| 天天日狠狠| 婷婷五月亚洲综合| 婷婷中文字幕版| 丁香九九九九| 天天干天天干天天操| 在线国产精品色| 国产色香蕉精品五夜婷| 激情色色色| 伊人婷婷色激情丁香| 九九精品综合| WWW.国产| 久人操| 婷婷六月视频| 激情综合一| 婷婷操超碰| 五月丁香六月情| 99色.com| 99热久| 久久在这里99| 日日夜夜狠狠婷婷色| 一级操逼内射在线视频| 91操人| 啪啪综合| 色综合婷婷| 另类视频丁香五月| 成AV人片一区二区三区久久| 婷婷99中文字幕| 丁香五月欧美| av在线超清中文| 九九综合| 色约约视频一区二区三区四区五区| 激情五月综合免费| 丁香激情六月天婷婷| 色香蕉影院| 97五月婷婷| 国产精品99久久久久久久女警| 91碰视频| www.婷婷.com| 五月社区婷婷激情| 深爱五月月天| 婷婷综合网| 性视频久久| 黄网网站在线播放| 丁香婷婷色九月| 九九超日本| 丁香六月婷婷开心婷婷网| 超碰资源在线| 五月丁香婷婷人体| 狠狠草天天草| 激情图片亚洲| 婷婷视频在线碰| 国产FREESEXVIDEOS性中国| 色播五月婷婷| 婷婷五月天网| 五月天国产| 五月婷婷六月丁香在线| 婷婷丁香五月综合激情小说| 激情综合网激情五月丁香| 日逼免费视频 | 激情五月婷婷丁香| 丁香五月婷婷激情蜜桃| 999热在线视频| 天天舔天天摸视频| 思思re99视频在线观看| WWW,五月| 色噜噜狠狠色综合日日| 天天干,夜夜爽| 99riAV国产精品视频| 日韩在线视频中文字幕| 免费AV播放| 丁香六月激情| 色狠狠色噜噜AV天堂五区| 婷婷五月天 偷拍| 色五月婷婷、老熟女| 色色网五月激情| 天天综合网在线| 日本色99| 色综合天天综合成人网| 一本色道久久88加勒比| 九一娱乐在线观看视频| OUMEIRIHANCHENGREN| 天天射天天干天插色综合| 天天爽在线视频| 91艹人| 婷婷五月天婷婷| 激情丁香五月天图片| 六月婷婷色色色| 婷婷丁香色五月| 精品亚洲国产成AV人片传媒| 成人综合网站| 婷婷亚洲久久| AV在线收看| 中文网AV| 热99精品视频| 99热青青草| 天天做天天爽| 五月激情在线| 色色五月天 亚洲| 丁香五月天.com| 五月丁香色婷婷伊人| 婷婷五月天人妻| 黄网免费观看| 少妇大叫太大太粗太爽了A片| 国产SUV精品一区二区6| 婷婷色六月| 亚洲午夜av| 五月丁香香蕉| 国产成人综合亚洲| wWW九九在线播放| 99热精品在线观看| 99久久综合精品五月天| 亚洲综合草草| 碰碰91| 五月婷婷六月色| 欧美私人家庭影院| 亚洲狠狠爱婷婷| 丁香九月激情| 人妻VideOssS人妻| 天天日天天舔| 五月婷婷日| 五月天婷婷六月| 日本九九视频| 国产成人精品一区二三区熟女在线| 色九九综合色| 婷婷丁香五月麻豆| 婷婷丁香综合成人| 北京熟妇搡BBBB搡BBBB| 九九热99视频在线| 久久婷婷欧美| 在线播放成人网站| 在线sebiav精品视频| 中文字幕av在线| 91精品久久久久久综合五月天| 99免费| 婷婷情色五月天| 欧美情月伍月天| 99爱在线免费视频| 激情婷婷五月| 99re免费在线视频| 久久婷婷五月天激情四射| 婷婷爱五月天人人爱| 99热最新| 亚洲色综合| 免费视频99| 激情婷婷狠狠干综合| 六月婷欧美| 99青青草| 国产精品日本一区二区在线播放| 九九久久99精品免费观看www| 深夜婷婷五月丁香| 五月婷婷色白丝| 亚洲天堂九九九| 色很很96| 婷婷五月无码| 26UUU欧美| 亚洲热视频在线| CHINESE熟女老女人HD视频| 4399无码视频| 99色精品| 国产婷婷色综合AV蜜臀AV| 99热这里只有精品3| 国产激情久久| 色噜噜婷婷| 五月丁香花伦理电影| 一本色综合色| 91性人人| 亚洲热久久| 久久机热这里只有精品| 色狠狠综合| 天天干天天爽| 亚洲宗合激情| 五月婷婷之美女图片| 狠狠色大香蕉| 色五月情| 天天搞夜夜爽夜夜爽| 99久操视频|