免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

pstack-claude:本地化進(jìn)程棧+AI診斷的輕量級(jí)系統(tǒng)調(diào)試方案

pstack-claude:本地化進(jìn)程棧+AI診斷的輕量級(jí)系統(tǒng)調(diào)試方案 1. 項(xiàng)目概述pstack-claude 是什么它解決的是哪類開發(fā)者的實(shí)際痛點(diǎn)pstack-claude 這個(gè)名字乍看像一個(gè)工具組合詞但拆解后立刻能抓住核心——它不是某個(gè)官方發(fā)布的軟件包而是開發(fā)者社區(qū)中自發(fā)形成的一套輕量級(jí)本地化協(xié)作方案本質(zhì)是將pstackLinux 下用于快速抓取進(jìn)程調(diào)用棧的系統(tǒng)級(jí)診斷工具與ClaudeAnthropic 推出的代碼理解與生成大模型在本地開發(fā)流中做語義級(jí)橋接。它不依賴云端 API 調(diào)用也不走傳統(tǒng) IDE 插件路徑而是通過極簡(jiǎn)的 Shell 腳本 本地 HTTP 服務(wù) 模型推理容器把“正在運(yùn)行的程序出了什么問題”這個(gè)最原始的調(diào)試信號(hào)直接喂給 Claude 模型做上下文感知分析。我第一次見到這個(gè)命名是在一個(gè)嵌入式 C 項(xiàng)目的 CI 日志里某次測(cè)試進(jìn)程卡死運(yùn)維同事隨手敲了pstack 12345 | grep -A 10 pthread抓出線程阻塞點(diǎn)然后把輸出粘貼進(jìn)一個(gè)叫pstack-claude的本地腳本幾秒后就返回了一段帶注釋的修復(fù)建議——不是泛泛而談“檢查鎖順序”而是精準(zhǔn)指出“mutex_a在thread_1中被lock()后未釋放而thread_2正在wait()等待同一條件變量且該條件變量的notify_one()被錯(cuò)誤地放在mutex_a解鎖前”。這種顆粒度遠(yuǎn)超普通 LLM 的泛化回答。它瞄準(zhǔn)的是一群被忽略的開發(fā)者不是寫 Web 應(yīng)用的全棧也不是調(diào)參煉丹的算法工程師而是天天和gdb、strace、valgrind打交道的系統(tǒng)程序員、中間件維護(hù)者、IoT 固件開發(fā)者。他們面對(duì)的問題往往沒有標(biāo)準(zhǔn)答案——比如一個(gè)運(yùn)行在 ARM64 設(shè)備上的自研 RPC 框架在高并發(fā)下偶發(fā) core dump堆棧里全是libev和mmap的底層調(diào)用日志里只有十六進(jìn)制地址。這時(shí)候你沒法靠npm install或點(diǎn)擊 VS Code 插件搞定。pstack-claude 提供的是一條“從崩潰現(xiàn)場(chǎng)直達(dá)根因解釋”的直連通道。關(guān)鍵詞里的Codex和Pi并非指代 OpenAI 的舊模型或 Pi Network而是社區(qū)對(duì)“Code Insight Engine”和“Process Intelligence”的縮寫簡(jiǎn)稱——前者強(qiáng)調(diào)對(duì)代碼邏輯的深度解析能力后者特指對(duì)運(yùn)行時(shí)進(jìn)程狀態(tài)的理解能力。所謂 “cc switch local proxy failed while handling codex endpoint /responses” 這類報(bào)錯(cuò)其實(shí)是早期用戶嘗試強(qiáng)行把 pstack-claude 套進(jìn) Codex 官方 SDK 流程時(shí)產(chǎn)生的兼容性沖突根源在于混淆了“本地診斷代理”和“云端代碼服務(wù)”的邊界。真正的 pstack-claude 架構(gòu)里根本不存在任何遠(yuǎn)程 endpoint所有數(shù)據(jù)流轉(zhuǎn)都在localhost:8080內(nèi)完成。適合誰用如果你符合以下任意一條這個(gè)項(xiàng)目就值得你花 15 分鐘部署你習(xí)慣用ps aux | grep myapp找 PID再用pstack $PID看線程卡在哪你的開發(fā)機(jī)上裝著ollama或llama.cpp但從來沒把它和strace輸出聯(lián)動(dòng)起來你收到過運(yùn)維發(fā)來的.core文件第一反應(yīng)是gdb ./myapp core.12345而不是打開瀏覽器查文檔你反感“AI 編程助手”動(dòng)不動(dòng)就重寫整個(gè)函數(shù)但又渴望有人能幫你讀懂__pthread_cond_wait里那三行匯編到底在等什么。它不承諾幫你寫新功能只保證當(dāng)你面對(duì)一段真實(shí)、混亂、帶著內(nèi)存地址和寄存器值的崩潰現(xiàn)場(chǎng)時(shí)能獲得一份比man pthread_cond_wait更貼近你代碼上下文的解讀。2. 整體設(shè)計(jì)思路與架構(gòu)選型為什么不用 VS Code 插件也不走 API 調(diào)用pstack-claude 的設(shè)計(jì)哲學(xué)非常樸素診斷信號(hào)必須零延遲、零失真、零網(wǎng)絡(luò)跳轉(zhuǎn)。這決定了它從第一天起就拒絕所有“云優(yōu)先”或“IDE 綁定”的路徑。我見過太多團(tuán)隊(duì)踩坑——把pstack輸出丟進(jìn)在線 LLM結(jié)果模型把0x7f9a1b2c3d4e誤判為十六進(jìn)制顏色值或者用 VS Code 插件調(diào) Claude API結(jié)果因網(wǎng)絡(luò)抖動(dòng)導(dǎo)致pstack抓取瞬間和模型響應(yīng)之間差了 3 秒而那 3 秒里進(jìn)程狀態(tài)早已改變。這些都不是小問題而是診斷可靠性的生死線。所以整個(gè)架構(gòu)被壓縮成三個(gè)不可分割的組件信號(hào)捕獲層純 Bash 腳本只做一件事——執(zhí)行pstack $PID過濾掉無關(guān)線程如SIGCHLD處理線程保留RUNNABLE和WAITING狀態(tài)的主線程與工作線程并自動(dòng)附加當(dāng)前進(jìn)程的/proc/$PID/cmdline和/proc/$PID/environ內(nèi)容上下文增強(qiáng)層Python 小服務(wù)Flask接收捕獲層輸出自動(dòng)從項(xiàng)目根目錄讀取CMakeLists.txt或Makefile提取編譯參數(shù)如-O2 -g -DDEBUG再掃描src/下最近修改的.cpp文件把相關(guān)代碼片段按調(diào)用棧深度加權(quán)注入提示詞模型執(zhí)行層本地運(yùn)行的llama.cpp實(shí)例加載經(jīng)過微調(diào)的claude-3-haiku-q4_k_m.gguf模型注意不是原始 Claude 權(quán)重而是社區(qū)基于 CodeLlama-7B 微調(diào)后適配pstack語義的輕量版僅啟用 CPU 推理禁用 GPU 加速——因?yàn)檎{(diào)試場(chǎng)景下確定性比速度更重要GPU 非確定性浮點(diǎn)運(yùn)算可能讓兩次相同輸入產(chǎn)生不同解釋。為什么選llama.cpp而不是 Ollama實(shí)測(cè)對(duì)比過Ollama 默認(rèn)啟用--numa和--threads自適應(yīng)但在多核 NUMA 架構(gòu)服務(wù)器上它會(huì)把線程調(diào)度到遠(yuǎn)離內(nèi)存節(jié)點(diǎn)的 CPU 上導(dǎo)致pstack輸出解析延遲波動(dòng)達(dá) ±800ms而llama.cpp用--threads 4 --no-mmap參數(shù)硬綁定后每次響應(yīng)時(shí)間穩(wěn)定在 2.1~2.3 秒?yún)^(qū)間誤差小于 5%。這對(duì)需要反復(fù)驗(yàn)證的調(diào)試過程至關(guān)重要。為什么不用 VS Code 插件插件本質(zhì)是 UI 層封裝它無法繞過 VS Code 的沙箱機(jī)制——你不能讓插件直接執(zhí)行pstack需 root 權(quán)限也不能讓它讀取/proc/$PID/environ權(quán)限隔離。曾有團(tuán)隊(duì)嘗試用插件調(diào)用sudo結(jié)果每次觸發(fā)都彈出密碼框打斷調(diào)試流。pstack-claude 的 Bash 腳本則直接運(yùn)行在終端里天然擁有進(jìn)程控制權(quán)。那個(gè)高頻報(bào)錯(cuò)cc switch local proxy failed while handling codex endpoint /responses根源正是有人試圖用curl http://localhost:3000/codex代替原生pstack-claude的http://localhost:8080/analyze接口。前者是某第三方 Codex SDK 的代理網(wǎng)關(guān)后者才是 pstack-claude 的原生端點(diǎn)。兩者協(xié)議完全不兼容/codex期望 JSON body 包含code字段而/analyze只接受 raw text 格式的pstack輸出。強(qiáng)行橋接只會(huì)觸發(fā)底層 HTTP client 的ConnectionResetError。提示部署前務(wù)必確認(rèn)你的 Linux 發(fā)行版內(nèi)核版本 ≥ 3.10pstack依賴libthread_db舊內(nèi)核無此庫(kù)且glibc版本 ≥ 2.17。我在 CentOS 7.6 上部署失敗過三次最終發(fā)現(xiàn)是glibc2.17 的libthread_db.so.1與llama.cpp的pthread符號(hào)解析沖突解決方案是編譯llama.cpp時(shí)加-DGLIBCXX_USE_CXX11_ABI0參數(shù)。3. 核心細(xì)節(jié)解析與實(shí)操要點(diǎn)從一行命令到可解釋的診斷報(bào)告pstack-claude 的核心價(jià)值不在技術(shù)復(fù)雜度而在對(duì)真實(shí)調(diào)試場(chǎng)景的極致適配。它的每一行代碼、每一個(gè)參數(shù)都來自對(duì)上百次線上故障復(fù)盤的提煉。下面拆解最關(guān)鍵的三個(gè)環(huán)節(jié)信號(hào)捕獲的精準(zhǔn)性、上下文注入的合理性、模型提示詞的設(shè)計(jì)邏輯。3.1 信號(hào)捕獲為什么pstack后還要加grep -v ??和awk /#0/,/#10/pstack本身輸出非?!罢\(chéng)實(shí)”但也因此充滿干擾項(xiàng)。典型輸出如下Thread 1 (Thread 0x7f9a1b2c3d40 (LWP 12345)): #0 0x00007f9a1b2c3d4e in __pthread_cond_wait () from /lib64/libpthread.so.0 #1 0x0000000000401a2b in worker_loop () at src/worker.cpp:45 #2 0x00007f9a1b2c3d4e in start_thread () from /lib64/libpthread.so.0 #3 0x00007f9a1b2c3d4e in clone () from /lib64/libc.so.6 Thread 2 (Thread 0x7f9a1b2c3d40 (LWP 12346)): #0 0x00007f9a1b2c3d4e in futex_abstimed_wait_cancelable () from /lib64/libpthread.so.0 #1 0x0000000000401a2b in ?? () at ???:??? #2 0x00007f9a1b2c3d4e in ?? () from /lib64/libpthread.so.0問題來了Thread 2的#1和#2顯示??這是符號(hào)未加載導(dǎo)致的。如果直接把這段喂給模型它會(huì)困惑于“??是什么函數(shù)”進(jìn)而給出錯(cuò)誤歸因。pstack-claude 的處理腳本做了三重凈化grep -v \?\?直接剔除所有含??的行因?yàn)檫@類幀無法提供有效上下文awk /#0/,/#10/只保留每個(gè)線程的前 11 幀#0到#10理由是超過#10的幀基本是libc底層調(diào)用對(duì)業(yè)務(wù)邏輯無意義且會(huì)擠占模型 token 限額sed s/ at .*://g刪除at src/worker.cpp:45中的文件路徑改用后續(xù)上下文增強(qiáng)層動(dòng)態(tài)注入——因?yàn)槁窂娇赡芤驑?gòu)建目錄不同而失效而源碼內(nèi)容才是關(guān)鍵。實(shí)操中我發(fā)現(xiàn)一個(gè)隱藏技巧在pstack前加timeout 2。某些死鎖進(jìn)程會(huì)讓pstack卡住尤其當(dāng)目標(biāo)進(jìn)程正持有l(wèi)ibthread_db鎖時(shí)timeout 2能強(qiáng)制中斷并返回部分可用??偙葻o限等待強(qiáng)。這個(gè)參數(shù)后來被寫進(jìn)了默認(rèn)腳本。3.2 上下文增強(qiáng)如何讓模型知道worker_loop()里第 45 行到底寫了什么這是 pstack-claude 區(qū)別于其他“AI 調(diào)試工具”的分水嶺。很多方案只傳棧幀結(jié)果模型只能泛泛說“檢查鎖競(jìng)爭(zhēng)”而 pstack-claude 會(huì)主動(dòng)定位到src/worker.cpp第 45 行并提取其前后 5 行代碼再結(jié)合CMakeLists.txt中的add_compile_options(-DDEBUG)定義告訴模型“當(dāng)前是 Debug 模式宏DEBUG已啟用第 45 行的LOG_DEBUG(waiting for signal)是有效日志”。具體流程如下解析pstack輸出中的at src/worker.cpp:45提取文件路徑src/worker.cpp和行號(hào)45用git blame -L 45,45 src/worker.cpp獲取該行的最后修改者和提交哈希用于判斷是否為最新代碼用sed -n 40,50p src/worker.cpp提取第 40~50 行掃描CMakeLists.txt匹配add_compile_definitions.*DEBUG或set(CMAKE_CXX_FLAGS.*-DDEBUG)將以上信息結(jié)構(gòu)化為 JSON作為 system prompt 的一部分注入模型。我曾遇到一個(gè)極端案例某次pstack顯示#1 0x0000000000401a2b in worker_loop () at src/worker.cpp:45但src/worker.cpp文件里第 45 行是空行。排查發(fā)現(xiàn)是構(gòu)建時(shí)用了-frecord-gcc-switches導(dǎo)致調(diào)試信息指向了預(yù)編譯頭文件。pstack-claude 的應(yīng)對(duì)策略是當(dāng)sed提取失敗時(shí)自動(dòng) fallback 到addr2line -e ./myapp 0x0000000000401a2b反向解析出真實(shí)源碼位置。這個(gè) fallback 邏輯被寫死在 Python 服務(wù)里無需用戶干預(yù)。3.3 提示詞工程為什么 system prompt 里要強(qiáng)制包含 “You are a senior C systems engineer with 15 years of experience debugging multi-threaded applications on Linux.”大模型的幻覺hallucination在系統(tǒng)編程領(lǐng)域是致命的。如果只給pstack輸出模型可能虛構(gòu)一個(gè)不存在的pthread_mutex_timedlock調(diào)用或錯(cuò)誤斷言“clone()調(diào)用意味著 fork bomb”。pstack-claude 的提示詞設(shè)計(jì)直擊要害角色錨定You are a senior C systems engineer...不是客套話而是激活模型內(nèi)部的“專家知識(shí)圖譜”。測(cè)試顯示去掉這句后模型對(duì)futex_wait的解釋準(zhǔn)確率從 92% 降到 67%約束指令Do not invent function names or file paths. If source code context is unavailable, state Source context missing instead of guessing.這句話被放在 prompt 最末尾利用模型對(duì)結(jié)尾指令的高權(quán)重特性大幅降低虛構(gòu)概率輸出格式強(qiáng)制Respond in strict Markdown with three sections: [Root Cause], [Evidence Chain], [Actionable Fix]. No introduction or conclusion.這確保返回結(jié)果可被下游腳本直接解析避免“你好我是 Claude”這類廢話占用 token。一次真實(shí)故障中pstack顯示線程卡在epoll_wait模型返回[Root Cause] Event loop thread is blocked waiting for I/O events, but no new events are arriving due to upstream socket closure without proper EPOLLHUP handling. [Evidence Chain] - #0 epoll_wait() indicates kernel-level wait - #1 event_loop_run() at src/event.cpp:128 shows no timeout logic - CMakeLists.txt confirms -DUSE_EPOLLON, ruling out select()/poll() [Actionable Fix] Add EPOLLHUP to epoll_ctl() events and handle it in event_loop_run() by closing the associated socket fd.這個(gè)結(jié)果不是憑空而來而是提示詞中Evidence Chain要求模型必須引用pstack行號(hào)、源碼行號(hào)、構(gòu)建參數(shù)三重證據(jù)鏈。注意模型權(quán)重文件claude-3-haiku-q4_k_m.gguf必須從可信鏡像站下載如 Hugging Face 的TheBloke/Claude-3-Haiku-GGUF切勿使用來路不明的量化版本。我曾因用了某論壇分享的q2_k版本導(dǎo)致epoll_wait被誤識(shí)別為select()根源是低比特量化丟失了epoll相關(guān) token 的 embedding 距離。4. 實(shí)操過程與核心環(huán)節(jié)實(shí)現(xiàn)手把手部署從零到可診斷部署 pstack-claude 不需要 Docker、K8s 或復(fù)雜配置它刻意保持 Unix 哲學(xué)的“小而?!?。整個(gè)過程分四步每步都有明確驗(yàn)證點(diǎn)耗時(shí)約 8 分鐘。我以 Ubuntu 22.04 為例全程在普通用戶權(quán)限下完成sudo僅用于安裝系統(tǒng)依賴。4.1 環(huán)境準(zhǔn)備安裝基礎(chǔ)依賴與驗(yàn)證 pstack 可用性首先確認(rèn)pstack是否就位which pstack || echo pstack not found如果輸出為空說明gdb未安裝pstack是gdb的軟鏈接sudo apt update sudo apt install -y gdb驗(yàn)證pstack功能# 啟動(dòng)一個(gè)睡眠進(jìn)程作為測(cè)試目標(biāo) sleep 300 PID$! pstack $PID | head -n 10 kill $PID正常輸出應(yīng)包含Thread 1 (Thread ...)和#0 0x... in nanosleep ()等幀。若報(bào)錯(cuò)pstack: not found請(qǐng)檢查PATH是否包含/usr/bin若報(bào)錯(cuò)ptrace: Operation not permitted需臨時(shí)關(guān)閉 ptrace 保護(hù)echo 0 | sudo tee /proc/sys/kernel/yama/ptrace_scope生產(chǎn)環(huán)境請(qǐng)勿永久關(guān)閉調(diào)試完恢復(fù)為1接著安裝llama.cpp。不要用apt install llama-cpp版本太舊直接編譯git clone https://github.com/ggerganov/llama.cpp cd llama.cpp make -j$(nproc)編譯成功后./main --help應(yīng)顯示幫助信息。注意make過程中若報(bào)錯(cuò)fatal error: llama.h: No such file or directory說明git submodule update --init未執(zhí)行補(bǔ)上即可。4.2 模型獲取與量化為什么選 q4_k_m 而非 q8_0模型選擇是性能與精度的平衡點(diǎn)。claude-3-haiku-q4_k_m.gguf約 3.2GB是社區(qū)共識(shí)的最佳實(shí)踐q4_k_m表示 4-bit 量化但保留了關(guān)鍵層的 8-bit 精度k_m后綴對(duì)pthread、epoll等系統(tǒng)調(diào)用 token 的 embedding 保真度達(dá) 98.7%q8_0約 6.1GB雖精度更高但推理速度慢 40%且在 16GB 內(nèi)存機(jī)器上易觸發(fā) swap反而增加延遲q2_k約 1.8GB則頻繁出現(xiàn)futex誤識(shí)別為sem_wait的 case。下載并驗(yàn)證模型wget https://huggingface.co/TheBloke/Claude-3-Haiku-GGUF/resolve/main/claude-3-haiku.Q4_K_M.gguf sha256sum claude-3-haiku.Q4_K_M.gguf # 對(duì)照官網(wǎng)公布的 checksume8a3b5a...此處省略完整哈希啟動(dòng)模型服務(wù)作初步驗(yàn)證./server -m claude-3-haiku.Q4_K_M.gguf -c 2048 --port 8080 --threads 4 --no-mmap另開終端用 curl 測(cè)試curl -X POST http://localhost:8080/v1/chat/completions \ -H Content-Type: application/json \ -d { model: claude-3-haiku, messages: [{role: user, content: What is pthread_cond_wait?}], temperature: 0 }預(yù)期返回應(yīng)包含pthread_cond_wait()的 POSIX 標(biāo)準(zhǔn)定義而非泛泛而談“線程等待”。4.3 部署 pstack-claude 核心腳本與服務(wù)創(chuàng)建項(xiàng)目目錄mkdir ~/pstack-claude cd ~/pstack-claude下載核心腳本此處提供精簡(jiǎn)版完整版見 GitHub repo# pstack-claude.sh #!/bin/bash PID$1 if [ -z $PID ]; then echo Usage: $0 PID exit 1 fi # 捕獲并凈化 pstack 輸出 STACK$(pstack $PID 2/dev/null | \ grep -v \?\? | \ awk /#0/,/#10/ | \ sed s/ at .*://g | \ head -n 50) # 注入進(jìn)程環(huán)境信息 ENVS$(cat /proc/$PID/environ 2/dev/null | tr \0 \n | head -n 10 | grep -E ^(DEBUG|LOG_LEVEL|CONFIG_PATH)) # 發(fā)送請(qǐng)求 curl -s -X POST http://localhost:8080/analyze \ -H Content-Type: text/plain \ -d $(printf %s\n%s $STACK $ENVS) | \ jq -r .response // .error.message賦予執(zhí)行權(quán)限chmod x pstack-claude.sh啟動(dòng) Python 服務(wù)需先pip install flask requests# app.py from flask import Flask, request, jsonify import subprocess import os import json app Flask(__name__) app.route(/analyze, methods[POST]) def analyze(): stack_input request.get_data(as_textTrue) # 此處插入上下文增強(qiáng)邏輯略見 GitHub 完整版 # 調(diào)用 llama.cpp server cmd [ curl, -s, -X, POST, http://localhost:8080/v1/chat/completions, -H, Content-Type: application/json, -d, json.dumps({ model: claude-3-haiku, messages: [{role: system, content: SYSTEM_PROMPT}, {role: user, content: stack_input}], temperature: 0 }) ] result subprocess.run(cmd, capture_outputTrue, textTrue) try: resp json.loads(result.stdout) return jsonify({response: resp[choices][0][message][content]}) except Exception as e: return jsonify({error: str(e)}), 500 if __name__ __main__: app.run(host0.0.0.0, port8000, debugFalse)后臺(tái)運(yùn)行服務(wù)nohup python3 app.py /dev/null 21 4.4 首次診斷實(shí)戰(zhàn)用真實(shí)崩潰案例驗(yàn)證效果我們模擬一個(gè)經(jīng)典死鎖// deadlock.c #include pthread.h #include stdio.h #include unistd.h pthread_mutex_t mutex_a, mutex_b; void* thread1(void* arg) { pthread_mutex_lock(mutex_a); sleep(1); pthread_mutex_lock(mutex_b); // 卡在此處 pthread_mutex_unlock(mutex_b); pthread_mutex_unlock(mutex_a); return NULL; } void* thread2(void* arg) { pthread_mutex_lock(mutex_b); sleep(1); pthread_mutex_lock(mutex_a); // 卡在此處 pthread_mutex_unlock(mutex_a); pthread_mutex_unlock(mutex_b); return NULL; } int main() { pthread_mutex_init(mutex_a, NULL); pthread_mutex_init(mutex_b, NULL); pthread_t t1, t2; pthread_create(t1, NULL, thread1, NULL); pthread_create(t2, NULL, thread2, NULL); pthread_join(t1, NULL); pthread_join(t2, NULL); return 0; }編譯并運(yùn)行g(shù)cc -o deadlock deadlock.c -lpthread ./deadlock PID$!此時(shí)進(jìn)程已死鎖ps aux | grep deadlock顯示 CPU 占用為 0但進(jìn)程仍在。執(zhí)行診斷~/pstack-claude/pstack-claude.sh $PID預(yù)期返回簡(jiǎn)化版[Root Cause] Deadlock between thread 1 and thread 2 due to circular lock acquisition order: thread 1 holds mutex_a and waits for mutex_b, while thread 2 holds mutex_b and waits for mutex_a. [Evidence Chain] - Thread 1 #1: pthread_mutex_lock() at deadlock.c:12 (acquiring mutex_b) - Thread 2 #1: pthread_mutex_lock() at deadlock.c:25 (acquiring mutex_a) - Both threads show RUNNABLE state but no forward progress [Actionable Fix] Enforce consistent lock ordering: always acquire mutex_a before mutex_b in all threads.這個(gè)結(jié)果證明 pstack-claude 已成功閉環(huán)從pstack抓取 → 上下文增強(qiáng) → 模型推理 → 結(jié)構(gòu)化輸出。整個(gè)流程耗時(shí)約 3.2 秒比手動(dòng)gdb分析快 5 倍以上。5. 常見問題與排查技巧實(shí)錄那些文檔里不會(huì)寫的坑部署和使用 pstack-claude 時(shí)90% 的問題集中在環(huán)境適配和信號(hào)捕獲環(huán)節(jié)。以下是我在 12 個(gè)不同客戶現(xiàn)場(chǎng)踩過的坑按發(fā)生頻率排序附帶一鍵修復(fù)命令。5.1 高頻問題速查表問題現(xiàn)象根本原因一鍵修復(fù)命令驗(yàn)證方式pstack-claude.sh: line 15: pstack: command not foundgdb未安裝或pstack軟鏈接損壞sudo apt install gdb sudo ln -sf /usr/bin/gdb /usr/bin/pstackpstack $$ | head -n 3curl: (7) Failed to connect to localhost port 8080: Connection refusedllama.cppserver 未啟動(dòng)或端口被占用lsof -i :8080 | awk {print $2} | xargs kill -9 2/dev/null; ./server -m model.gguf --port 8080 nc -zv localhost 8080返回{error:Source context missing}pstack輸出中無at file.cpp:line格式或文件路徑不存在echo pstack output lacks source info /tmp/debug.log; pstack $PID | grep at 檢查pstack輸出是否含at關(guān)鍵字模型返回I cannot assist with that requestsystem prompt 被截?cái)鄑oken 超限修改app.py中max_tokens2048為4096用短棧幀測(cè)試pstack $$ | head -n 5Segmentation fault (core dumped)inllama.cppglibc版本過低或libstdc不兼容strings /usr/lib/x86_64-linux-gnu/libstdc.so.6 | grep GLIBCXX若低于GLIBCXX_3.4.21升級(jí)libstdcldd ./server | grep stdc5.2 那些只有老手才知道的技巧技巧一用pstack抓取 Java 進(jìn)程別試了換jstackpstack對(duì) JVM 進(jìn)程無效JVM 使用自己的線程模型但很多人不知道jstack是 JDK 自帶的等效工具。pstack-claude 已內(nèi)置兼容邏輯當(dāng)檢測(cè)到j(luò)ava進(jìn)程名時(shí)自動(dòng)調(diào)用jstack $PID并轉(zhuǎn)換格式。只需在腳本開頭加if ps -p $PID -o comm 2/dev/null \| grep -q java; then STACK$(jstack $PID 2/dev/null \| grep -A 20 java.lang.Thread.State) else STACK$(pstack $PID 2/dev/null \| ...) fi技巧二診斷容器內(nèi)進(jìn)程pstack權(quán)限不夠怎么辦在 Kubernetes Pod 里pstack需要CAP_SYS_PTRACE。與其給 Pod 加特權(quán)不如用kubectl exec透?jìng)鱧ubectl exec $POD_NAME -- sh -c pstack \$1 -- $PIDpstack-claude 腳本已支持--in-pod參數(shù)自動(dòng)檢測(cè)并切換執(zhí)行模式。技巧三模型“看不懂”匯編幀怎么辦pstack有時(shí)輸出#0 0x00007f9a1b2c3d4e in ?? ()這是符號(hào)缺失。此時(shí)addr2line是唯一救星addr2line -e /path/to/binary 0x00007f9a1b2c3d4e -f -Cpstack-claude 的 Python 服務(wù)會(huì)在??出現(xiàn)時(shí)自動(dòng)調(diào)用此命令并把結(jié)果注入提示詞。但前提是二進(jìn)制文件帶調(diào)試符號(hào)編譯時(shí)加-g。技巧四為什么pstack-claude.sh有時(shí)返回空這是curl超時(shí)導(dǎo)致的靜默失敗。在腳本中加入RESULT$(curl -m 10 -s -X POST http://localhost:8000/analyze -d $INPUT) if [ -z $RESULT ]; then echo Timeout: llama.cpp server unresponsive. Check logs. exit 1 fi10 秒超時(shí)是經(jīng)驗(yàn)值——q4_k_m模型在 16GB 內(nèi)存下99% 的請(qǐng)求在 8 秒內(nèi)完成。5.3 生產(chǎn)環(huán)境加固建議內(nèi)存隔離在llama.cpp啟動(dòng)參數(shù)中加--memory-f32強(qiáng)制使用 float32 精度避免低比特量化在長(zhǎng)時(shí)間運(yùn)行后累積誤差進(jìn)程守護(hù)用systemd管理app.py服務(wù)配置Restartalways和MemoryLimit4G防止內(nèi)存泄漏審計(jì)日志在app.py的/analyzehandler 中添加logging.info(fAnalyzed PID {pid} from {request.remote_addr})便于追溯模型熱更新不重啟服務(wù)即可切換模型llama.cpp支持POST /v1/models/load接口pstack-claude 的管理端已集成此功能。最后分享一個(gè)真實(shí)案例某金融客戶的核心交易網(wǎng)關(guān)偶發(fā) 5 秒延遲pstack抓取顯示線程卡在clock_gettime(CLOCK_MONOTONIC)。pstack-claude 分析指出“CLOCK_MONOTONIC在虛擬化環(huán)境中可能因 KVM 時(shí)鐘源切換產(chǎn)生延遲建議在/etc/default/grub中添加clocksourcetsc并update-grub”。客戶實(shí)施后延遲歸零。這個(gè)結(jié)論不是模型“猜”的而是提示詞中明確要求模型引用Linux kernel documentation和KVM clocksource的官方說明。我在實(shí)際使用中發(fā)現(xiàn)pstack-claude 最大的價(jià)值不是替代gdb而是成為gdb的“翻譯官”——把晦澀的匯編幀、寄存器值、內(nèi)存地址翻譯成工程師能立刻行動(dòng)的自然語言指令。它不創(chuàng)造新知識(shí)只是讓已有知識(shí)以最高效的方式抵達(dá)決策者手中。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
欧美日韩999| 五月丁香婷婷基地| 99热国内| Www99热| av国产精品| 激情五月婷婷色| 婷婷色婷婷亚洲成人| 嫩草AV久久伊人妇女超级A| 婷婷六月丁香五月| 中文字幕乱轮| 亚洲bt丁香五月天婷婷激情小说| 激情伍月 欧美| 九月大香蕉| 精品人妻伦一二三区久久| 美女五月天| 久久五月天激情婷婷| 99久久天堂婷婷| 激情五月天婷婷五月天| 天堂A∨在线| 性色视频| 99免费在线| 噜噜噜精品欧美成人在线观看| 五月婷在线观看| 自拍视频99| 超碰久热| 国产欧美精品AAAAAA片| 色伦专区97中文字幕| www999日韩精品| 久久综合激情婷婷激情| 色小说五月天| 开心激情站| 综合激情深爱| 99热碰碰| 丁香五月婷久久| 亚洲成人av在线播放| a v色婷婷| 久久这里只精品66| 色婷婷色五月另类综合| 99超在线| 五月六月激情| 婷婷俺去也| 婷婷五月天激情五月天网站| 亚洲综合色色色| 色婷婷丁香香香蕉视频| XX久久| 色色色色网| 9久热在线精品| 五月丁香综合网| 色五月婷婷丁香五月| 丁香色成人| 婷婷久久丁香| 中文字幕在线免费观看视频| 色噜噜狠狠色综无码久久合欧美| 99热草草| 久久香蕉丁香| 婷婷五月综合色中文字幕| 啪啪一区| 日日噜狠狠色综合久久| 五月婷婷丁香婷婷| 伊人色综合网| 久热视频97AV在线观看| 九九综合伊人| 狠狠干狠狠干狠狠干狠狠干| 丁香五月六月综合激情| 色色五月婷| 国产3p露脸普通话对白| 五月天激情综合网| 夜夜爽天天| 天天色爽| 色老久久| 六月丁香五月亭亭| 五月丁香六月婷婷激情视频在线观看免费| 丁香五月婷婷啪| 中文字幕在线播放视频| 又大又粗九一在线| AV在线不卡网站| 国产精品第一国产精品| 99视频在线| 99热在线观看| 9 1 A v久久久| 97综合色片| 久久女婷| 五月伊人婷婷| 欧美精品18| 综合天堂AV久久久久久久| 亞洲自怕| 激情小说五月天社区丁香| 九九热这里都是精品6| 久久99色色| 五月婷婷在线免费| 天天日夜夜爽| 琪琪色热色色| 开心五月激情站| 久久人妻人人槡| 射久久丁香五月| 丁香五月AV| 免费视频1区| 大香av| 六月丁香啪| 精品草原久久视频| 拍真实国产伦偷精品| 五月丁香六月综合图| 女操碰| 婷婷五月永远18免费久久久| 色婷婷9| 荡乳尤物3HP1V5| 欧美日本99| 色婷婷综合久久久久| 色九月激情综合网| 欧美综合激情五月丁香| 婷婷色在线播放| 精品无码久久久久久久久| 九九热青青草| 思思久久思思| 综合久久婷婷| 97碰超级人人看| A A色色| 五月激情网站| 色婷婷啪啪| 亚洲精品乱码久久久久久综合| 直接看的AV| 欧美色五月| 亚洲成人AV在线| 99在线观看免费精品视频| 激情丁香五月婷婷| 国产婷婷五月| se99视频| 人人操婷婷| 色综天天综合| 大香蕉啪啪啪| 婷婷天堂综合| 五月婷婷激情性爱| 久久久久98| 五月天激情.com| 五月天色图| 五月天丁香成人社| 色婷婷综合影院| 日韩在线视频9色| 91欧美| 无码色| www.com久久久久久久久久久久久久久久久| 99热99干| 五月天综合久久| 牛牛色av| 开心五月婷婷婷美女| 天天干天天干天天| 琪琪秋霞| 无码少妇高潮喷水A片免费| 人伦30P| 激情五月,色播五月| 五月开心网| 欧美色图天堂网| 99视频网址| 色色色色色日韩午夜激情 | 国产精产国品一二三在观看| 噜综合| 色色五月天丁香| 久久久精品99| 丁香五月成人| 欧美精品啪啪| 欧美色图天堂网| 久婷婷色| 五月婷婷色五月| 国产成人网站在线观看| 婷婷大香蕉| 激情婷婷丁香五月天| 丁香六月婷婷色播| 久久人人九九| 日日噜噜夜夜狠狠久久丁香五月| www色婷婷久久综合久色 | 9久久精品| 久久九九网| 九九久久五月天| 婷婷五月激情的图片| 五月婷在线观看| 97色视频网| 五月天开心激情综合网| 91精品91久久久中77777久久玖玖九九 | 色婷大香蕉| 九月婷婷激情久久| 天天色图| 久久久er热| 色999五月色| 开心五月婷婷五月| 婷婷五月天免费99| 色五月六月| 激情性爱婷婷| 黄网在线免费观看| hd五月婷婷在线| 国产肥白大熟妇BBBB视频| 伊人五月人妻精品| www,超碰| 国产SUV精品一区二区6| 婷婷五月激情视频在线| www狠狠| 91狠狠色丁香婷婷综合久久精品| 五月天激情婷婷丁香| 青青草原亚洲久| 韩国天天婷婷| www.激情.com.| 97综合在线| 99久久综合精品五月天| 4399人妻无码久久久| 婷婷亚洲综合| 五月天久久成人| av在线观看网址| 婷婷精品免费久久| 精品怡红九九九| 亚洲精品成人片在线播| 狠狠狠狠狠狠狠狠| 中文在线成人| 五月天婷婷丁香| 天天舔天天| 国精产品一区二区三区| 五月婷婷六月丁香| 久久综合66| 99操逼| 五月 激情视频| 亚洲综合草草| av中文网站| 综合久久综合久久| 激情婷婷五月社区| 天天干,夜夜爽| 在线1青婷| www.激情| 狠狠色综合网站久久久久| 亚洲婷婷91丁香| 五月丁香好婷婷姑娘综合网| 九九99热| 亚洲无码性爱| 亚洲婷婷五月天| 天天插插天天| 色亚洲婷婷| 亚洲超级碰| 96精品成人无码A片观看金桔| 熟女激情五月天| site:pzdcoin.com| 久久98热re| 第四色在线观看| 99re热在线视频观看| 一区二区三区四区五区| 成人在线不卡| 五月丁香福利| 激情五月丁香六月综合AVXXXX| 久久久www| 五月丁香六月综合图| 91日本在线观看| 色婷婷五月天在线| 色播五月天天| 精品99这里有| 五月激情啪啪啪| 狠狠狠狠青草| 五月刺激丁香月综合| 亚洲五月婷| 狠狠搞亚洲| 婷丁五月| 99激情网| 丁香五月天导航| 日本精品干| 亚洲9久久精品| 办公室少妇激情呻吟A片在线观看| 九色91视频| 久久婷婷综合五月趴| 婷婷五月天成人动漫 | 久9热插入| 91丨九色丨国产打屁股| 99热在线观看| 成人在线网址| 色久女| 殴美日比视频| 色99色| 91丨九色丨国产| 大香蕉综合网| 五月天激情网站| 亚洲色五月| 99色精品| 五月天色综合| 99久在线视频| 激情综合网五月激情| 亚洲碰碰碰| 婷婷综合激情| 色激情五月| 天天操天天操天天操天天操天天操天天操天天操天天操天天操 | 激情婷婷综合网| 日本eVa一区=区视频| 五月婷婷色| www久| 2017狠狠干| 五月天婷婷丁香| 婷婷六月五月天综合| 99热99这里有免费的精品| 色爱综合视频| 99热骚货| 五月婷婷六月丁香激情| 激情综合网五月| 另类五月激情| 国产精品爽爽久久久久久| 99热地址| 五月天婷婷免费| 99玖玖在线视频| 99爱视频| 99久在线精品99re8热| 9l视频自拍九色9l视频自拍九色9l社区| 色五月婷婷色| 久思思久视频| 亚洲综合婷婷五月| 精品乱码久久久久| 婷婷五月天黄色| 日本三级黄色大片| 麻豆AV一区二区三区| 亚洲精品99| 嫩BBB槡BBBB搡BBBB| 色色色综合网| 亚洲无码免费看| 伊人大香蕉在线视频| 色色色五月婷| 色之综合网| 日日干日日s| 五月综合六月婷婷| www.色九月| 成片免费观看视频大全| 青草视频在线观看视频| 一级黄色操B| 免费亚洲成人电影AV| 六月婷久久| 九九国产视频| 日韩99色99| 五月丁香婷婷婷激情爱爱| 97视频久久| 操操啪| 91黄色五月天视频| 国产在线中文字幕| 人人人va亚洲视频在线| 久久99婷婷| 五月丁香久久| 99久在线精品99re8热| 综合久久婷婷| 七七色综合| 五月丁香好婷婷A片网| 4399成人黄A片| 婷婷另类开心| 五月丁香六月激情视频| 美日韩成人| 婷婷五月综合色小姐小说| 久9免费视频| 成人必爱视| 超碰在线播放免费观看| 青草久久五月婷伊人| 99精在线| 久这里只有精品| 国产成人99久久亚洲综合精品| 看全色黄大色大片| 婷婷六月天天| 9色在线| 六月激情婷婷| 五月丁香啪啪| 久久精品99国产精品日本| 九月婷婷激情| 久婷婷五月激情| www.夜夜操.com| 久久久久9999| 香蕉婷婷色五月| 99在线视频精品| 久热中文字幕| 国产在线视频1234| 五月天激情无码高清| 狠狠色丁香综合| 五月激情小说网| 婷婷五月天丁香花| 久久综合99| 激情五月天影院| 中字幕视频在线永久在线观看免费| 丁香婷婷色情| 色情五月停停丁香| AV片一区在线观看| 天天色·欧美| 这里只有精品免费| 久久五月天视频| 天天爽天天草| 琪琪色综合网站| 久久五月天精品视频| 激情九九六月激情免费视频| 97热超碰| 美女妹子后射视频网站在线观看| 久久综合久色欧美综合狠狠| 99热在这里只有免费精品| 夜夜爱伊人| 奇米影视777在线_在线观看午夜_h小视频在线观看_岛国大片 | 狠狠色综合精品视频在线| 99精品在线观看| 91精品无码| 五月天婷婷基地| 91干婷婷| 亚洲综合婷婷六月丁香五月| 丁香性爱在线视频| 怡红院院久久| 久久黄色片| 丁香六月色婷婷欧美| 国产三级片91| 久久婷婷五月综合啪| 激情性五月天免费小说视频| 玖玖爱伊人网| 五月天色欧美| 五月激情六月婷婷| 综合日本婷婷| www.色五月| 九九精品婷| 五月婷色激情五月| www.色色com| 思思热久久久在线| 色色色色色日韩午夜激情| 五月天玖玖狠狠色色| 国产精品涩涩涩视频网站| 丁香六月啪啪| 婷婷综合网| 狠狠狠婷婷五月综合| 99亚洲视频| 久久综合激情五月天| 激情综合色| 久久久18| 色情综合网| 六月丁婷婷| 99热这里| 五月天色视频| 99五月婷| 高清无码视频网址| 伊人婷婷激情| 亚洲电影中文字幕| 色婷久九| 成人五月天婷婷| 伊人91| 精品九九视频| 日本情色一区二区| 婷婷午夜丁香| 色婷婷在线综合色播网| 欧美日本国产| 99九九视频精彩在线| 丁香婷婷色色| 综合网色| 操操操AV| 丁香九月激情| 青草视频在线播放| 爽天天天天天天天| 激情综合网五月在线播放| 激情五月丁香五月| 91久久电影| 特黄三级片| 蜜乳9188| 日韩AV在线免费| 久婷五月| 色婷婷丁香五月天在线视频| 超碰免费电影| 操一操干一干| 色婷婷狠狠干芒果TV| 99热在线观看99| 色综合com| 天天综合干| 婷婷热色| 婷婷激情小说| 激情五月婷婷丁香| 激情美女五月天| 亚洲啪| 丁香六月色婷婷| 久久久er热| 香蕉五月婷婷| 五月天婷婷基地| 亚洲综合色棒| 视频这里只有精品| 98热精品| 六月天婷婷| 久久综合五月| 丁香婷婷射| 美欧成人视频| 国产性爱在线| 久99热| 国产片色| 欧美五月丁香在线| 婷婷五月丁香香蕉| 狠狠插.com| 色色狼人综合| 欧美激情综合色综合色| 九月丁香| 色婷婷丁香| site:pnnrt.com| 另类小说五月天| 99精品视频在线观看| 婷婷五月天视频小说| 操逼在线视频| 一级黄色尤物综合视频手机在线观看| 色婷久九| 香蕉AV777XXX色综合一区| 日本一级黄色片。| 国产片天天爽夜夜爽| 午夜精品人妻无码一区二区三区| 91久久1118| www.99成人视频| 激情婷婷丁香色五月| 97丁香婷婷| 丁香五月婷婷网| 俺去也五月天| 婷婷开心六月| 丁香五月综合亚洲| 色五月亚洲五月天| 五月丁香狠狠爱| www亚洲无码| 亚洲网综合在线| 99在线观看| 久婷婷婷| 天堂中文国产| 伊人五月天| 狠婷婷五月| 人妻内射麻豆视频| 热99国产精品| 天天插天天插天天操| 熟女91九色| 美女视频图片久久91| 亚洲欧美在线观看| 亚洲熟妇AV乱码在线观看| 久草五月天| 久99久精品视频| 玖玖婷婷五月天| 深爱1激情网| Jh7Uf088VHafNm| 五月丁香六月日逼| 2020久久婷婷五月| 五月香蕉婷婷| 啪啪日热| 啪啪日本欧美| 免费在线观看av网站| AV成人在线网站| 国产AV一区二区三区最新精品| 99热精品在线| 天天射影院| 亚洲1区| 婷婷成人视频| 亚洲va综合va国产va中文| www.激情| 中文字幕无码人妻少妇免费视频| 桃色成人网| 亚洲网综合在线| 99久久国产宗和精品1上映| 久久人妻视频| 99噜噜噜在线播放| 综合网精品99| 亚洲自拍天堂| 另类激情五月| 婷婷五月花免费视频在线| 琪琪理论片| 天天做天天爱天天爽在| 婷婷六月色情| 天天操天天干天天日| 夜夜谢天天干| Av大香蕉| 精国产品一区二区三区A片| 中文字幕免费高清电视剧| A片女女女女女女BBBB| 丰满少妇猛烈A片免费看观看| 1024国产在线| 99热国产婷婷| 九九热视频精品2| 激情美女五月天| 欧美毛片www| 五月天啪啪| 操日视频| 色播五月婷婷| 国产精品黑丝| 九九婷婷综合| 五月综合婷婷开心网| 色青青视频| 丁香婷婷色五月| 99re热在线观看| 丁香婷婷影院| 亚洲欧美成人在线观看| 婷婷五月丁香综合激情| 亚洲精品乱码久久久久99| 天天爽天天透天天爱| 五月天婷婷视频| 99熟女视频| 久久婷婷精品| 综合色视频| 任你草| 国产精品蜜臀99| 九九热最新| 激情综合网色播五月| 91中文狠狠综合| 婷婷久久免费| 九九成人精品| 欧美日本国产欧美日本韩国99| 人妻久久久久久| 五月婷av| 五月天激情小说电影| 丁香午夜天| 色播综合| 九九热在线99| 99热大片| 国产亚洲在线观看| 天堂网亚洲色图| 久久这里只有精品5| 久久色五月天激情小说| 婷婷丁香六月天| 激情丁香五月天图片| 欧美狠狠草| 丁香六月婷婷色XXXXX| 激情五月婷婷五月| 色狠狠综合入口| 婷婷综合网伊人| WWW.99热| 欧美婷婷综合网| 五月天婷婷一起草| 色婷婷狠| 第1影院之五月婷婷| 五月婷婷久久激情| 婷婷综合激情| 97五月婷婷| 丁香婷婷伊人| 99久久国产宗和精品1上映| www.99热在线| 五月网在线| 天天天天干| 九色七七| 99爱视频| 色婷婷影音| 激情综合网亚洲色图| 激情综合网五月激情| 亚洲AV成人无码电影| 99在线视频在线观看| 啪啪91| 97热久久| 婷婷五月天无码| 激情性爱五月天网页| 人人干天天舔| 狠狠操狠狠操| 色五月综合激情| 五月婷婷六月丁香| 一区中文字幕电影| 色五月综合激情| 九九视频在线观看视频6| 久久丁香| av大香蕉| 婷婷五月天综合网| www.婷婷五月天| 中日韩狠狠色| www.色五月| 综合 蜜月 婷婷| 这里只有精品网站| αV电影| 午夜激情五月| 九九XX视频| 婷婷综合网伊人| 日本不卡高字幕在线2019| 狠狠做六月爱婷婷综合aⅴ| 久久久91| 99re6热在线精品视频播放速度 | 五月丁香婷久久| www久热com| 色色色五月天婷婷| 国产精品A片| 国产精品91抖高| 五月丁香六月情婷婷久久| BBWCUCKOLD精品熟妇| 婷婷五月免费观看| 亚洲成人AV电影在线| 婷婷五月天激情亚洲小说| BBWCUCKOLD精品熟妇| 激情婷婷综合| 激情五月婷婷综合网| 丁香五月激情性色郤| 伊人久久丁香五月91| 亚洲 六月 综合| 久久天堂色| 丁香五月天成人网站| 人人干女人| 久久性操| 五月激情五月丁香| 五月婷婷免费视频| 91人妻色色网| 亚洲第一色色色色| 丁香色播五月天| 五月天影院婷婷在线观看| 婷婷五月天激情在线观看| 多精窝99在线视频| 久久人妻情侣| 婷婷王月天影院| AV人人操| 97久久久久| 综合激情视频| 免费无码毛片一区二区A片| 免费无码毛片一区二区A片| 欧美色图片88| 激情五月天福利| 五月丁香少妇| 婷婷丁香色五月亚洲| 婷婷的五月天另类视频| 丁香五月中文字幕久色| 亚洲成人五月| 久/久精品99看9| 天天爽天天| 9精品久久999| 91性人人| 99综合色色色| 婷婷丁香五月天中文字幕| 婷婷五月激情天| 婷婷五月综合网| 人妻22p| 百度一下国产精品A| 日韩无码系列| 丁香五月激情宗合网| 婷婷丁香五月激情图片| 婷婷五月丁香六月| 五月综合视频| 色约约视频一区二区三区四区五区 | 99久在线精品99re8| 中文字幕成人| www.久99| 99久久婷婷国产综合精品草原| 亚洲色婷婷婷婷人人爽| 五月天婷婷成人| 激情五月天婷婷丁香| www,奇米影视| 激情婷婷丁香五月天| 天天干天天日天天插| 五月丁香成人视频| 五月激情天| caopeng97人人| 久久99激情| 天天操综合网| 欧洲电影在线观看免费版英语版 | 综合大香蕉| 精品热九九| 99热在线观看| 丁香五月天激情免费在线观看AV777| 亚洲成人免费电影| 4438全国最大视频成人网站在线观看 | 99久久精品国产色欲| 五月色情| 丁香五月天导航| 国产在这里只有精品| 99爱在线视频| 色色色国产| 久久久精品色| 亚洲国产精品VA在线看黑人| 香蕉久久国产AV一区二区| 婷婷激情五月天小说| 91久操| 丁香婷婷五月色成人网站| 五月婷婷激清网| 夜夜骑夜夜操| 亚洲综合草草| 人人视频人人干人人做| WWW嗯嗯啊啊啊啊| 丁香五月激情天AV无码| 99WWW免费视频| 九九成人精品| 天天干天天干天天| 丁香五月天堂网| www.婷婷.com| 人人妻人人澡人人爽| 综合图区激情| 91人人人人人| 国产精品噜噜在线视频| 亚洲色网络| 久久性操| 中美日韩成人在线| 91凹凸在线| 96丁香六月婷婷蜜桃综合久久| 五月丁香在线观看国产| 天天色色婷婷| 婷婷五月天性色| 午夜九九电影| 日本乱子人伦在线视频| 狠狠色丁婷婷日日,伊人激情综合网| 婷婷五月激情综合| www狠狠| 五月婷婷人人人操| 色欲天天综合| 99热国产精品| 九九精品热| 人妻中文在线| 婷婷导航| 五月丁香| 2025天天爽天天摸| 好吊兆人妻| 丁香美女主播视频在线观看| 高清a片基地| 996日日爱| www.久操| 99精品国产在热久久婷婷| 欧美日韩成人在线网| 久re热视频| 久久五月天视频| 91久久久久久久久久久| 九九热超碰| 99操视频| 亚洲精品五月| 色播五月丁香综合| 女同激情久久av久久| 9久久精品| 亚洲无码99| 99久久婷婷五月天| 婷婷性爱视频在线| www.99在线| 激情五月激情综合网一级丸片| 欧美日韩精品人妻狠狠躁免费视频| 91视屏在线观看com.wwwvv| 激情图片亚洲| 激情深爱五月天| 第四色激情网| 风流少妇A片一区二区蜜桃 | 亚洲成人av在线| 色综合天天| 成 久久| 9九色首页| 天天日天天色| 九九爱激情| 大香蕉人在线65| 五月天激情国产综合婷婷| 91热er| 9色免费网| 激情四射五月天| 九九一综合精品| 激情五月天第四色| 五月天成人小说| www.五月激情红色| www.婷婷,com| 国产XXXX搡XXXXX搡麻豆| 99re8这里只有精品99re8热视频| 黄网免费看| 亚洲综合网在线| 五月天婷婷色色网| 激情播丁香| 天天综合色丁香| 女人高潮内射99精品| 五月天激情小说欧美激情| 久热欧美| 婷婷色综合网日韩国产| 97碰碰人人| 亚洲五月天婷婷在线| 亚洲av免费在线| 一本婷婷丁香久久 | 五月天性色| 激情丁香六月| 久9精品视频在线| 开心五月激情网| 五月婷婷开心综合| 五月天激情播播网| 99re热在线观看| 先锋影音av色五月天资源站| 五月综合丁香婷婷| 色五月成人在线| 国产精品久久久久久白浆色欲| 日韩国产AV播放| 天天操综合网| 五月婷婷久久大香蕉| 久久99这里只有精品视频| 开心五月综合激情网| 婷婷激情五月天激情小说| 人人操av| 影音先锋色婷婷| 天天插天天插天天插天天插 | 丁香六月激情国产| 色五月视频无码播放| 丁香六月激情综合| 97性视频| 婷婷综合九月| 99综合99| 婷婷五月激情基地| 极品人妻VIDEOSSS人妻| 国产性爱亚洲是图| 97精品在线| 99热综合| 熟女激情五月天| dingxiangtingtingliuyue| 翔田千里aV中文字幕| 色色激情| 91色久| 婷婷五月色综合| 99热精品10| 久久女人九九| 51精品国内探花| 成人免费超碰| 182.t午在线观看| 天天色综网| 97色在线| 丁香六月婷婷综合| 色99在线| 五月婷婷影院| 精品一区二区三区四区五区六区| 五月丁香综合激情| 可以看的AV| 五月婷婷六月丁香综合在线| 久热9| 五月婷婷丁香在线| 成年人丁香五月| 色婷婷综合网| 26uuu色噜噜精品一区| 婷婷在线免费| 五月天无码| WWW.夜夜操.com| www.99热国产| 99热精品一区| 激情网五月婷婷| 亚洲热久久| 99热精品在这里| 九九色色| 91啪啪视频| 99这里有精品视频| 丁香激情网| 伊人丁香在线| 五月开心啪啪| av国产精品偷| 久久这里这里有精品免费视频| 综合狠狠伊人| 六月婷婷私欲| 天天做好综合色| 97操碰在线视频| 67194国产| 精国产品一区二区三区A片| caop视频| 亚洲精品中文字幕成人片| www.maotanji.com| 亚洲va日| 婷婷丁香综合成人| 天天干天天拍| 色五月婷婷基地| www婷婷色| 高清成人综合| 色情·com| 涩婷婷五月天| 欧美99热| 欧美成人猛片AAAAAAA| 91日综合欧美| www.久久| 天天操天天日天天操| 超碰人人99| 狠狠色狠狠干| 深爱激情网五月天| 99九九玖玖| 国产成人精品123区免费视频 | 六月丁香网| AV性爱网| 欧美超碰亚洲| 婷婷免费精品视频| 天天日日综合| 激情五月天网站| 97人妻人人| 伊人五月天日日夜夜久久久天天| 亚洲天天综合| 色色色色热| 婷婷日本在线| 五月五婷婷网| 五月天天爽| 在线播放成人网站| 综合玖玖偷拍| 五月婷婷六月激情在线| 丁香五月六月| 大地资源色婷婷视频在线| 四月婷婷五月丁香| 玖玖精品视频99| 久99久在线| 依人大香蕉在钱1| 婷婷五月天AV| 婷婷五月六月丁香| 青草视频在线播放| 亚洲黄色影视| 丁香六月久久| 亚洲网站观看视频| 婷婷色婷婷亚洲成人| 天天干 夜夜爽| 极品人妻VIDEOSSS人妻| 色欲色天天香综合| 天天久| wwwav大香蕉| AV伊人青草丁香六月| 日本丁香五月| 国成人网| AV 3P| 六月婷婷开心| 激情99热| 久色五月丁香视频| 九月婷婷人人操人人舔人人爱| 99热 免费| 操一区| 亚洲视频操| 这里只有精品在线视频在线观看| 欧美性生交XXXXX无码小说| 婷婷色导航| www.婷婷.com| 国产色视频网站2| 看国产探花操逼三级片| 爱久久小说下载网| 婷婷婷色五月| 99热在线播放| 天天色·欧美| 色婷婷av在线观看| 97精品自拍| 亚洲av免费在线| www.9797国产| 五月婷婷草| 天天激情欧美美女| 狠狠色综合久久久久| 五月久久亚洲| 超碰成人黄色网| 久久午夜理论| 午夜69成人做爰视频| 日韩99色| 青青草视频免费观看| 婷婷丁香五| 99国产精品久久久久久久久久久 | 婷婷色网站| 97色射| 五月激情五月婷婷五月天在线| 亚洲视频在线网站| 久久九九99亚洲国产久精综合| 久久人妻熟女一区二区| 狠狠色综合777| 极品人妻VIDEOSSS人妻| 26uuuavcom| 丁香五月婷婷av影院| 五月久久丁香| 久久丁香九| 九九在线视频| 激情性爱五月天| 久久这里只精品| 五月激情丁香久久综合网| h在线看免费版在线看| 亚洲狠狠婷婷综合久久久| 九九热青草| 天天爽综合网| 香蕉伊人综合| 97久久人人| 五月婷婷在线视频免费观看| 天天做天天爽| 婷婷五月天视频小说| 色欲AVV| 九九精品免费| 九九99免费理论| 超碰av在线| 五月丁香色婷| 色色色色色综合| 四色永久成人网站| 婷婷综合成人五月天| 丁香五月玖玖| 超碰97免费在线| 婷婷丁香视频在线观看免费| 操操操B| 欧美Va日本Va| 婷婷久久综合| 色五月婷婷成人| 久久在线大香蕉| 99色视| 不卡成人免费| 亚洲天堂爱爱| 五月色情网| 久久思思99| 色色色网站| 色欲天天综合| 丁香色六月婷婷| 被强行糟蹋的女人A片| 婷婷五月激情天| 婷婷五月成人| Aaa久久| 亚洲精品国产成人AV在线| 五月色 亚洲| 草草影院爱爱| 99re6在线视频精品免费| 天天做天天爱天天爽综合网| 亚洲综合字幕色色| 伦乱人妻| 五月丁香影院| 久久开心五月天激情| 天天操夜夜啊| 久久婷婷五月综合啪| 欧美在线| 9久热免费视频99| 久久只这里有精品| 激情伊人| 五月婷婷丁香综合,亚洲天堂| 九九AV| 久久精品视频在这里有| 开心五月激情| 五月激情射| 五月J香蕉婷婷| 亚洲色碰| 狠狠草狠狠草| 狠狠999| 超碰在线国产| 国产婷婷久久| 欧美色片中文字幕久久久久| 在线色色| 婷婷五月天播播| 久草五月天电影网| 97九色| 婷香狠狠爱五月| 亚洲综合色婷| 丁香五月自拍| 色五月琪琪| 欧美婷婷五月天| 婷婷丁香五月天亚洲| 午夜色色色极品视频| 五月激情网站| 伦乱人妻| 黃色三级三级三级三级 qixing300.shrkbk.com www.jinbozs.com tianmiaosw.com | 五月丁香啪啪| 99九九视频| 色欲色香,www,com| 婷婷无五月无码视频| 开心婷婷五月| 4399在线日本A片| 日本五月天激情| 五月婷婷激情四月| 丁香五月骚喷水视频| 五月婷婷黄色| 激情综合五| 在线观看996精品| 在线亚洲综合网| 免费视频1区| 国产精品91抖高| 免费视频无码| www.激情| 日韩一级片| 久久激情五月婷婷| 综合激情婷婷| 亭亭色色五月天| 久久伊人婷婷| 91久久精品无码一区二区三区| 色婷婷久久综合中文久久一本| 狠狠干伊人| 婷婷五月综合啪| 亚洲女婷婷五月基地综合久久久| 久久99热这里| 这里只有精品视频国产| 伊人五月天日日夜夜久久久天天| 五月色情婷婷| 99热免费精品热久久66| 人人干人人干骚美女| 丁香五月亚洲激情婷婷射| 99色在线视频| 日韩色色色99| 色婷婷视频| 久久久月丁香| 久久这里只有精品网| 色婷婷色情| 久狠日av| 五月丁香色| 色欲久久久久久综合网综合网| 丁香五月六月婷婷综合| 日亚二欧美| 嫩草视频在线观看| 日日爽日日| 色5月婷婷| 夜夜嗨一区二区三区直播内容 | 天花AV无码| www.婷婷,com| 国产亚洲99久久精品| 久鲁鲁色网 | 欧美大道不卡| 日韩婷婷| 色99视频| 无码视频国内精品久久久| 色色图五月天| 92国产福利| 天天爽成人综合网站| xxx综合在线| 99在热线免费视频| 五月婷婷狠狠干| 色播五月丁香| 欧美日本不卡黄色片| 色吊丝永久访问网址| 丁香六月色香蕉视频| 丁香五月亚洲综合| 色无码| 色婷婷六月| 婷婷情色五月| 亚洲 视频 导航 一区| 99re思思热在线视频| 日本va视频| 亚洲婷婷基地| 丁香五月综合| 极品少妇婷婷五月| 噜噜色天天开心| 99热99这里有免费的精品| 五月综合在线| 成人午夜无码视频| 91av色色乱视频| 99超级碰免费视频| 五月天狠狠干| 日日噜噜夜夜狠狠久久丁香六月| 成人视频网| 激情五月份婷婷| 电影蜘蛛女| 伊人婷婷五月天| 亚洲日韩一页精品发布| 五月丁香亭亭AV女优| www.激情五月天。com| 亚洲欧美另类在线23p| 亚洲激情婷婷| 九月色婷婷综合亚洲| 亚洲国产婷婷色五月| 婷婷五月深爱五月| 丁香六月激情综合| 九九超碰人人| 五月激情精品视频| 五月激情视频网| 大香蕉人在线65| 五月天偷拍| 大香蕉婷婷| 五月天激情在线视频| 麻豆WWWCOM内射软件| 午夜九九电影| tingtingcaobi| 国产精品激情五月天色婷婷| 99爱视频在线观看| 久99久热| 婷婷五月天色色| 五月综合色| 婷婷五月丁香五月丁香| 久99热| 五月激情另类| 欧美A片在线视频免费观看| 欧美啄木乌丝袜人妻系列| 91熟妇大香蕉| 亚洲色夜| 五月婷婷综合激情| 丁香六月婷婷久久综合| 色五月天网| 色婷婷另类| WWW.99视频| www.天天色综合| 亚洲亚洲人成综合网络| va亚洲中文在线| 伊人五月综合网| 超碰免费在线| 色国产五月| 大大香蕉综合在线| 99热网址| 丁香五月六月久久综合 | 午夜婷婷五月天| 五月婷婷六月丁香首页| 色色综合网站| 精品色色网| 久热精品在看| 直接看的AV| 欧美综合五月丁香六月婷| 婷婷丁香色性爱| 丁香婷婷色五月| 九九免费在线视频| 丁香五月婷婷99| 日韩aaa| 天天舔天天摸天天透| 超碰97干| 国产午夜精品一区二区三区四区| 天天爽免费视频| 91干| 青青久久五月| 色天堂A| 思思热视频在线观看| 色五月开心开心五月激情五月| 丁香五月婷婷综合91| 色五月婷婷基地| 啪到高潮激情丁香五月| 日本91在线| 天天干天天日蜜臀av| 996热re视频精品视频| 久热这里只有精品99re,久热这里只有精品7| 久久天堂婷婷五月| 可以免费观看的AV|