免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Cortex-M HardFault定位實戰(zhàn):從異常模型到現(xiàn)場追蹤

Cortex-M HardFault定位實戰(zhàn):從異常模型到現(xiàn)場追蹤 最近一直被HardFault折騰得頭皮發(fā)麻的兄弟或者剛接觸Cortex-M系列芯片、對異常處理機制還有點懵的新手這篇文章就是給你寫的。做嵌入式開發(fā)尤其是基于Cortex-M內核的MCU開發(fā)幾乎沒人能繞開HardFault這個坎。它不像普通邏輯Bug那樣能靠肉眼掃代碼看出來往往是程序跑著跑著突然就掉進一個死循環(huán)調試器一停PC指針指到一個莫名其妙的地址看門狗又跟著湊熱鬧整個系統(tǒng)直接癱瘓。我最早被HardFault支配的時候項目工期緊板子還只有一塊只能靠復位大法續(xù)命后來踩的坑多了才慢慢摸清楚這套異常處理機制的脾性。其實Cortex-M的異常和中斷處理是一個非常精巧的系統(tǒng)你把它搞明白了HardFault定位就是一道送分題。這篇文章不聊虛的直接從內核異常模型講起把HardFault的根因、Cortex-M異常處理流程、借助Keil MDK進行現(xiàn)場追蹤和調試的完整套路都掰開揉碎講清楚。無論你是用STM32、GD32還是其他Cortex-M內核的國產MCU這套方法論全部通用保證你下次再遇到HardFault能少掉一大半頭發(fā)。1. 先吃透Cortex-M異常處理模型1.1 異常和中斷的底層關系很多初學者會把“異常”和“中斷”當成一回事其實在Cortex-M內核里這兩個概念有明確的層級關系。從ARM官方手冊的定義來看異常Exception是所有打斷CPU正常執(zhí)行流程事件的統(tǒng)稱而中斷Interrupt只是異常的一個子集專指由外部引腳或內部外設觸發(fā)的那一類。Cortex-M3/M4內核把異常源按編號排了一張表編號越小優(yōu)先級越高這里說的優(yōu)先級是數(shù)字大小和實際優(yōu)先級高低相反。0號是棧頂?shù)刂?號是復位異常2號是NMI不可屏蔽中斷3號是硬故障HardFault4到10號分別是MemManage、BusFault、UsageFault以及幾個保留項11號是SVCall14號是PendSV15號是SysTick再往后就是外部中斷IRQ了也就是我們平時在STM32里配置的EXTI、UART、TIM等中斷。為什么要先講這張表因為HardFault在異常向量表里的位置是固定的3號它的優(yōu)先級默認是-1比除NMI和復位之外的所有異常都要高。這就意味著一旦觸發(fā)HardFault除了NMI能插一腳其他任何中斷都沒法搶占它處理器會立刻跳轉到HardFault_Handler。反過來如果某個異常的處理程序在執(zhí)行過程中出了問題而它的優(yōu)先級又比HardFault低那么就會被HardFault吞掉不會再報原來的錯誤。這里有個非常容易踩的坑很多人在寫中斷服務函數(shù)的時候發(fā)現(xiàn)程序跑飛了但調試器彈出來的窗口指向的是HardFault_Handler于是就開始在HardFault里找原因。其實真正的錯誤源頭很可能是你的某個外設中斷里干了不合法的事HardFault只是被拉來“背鍋”的。所以定位HardFault的第一步是搞清楚它是主動觸發(fā)還是被動吞掉。1.2 異常處理的硬件自動壓棧機制Cortex-M在處理異常時有一個和傳統(tǒng)MCU內核比如51、AVR完全不同的特點硬件自動壓棧。也就是說當異常發(fā)生時CPU會自動把xPSR、PC、LR、R12、R3-R0這8個寄存器壓入當前使用的??臻g這個過程不需要軟件干預是在異常入口處由硬件完成的一整套流水線操作。壓棧之后處理器會做什么它會從向量表中取出對應異常的處理函數(shù)地址跳轉過去執(zhí)行。這個過程叫異常返回準備硬件會把LR設置成一個特殊的值叫做EXC_RETURN這個值不是一個真實的內存地址而是一個帶有特殊含義的標記。比如0xFFFFFFF9表示從線程模式使用主棧指針MSP返回0xFFFFFFFD表示從線程模式使用進程棧指針PSP返回0xFFFFFFF1表示從處理模式返回。如果你用了FPU比如Cortex-M4F還會看到0xFFFFFFE9和0xFFFFFFED這類帶FPU擴展位標記的值。理解這個機制對HardFault調試至關重要。因為當你停在HardFault_Handler里時當前棧頂保存的就是觸發(fā)異常那一刻的“案發(fā)現(xiàn)場”——那8個寄存器的值。只要能正確解讀這些值就能還原出CPU在異常發(fā)生前到底在執(zhí)行什么代碼PC指針指到哪個函數(shù)LR是哪個調用者以及R0-R3傳了什么參數(shù)。這套方法在后面我會詳細演示。1.3 為什么要理解異常模型而不是背流程有人可能會說我知道了HardFault的向量號是3也知道了硬件壓棧但這些對我的實際調試有什么幫助有而且?guī)椭艽?。舉個實際例子。我曾經調一個電機驅動板現(xiàn)象是運行幾十秒后系統(tǒng)死機復位后又能跑一會兒。一開始我以為是看門狗問題關了看門狗再跑還是會死。后來我把硬件壓棧的知識用上在HardFault_Handler里把當前棧指針的值讀出來然后按8個字32位系統(tǒng)一個字是4字節(jié)的偏移找到異常發(fā)生前的PC值再在反匯編窗口里定位到這個PC對應的代碼位置結果發(fā)現(xiàn)是在一個電機電流采樣的DMA中斷里代碼試圖訪問一個已經關閉了時鐘的外設寄存器。問題的根源是時鐘門控配置順序錯了導致中斷觸發(fā)時外設時鐘被關掉了總線訪問直接觸發(fā)BusFault又被HardFault吞掉。如果我不懂異常模型和壓棧機制單靠肉眼一行行看代碼這種隨機死機的問題可能要排查好幾天。但有了這套底層知識半小時不到就能鎖定肇事代碼。這就是我為什么堅持先講原理再講實戰(zhàn)的原因原理通了所有所謂的“疑難雜癥”都會變得有跡可循。2. HardFault根因大盤點到底是哪些場景最容易觸發(fā)2.1 存儲訪問類異常越界、未對齊、非法地址Cortex-M內核的存儲系統(tǒng)有一個特點它把存儲訪問錯誤細分為好幾類在System Control BlockSCB里有三個非常關鍵的故障狀態(tài)寄存器分別是可配置故障狀態(tài)寄存器CFSR、硬故障狀態(tài)寄存器HFSR和故障地址寄存器MMFAR/BFAR。CFSR又拆成三個子區(qū)域內存管理故障狀態(tài)寄存器MMFSR、總線故障狀態(tài)寄存器BFSR、用法故障狀態(tài)寄存器UFSR。實際調試里最常見的HardFault觸發(fā)原因匯總下來大概有這么幾類野指針訪問指針未初始化或者指向已經釋放的內存讀寫的時候直接踩到非法地址。數(shù)組越界尤其是寫入越界覆蓋了相鄰變量或者棧上的關鍵數(shù)據(jù)導致返回地址被破壞PC跳飛。棧溢出任務棧分配太小調用層級一深或者局部變量一多棧指針直接頂穿棧底寫到了不可訪問的區(qū)域。未對齊訪問Cortex-M3及以上內核雖然支持部分非對齊訪問但對某些指令比如LDRD/STRD、LDM/STM以及訪問外設寄存器時非對齊會直接觸發(fā)UsageFault或者BusFault。訪問不存在的地址映射了外設的區(qū)域但外設時鐘沒開或者地址本身超出MCU的地址空間。前面兩類是新手最容易踩的也是面試官最愛問的因為它們能反映一個人對內存布局的理解程度。我見過太多這樣的代碼定義一個全局數(shù)組存數(shù)據(jù)然后根據(jù)某個變量對數(shù)組進行寫入變量算出來是負數(shù)直接越界寫到了數(shù)組前面的內存。在Cortex-M上這種越界寫有時候不會立刻觸發(fā)HardFault而是靜默地破壞了相鄰變量的值等程序邏輯表現(xiàn)出來的時候離真正的錯誤點已經很遠了。2.2 異常嵌套與優(yōu)先級配置的經典坑Cortex-M內置了嵌套向量中斷控制器NVIC它允許高優(yōu)先級中斷搶占低優(yōu)先級中斷。這個機制本身是好的但如果你在中斷服務函數(shù)里做了不該做的事就會引發(fā)連鎖反應。最常見的幾個坑第一中斷服務函數(shù)里調用printf。printf內部涉及文件系統(tǒng)級別的緩沖操作有些庫實現(xiàn)里不是可重入的。低優(yōu)先級中斷正在執(zhí)行printf的過程中被打斷高優(yōu)先級中斷里又調用了printf兩個printf的上下文互相踩踏棧上的返回地址被破壞程序直接HardFault。這個問題在帶RTOS的環(huán)境里更明顯因為每個任務的棧是獨立分配的但中斷棧在裸機環(huán)境下就是主棧大家共用。第二中斷里操作浮點寄存器。Cortex-M4F有FPUFPU的寄存器保存是惰性的默認情況下中斷不保存FPU上下文只有真正用到浮點指令時才觸發(fā)自動保存。如果你在主程序里用了FPU又在中斷里用了FPU而RTOS的任務切換沒處理好FPU上下文就會出現(xiàn)FPU狀態(tài)寄存器值錯亂導致計算結果完全不對甚至觸發(fā)UsageFault。第三優(yōu)先級分組不一致。NVIC優(yōu)先級分組寄存器AIRCR可以配置優(yōu)先級的分組方式比如是“搶占優(yōu)先級4位子優(yōu)先級0位”還是“搶占優(yōu)先級3位子優(yōu)先級1位”。如果代碼里不同模塊分別在初始化時往AIRCR里寫分組配置后寫的會覆蓋先寫的整個系統(tǒng)的優(yōu)先級設定就會被攪亂某些原本應該被屏蔽的低優(yōu)先級中斷突然搶占了高優(yōu)先級中斷時序錯亂最終可能引發(fā)HardFault。2.3 指令執(zhí)行類異常未定義指令、除零、狀態(tài)切換失誤還有一類HardFault是從指令執(zhí)行層面觸發(fā)的這類問題在啟用優(yōu)化等級之后尤其難以復現(xiàn)。典型場景包括函數(shù)指針調用錯誤函數(shù)指針被寫入了一個非法地址跳轉過去之后取到的指令全是不合法編碼觸發(fā)UsageFault。跳轉到Thumb/ARM狀態(tài)混亂Cortex-M只支持Thumb指令集如果某個函數(shù)指針的最低位置0了表示ARM狀態(tài)處理器在取指時就會出錯。這個在C代碼里很難遇到但在匯編或者從應用里跳轉到Bootloader的時候容易出問題。除零操作Cortex-M默認情況下整數(shù)除零不觸發(fā)異常但如果軟件里開啟了DIV_0_TRP位除零就會觸發(fā)UsageFault進而被HardFault吞掉。未對齊的棧操作比如SP指針沒有保持8字節(jié)對齊在某些需要對齊訪問的LDRD/STRD指令上會直接觸發(fā)異常。這些場景有一個共同特點它們在正常代碼流程上是不會出現(xiàn)的往往是因為某個內存被破壞導致PC跳到了錯誤的位置執(zhí)行了錯誤的指令。所以當你發(fā)現(xiàn)HardFault是因為取到了一個未定義指令不要急著去查這條指令在哪里而應該去查是誰把PC弄過去的——大部分情況是函數(shù)返回地址被篡改少部分是函數(shù)指針被污染。3. 調試實戰(zhàn)一套可復制的HardFault定位方法論3.1 現(xiàn)場恢復從Keil5中提取異常前PC值很多人遇到HardFault的第一反應是直接在HardFault_Handler里打斷點然后點Run讓它停在斷點處。這個思路有一半是對的但如果你只在HardFault_Handler里打斷點你會發(fā)現(xiàn)一個尷尬的問題程序每次復位跑進HardFault_Handler停下來的位置幾乎永遠是同一個地方那就是HardFault_Handler的第一行匯編指令。這個信息量太少了你根本不知道是誰觸發(fā)它的。正確的做法是當程序停在HardFault_Handler時先從寄存器窗口讀取當前的SP值。關鍵點來了怎么知道這個SP是MSP還是PSP看LR寄存器如果LR的值是0xFFFFFFF9說明當前在處理模式用的是MSP如果LR的值是0xFFFFFFED說明異常返回目標是線程模式且使用PSP那當前用的棧指針需要從進程棧指針寄存器里單獨讀取。拿到SP之后從SP指向的地址開始向上讀取內存前8個字就是異常發(fā)生前硬件自動壓棧的現(xiàn)場偏移0是R0偏移4是R1偏移8是R2偏移12是R3偏移16是R12偏移20是LR偏移24是PC偏移28是xPSR。在Keil的Memory窗口里輸入SP地址直接就能把這8個值讀出來。其中最重要的是偏移24處的PC它就是異常發(fā)生那一刻CPU正在執(zhí)行的指令地址。這個步驟在Keil5里操作非常簡單程序停在HardFault_Handler后打開View菜單里的Registers窗口找到SP再打開Memory窗口輸入SP的值回車就能看到一長串數(shù)據(jù)。把偏移24個字處即地址SP0x18的數(shù)值取出來這個就是我們要找的PC。然后在Disassembly窗口里輸入這個PC地址回車就能看到對應的匯編指令再對照源代碼窗口基本就能定位到肇事代碼行。3.2 深入理解EXC_RETURN別被LR騙了在HardFault現(xiàn)場讀取寄存器時有一個細節(jié)容易讓人迷惑在壓棧數(shù)據(jù)偏移20處確實有一個LR但它不是異常發(fā)生前的調用者LR。這個LR是CPU在進入異常時自動壓棧的它保存的是觸發(fā)異常那一條指令的“返回地址”準確說是觸發(fā)異常的指令地址加上一定偏移可能指向BL指令的下一條指令地址也就是調用者真正要返回去執(zhí)行的地方。而CPU當前的LR寄存器里保存的是一個EXC_RETURN它根本不是一個真實地址。我見過很多人在HardFault調試時看到寄存器窗口里LR的值是0xFFFFFFF9然后把它當作調用鏈里的一個函數(shù)地址拿來查結果在反匯編窗口里輸入這個地址之后發(fā)現(xiàn)根本查不到有效代碼——因為0xFFFFFFF9就不是一個地址。所以一定要記住異常現(xiàn)場的調用關系要看壓棧數(shù)據(jù)里的舊LR而不是當前的LR寄存器。當前LR寄存器里那個0xFFFFFFF9/0xFFFFFFED是用來告訴硬件“異常返回時用什么模式、用哪個棧指針”的。如果你用的是帶FPU的Cortex-M4F或M7壓棧的數(shù)據(jù)結構會不一樣。當異常發(fā)生時硬件檢測到當前上下文使用了FPU會自動多壓18個字16個FPU寄存器S0-S15加FPSCR加一個保留字。這種情況下SP指向的第一組8個字仍然是R0-R3、R12、LR、PC、xPSR但在這組數(shù)據(jù)之后緊接著的是FPU寄存器區(qū)。判斷是否發(fā)生了FPU壓棧看EXC_RETURN的最后一位如果是1表示有FPU壓棧。比如0xFFFFFFED這個值最后一位已經無法直接區(qū)分但對照寄存器窗口的EXC_RETURN位或者直接看壓棧數(shù)據(jù)的長度都能確認。3.3 借助CFSR、HFSR和BFAR/MMFAR縮小故障范圍光拿到PC還不夠我們需要知道HardFault為什么被觸發(fā)。前文提到過的故障狀態(tài)寄存器此刻就是最重要的證據(jù)來源。在Keil5里通過Peripherals菜單下的Core Peripherals、Fault Reports窗口能看到一份易讀的故障信息匯總。這個窗口會把CFSR里的每一位解析成人話比如“Instruction Bus Error”“Data Bus Error”“Unaligned Access”等還會顯示HFSR里的FORCED位是否置1以及保存了觸發(fā)總線故障或內存管理故障的具體地址的BFAR、MMFAR。如果你不想開圖形窗口也可以在Watch窗口手動添加寄存器表達式(volatile unsigned long)0xE000ED28就是CFSR的地址0xE000ED2C是HFSR0xE000ED38是BFAR0xE000ED34是MMFAR。我自己調試時有一套固定流程先讀HFSR看FORCED位是不是1。如果是說明下面肯定有一個具體的可配置異常被觸發(fā)過繼續(xù)讀CFSR對應子區(qū)域。如果CFSR里的MMFSR有置位說明是內存管理故障結合MMFAR的值看是訪問了哪個地址。如果BFSR有置位說明是總線故障結合BFAR看地址。如果UFSR有置位比如UNALIGNED位為1說明是未對齊訪問結合PC反匯編看具體是哪條指令。這里有一個值得注意的點如果BFAR/MMFAR的值是0并不意味著沒有訪問故障而是意味著CPU沒有捕獲到有效的故障地址。這種情況經常發(fā)生在指令預取階段也就是CPU去取一條非法指令時發(fā)生了總線錯誤這時候不會更新BFAR。所以要結合PC一起判斷不能只看地址寄存器。3.4 基于LR的調用?;厮菁记赡玫疆惓G暗腜C和舊LR之后我們其實已經能確定是哪個函數(shù)里出的問題。但如果PC落在一個比較靠后的工具函數(shù)里比如memcpy或一個數(shù)學庫函數(shù)內部光是看到PC還不夠——我們需要知道是誰調用了這個函數(shù)才能理解整個觸發(fā)鏈路。這個時候就要用到調用?;厮?。手動回溯的原理是棧指針SP指向的壓棧數(shù)據(jù)里偏移20處保存的是進入異常前的LR它指向調用者的下一條指令沿著這個“函數(shù)返回地址”的鏈條再往上追一級需要知道當前函數(shù)的棧幀是怎么建立的。Cortex-M的AAPCS過程調用標準規(guī)定函數(shù)入口處通常會有PUSH {r4, lr}這樣的指令也就是把被調用者保存寄存器R4-R11和鏈接寄存器LR都壓到棧上。如果我們在異常前的PC處往回看幾條指令能確認這個函數(shù)確實有PUSH {lr}操作那么當前SP加上壓棧偏移再往里找就能找到上一層函數(shù)的LR以此類推能還原出完整調用鏈。在Keil5里更簡單的方案是直接使用Call Stack窗口。當程序停在HardFault_Handler時打開View—Call Stack WindowKeil會根據(jù)當前棧內容自動解析調用鏈。但注意自動解析有時候依賴調試信息如果你開啟了較高的優(yōu)化等級比如-O2/-O3很多棧幀信息被優(yōu)化掉了Keil解析出來的調用關系可能不準甚至會報錯。這種情況下手動從壓棧數(shù)據(jù)里讀PC和LR是唯一可靠的方法這也是我把手工回溯放在這里重點講的原因。3.5 Keil5中的高效輔助調試手段除了上面這些偏底層的分析方法Keil5本身還提供了一些非常實用的輔助功能用好了能大幅提升定位效率。第一個是硬件斷點和數(shù)據(jù)斷點。如果HardFault的觸發(fā)和某個特定變量的寫入相關可以在Keil里給這個變量打數(shù)據(jù)斷點Data Breakpoint這樣當代碼試圖修改這個變量時CPU會立刻停下來調用棧就是完整的調用者信息。這在排查棧溢出和數(shù)組越界寫時特別有效。數(shù)據(jù)斷點數(shù)量有限Cortex-M3/M4一般支持4個但用來盯一兩個關鍵變量足夠了。第二個是異常窗口Fault Reports結合邏輯分析儀。Keil5的Fault Reports不僅能顯示CFSR/HFSR的解析結果還能顯示是哪個異常號觸發(fā)的。配合邏輯分析儀窗口觀察若干GPIO電平可以判斷異常發(fā)生的時間和外部事件的時序關系。比如之前排查一個通信模塊隨機死機的問題我用GPIO在中斷入口和出口各翻轉一次然后用邏輯分析儀抓異常發(fā)生時刻附近的引腳電平很快發(fā)現(xiàn)是兩路中斷的優(yōu)先級配置反了導致高優(yōu)先級中斷在低優(yōu)先級中斷的臨界區(qū)里被觸發(fā)破壞了協(xié)議棧的狀態(tài)機。第三個是棧使用量檢測。在Options for Target—Target窗口里勾選“Use MicroLIB”并在Linker頁面勾選“Use Memory Layout from Target Dialog”然后在代碼里調用__get_MSP()和__get_PSP()讀取當前棧指針比對棧底地址就能計算出剩余??臻g。配合Keil的“Stack Usage”分析編譯后從View—Analysis Window—Stack Usage看可以評估每個函數(shù)的棧消耗。這個功能在排查棧溢出HardFault時非常直觀基本能把問題縮小到具體任務。4. 常見問題與排查技巧實錄4.1 一個典型問題no cortex-m sw device found結合熱搜詞里出現(xiàn)頻率很高的一個問題“no cortex-m sw device found”這類問題雖然不算HardFault本身但和HardFault調試強相關。最簡單的情形是程序跑飛后進入HardFault然后你點Keil的Debug按鈕結果彈出“no cortex-m sw device found”根本連不上調試器。這通常不是調試器壞了而是目標芯片在死機狀態(tài)下把SWJ調試端口占用了或者時鐘配置被改掉了調試器復位之后握不上手。解決辦法分兩種。如果目標芯片還在響應復位可以在Keil的Debug—Settings里把Reset and Run選項打開或者在連接失敗時按住目標板上的復位鍵然后點擊Debug在松開的瞬間讓它握上SWD握手信號。更穩(wěn)妥的方案是用一個腳本文件在調試器初始化時先讓芯片保持在復位狀態(tài)配置好SWD速度后再釋放復位。對于STM32系列有些型號還支持通過BOOT0拉高進入系統(tǒng)Bootloader模式此時內核運行在出廠固件上SWD端口必然是釋放的連接成功后把BOOT0拉回低電平就能正常刷固件和調試了。如果你用的是國產MCU比如GD32、AT32這些SWD連接失敗的原因還要多排查一個讀保護。很多國產芯片默認出廠時讀保護是使能的或者你在調試過程中不小心開啟了讀保護級別1這會導致調試器無法通過SWD訪問內核。解決辦法是用對應的燒錄工具執(zhí)行全片擦除解除讀保護。我在一次GD32的調試中就遇到過程序跑到某處觸發(fā)了HardFault但重置之后居然連不上調試器最后發(fā)現(xiàn)是代碼里某段錯誤的存儲區(qū)寫操作意外修改了選項字節(jié)把讀保護打開了。4.2 HardFault發(fā)生的時機隨機如何復現(xiàn)和抓取HardFault最折磨人的一點是它有時候不是100%復現(xiàn)的。你在調試器下跑幾十次都好好的一上電裸跑可能幾分鐘就死一次。這類“幽靈式”死機通常有幾種原因時序相關的資源競爭中斷和主循環(huán)同時訪問共享變量、堆棧踩踏發(fā)生在特定函數(shù)調用組合下、以及硬件外設的偶發(fā)錯誤狀態(tài)。我的經驗是先開啟MPU內存保護單元來構造一個隔離環(huán)境。Cortex-M3及以上內核幾乎都帶MPU配置它可以給不同內存區(qū)域設置訪問權限。比如把棧區(qū)所在的內存塊設置為只讀的一旦發(fā)生棧越界寫入MemeManage異常會立刻觸發(fā)——這個異??梢酝ㄟ^中斷向量直接跳轉配合調試器的斷點能精準捕獲到越界寫入的第一現(xiàn)場。這個技巧對排查棧溢出簡直不要太爽不用靠猜直接讓硬件替你盯著。如果復現(xiàn)是隨機的還可以利用Cortex-M內核的異常返回機制做“二次觸發(fā)”設計。簡單說在HardFault_Handler里不直接死循環(huán)而是把MSP的值修正為初始值然后重新跳轉到復位向量讓系統(tǒng)軟復位。這樣雖然程序重啟了但在重啟前把故障現(xiàn)場的關鍵寄存器PC、LR、CFSR、BFAR通過一個保留內存區(qū)域保存下來系統(tǒng)恢復后可以通過串口打印或者調試器查看。這種方式在生產環(huán)境下是終端產品的一個保底方案正常運行時不打斷業(yè)務故障出現(xiàn)時能把現(xiàn)場留給工程師。4.3 Keil5里遇HardFault的幾條高效操作口訣我把自己多年Debug開發(fā)過程里驗證過的操作整理成了幾條口訣式清單配合上面講的方法論使用定位HardFault基本能控制在幾分鐘內一是“一定位、二看壓、三讀故障”。所謂一定位是讓程序停在HardFault_Handler時先別慌通過寄存器窗口和棧信息定位當前SP二看壓是讀取壓棧的8個字拿到異常發(fā)生前的PC和LR三讀故障是看CFSR/HFSR的解析結果確認屬于哪類故障并抓住BFAR/MMFAR。二是“先棧后碼”。排查HardFault時優(yōu)先檢查棧的完整性看SP地址是否落在合法區(qū)間內壓棧內容里PC是否指向一個合理代碼地址比如ROM范圍內LR是否指向一個有效的調用者。很多時候棧已經被踩得面目全非PC指向的是一個類似于0x0800xxxx的保留地址說明返回地址被覆蓋了這時候與其去分析那條非法PC不如順著棧底往上找看哪個區(qū)域被寫入了不該寫的數(shù)據(jù)往往能揪出越界寫和緩沖區(qū)溢出。三是“優(yōu)化等級降一降”。HardFault和編譯器優(yōu)化等級的關系非常密切。很多代碼在高優(yōu)化等級-O2以上下行為和-O0完全不同因為編譯器可能會省去一些邊界檢查、重排表達式、把局部變量直接映射到寄存器。當你用-O0能跑通、用-O2就HardFault時先別懷疑芯片也別盲目加volatile——先看反匯編確認是不是優(yōu)化導致了某個變量在你預期的時間點還沒被寫回內存或者某個中斷里讀取的共享標志被優(yōu)化成了寄存器緩存。實在不行對可疑模塊單獨關閉優(yōu)化這是最直接的止損手段。四是“多路檢查不迷信單點現(xiàn)象”。舉個例子有些HardFault彈窗時當前PC停在HardFault_Handler函數(shù)調用棧窗口里顯示的都是HardFault_Handler附近的信息僅憑這個現(xiàn)象你可能會以為是HardFault_Handler自己的代碼問題。其實不然因為編譯器把故障代碼編進了同一個文件調試器展示的調用棧信息是“物理上等價”的。正確做法是回到現(xiàn)場數(shù)據(jù)層面以壓棧PC和CFSR為準不要被調試器的可視化結果帶偏。4.4 從HardFault再往前一步寫一個故障記錄模塊追著HardFault打補丁是被動的我更推薦每個項目在開發(fā)階段就內置一個故障記錄模塊代碼量不大但能在后續(xù)所有調試中節(jié)省大量時間。這個模塊的核心就兩件事第一在HardFault_Handler里把現(xiàn)場數(shù)據(jù)PC、LR、SP、CFSR、HFSR、BFAR/MMFAR、R0-R3、R12、xPSR保存到一個固定的內存區(qū)域第二把保存的現(xiàn)場數(shù)據(jù)在系統(tǒng)重啟后通過串口或者調試信息輸出出來。存儲區(qū)域的位置需要動一點腦筋。如果直接定義一個全局結構體變量那么它會被編譯器分配到RAM的某個位置如果RAM的初始化過程出問題現(xiàn)場數(shù)據(jù)可能被覆蓋掉。更穩(wěn)妥的方案是用鏈接腳本手動指定一個保留區(qū)域放在棧頂?shù)刂分盎蛘咄ㄟ^__attribute__((section(.noinit)))標記到不掉電的SRAM段。這樣即使系統(tǒng)重啟了只要不掉電現(xiàn)場數(shù)據(jù)還能讀到。串口打印的時候建議用十六進制原始格式不要做太復雜的格式化因為故障模式下堆棧狀態(tài)可能不穩(wěn)定用太復雜的庫反而容易二次故障。我習慣的格式是FAULT_INFO PC0x08001234 LR0x08004567 SP0x20000ABC CFSR0x00008200 HFSR0x40000000 BFAR0x00000000 MMFAR0x20000000 R00x00000001 R10x00000000 ...打印完之后再根據(jù)PC地址去工程里定位具體代碼位置配合反匯編基本就能鎖定問題。這個模塊建議在項目初期就加上成本極低但收益巨大。順便說一句如果你的項目用了RTOS故障記錄模塊里最好也保存當前任務句柄或任務名信息因為很多HardFault和任務切換相關知道是哪個任務出事的排查范圍能縮小很多。4.5 常見問題速查表現(xiàn)象可能原因排查要點解決建議HardFault_Handler里PC指向非法地址棧溢出或返回地址被篡改檢查棧頂和SP差值、壓棧區(qū)的PC值增大??臻g檢查緩沖區(qū)越界CFSR的BFSR位置位BFAR不為0數(shù)據(jù)訪問觸發(fā)了總線故障看BFAR訪問的是哪個地址檢查外設時鐘、地址空間合法性CFSR的UNALIGNED位置位開啟了對未對齊訪問的陷阱定位到具體訪問指令檢查數(shù)據(jù)結構對齊或關閉該陷阱HFSR的FORCED位置位CFSR全0嵌套異常導致無法上報檢查異常返回和棧狀態(tài)減小中斷里復雜操作增加棧深度出現(xiàn)HardFault后連不上調試器SWD接口被占用或讀保護開啟按復位鍵連接檢查選項字節(jié)短接NRST或使用Bootloader模式優(yōu)化后才能復現(xiàn)HardFault編譯優(yōu)化引入了時序/內存差異反匯編關鍵函數(shù)對比-O0和-O2局部關優(yōu)化或重寫臨界區(qū)邏輯HardFault伴隨FPU相關異常FPU上下文保存不完整檢查RTOS任務切換對FPU的處理開啟FPU惰性壓?;騿⒂萌蝿占塅PU保存表格里列出的這幾種情況基本覆蓋了我日常開發(fā)中九成的HardFault問題。尤其是第一條“返回地址被篡改”我再單獨多說一句它在?;厮輹r表現(xiàn)特別迷惑因為PC壞得很徹底反匯編窗口跳到一片空白或保留區(qū)域。遇到這種情況不要死磕PC回到棧區(qū)往上找看棧里有沒有出現(xiàn)“很規(guī)律”的填充數(shù)據(jù)比如0xA5A5A5A5或全0這種填充數(shù)據(jù)往往是緩沖區(qū)沒有初始化或者棧保護魔數(shù)從它們被破壞的位置就能反推是哪一段越界寫導致的。5. 寫在最后的心得跟HardFault打了這么多年交道我最大的體會是它不是一個“玄學問題”而是有一套固定邏輯鏈路的工程問題。你越是靠運氣去復位、重試它就越折磨你你越是把異常模型、壓棧機制、故障狀態(tài)寄存器這些底層知識吃透它反而越聽話甚至能變成你定位內存問題、時序問題的一把利器。最后再分享一個我每次都會檢查的細節(jié)在寫中斷服務函數(shù)時盡量讓代碼保持短小精悍不在中斷里做printf、malloc、延時這類操作每個中斷都加上對參數(shù)合法性的檢查對共享變量加上保護。這些老生常談的規(guī)則每一條背后其實都是HardFault的血淚教訓。認真去執(zhí)行你開發(fā)中遇到的HardFault概率至少能降一半。剩下的一半用前面講的那套方法也能快速定位、體面收場。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
成人版视频在线观看| 久热91精品| 99这里都是精品| 国产67194| 婷婷六月色开 | 五月丁香色婷| 91男人资源站| 天堂综合久久| 婷婷她六月天| 六月婷婷毛片| 久久丁香五月天| 色月丁| 丁香六月欧美| 9l视频自拍9l九色成人| 在线看的免费网站| 久久久精品色| 91婷婷丁香| 亚洲九区| 五月丁香婷庭在线| 欧美啪啪9| 人人97碰| 国产一级婬片毛片| 六月婷婷香蕉| 少妇大叫太大太粗太爽了A片| 色亭亭五月天网扯| 夫妻超碰在线| 久久狠狠干| 噜噜噜噜噜久| 婷婷情色五月| 99精品自拍| 激情色色| 丁香五月 性爱| 五月婷婷视频| 人妻内射麻豆视频| 99热狠狠操| 99操碰| 丁香五月综合久久八| 欧美色综合天天久久综合精品| 久久婷婷五月天激情| 婷婷综合在线网| 丁香激情五月| 色婷婷色情| 性爱网六月丁香| 精品久久99码| 99热久久这里只有精品2010| 日本色色色| CHINESE熟女老女人HD视频| 丁香五月激情鲁| 9 99免费视频| 九九99久久精品| 思思久久99| 夜夜 操无码| 欧美在线| av激情在线| www.超碰| 日本五月天婷婷丁香| 婷婷情色五月天| 白人荫道BBWBBB大荫道| 影视av久久久噜噜噜噜噜三级| 美女激情综合| 国产特黄色精品一区二区三区精品无广告 | 人人摸人人干| 久久人人人人妻| 中文字幕综合| 1024人妻无码中文字幕| 狠狠干综合| 九九色99| 天天色天天爽| 99在线精品视频| 婷婷丁香社区| 亚洲色久| 亚洲欧美婷婷五月色综合| 99热综合在线| 婷婷情色五月天| 嫩草极品| 五月天色图| 天天摸色吧天天摸色吧| 激情校园 亚洲| 超碰在线9| 五月停性愛| 五月天另类综合网| 激情婷婷丁香五月天| 亚洲免费综合一区| 大香蕉啪啪网| 操人无码| 狠狠爱激情网| 丁香婷婷性久久| 五月丁香 久久久| 五月天伊人久久久久| 欧美丰满熟妇BBB久久久| 婷婷综合精品| 日本女人久久| 婷婷丁香五月综合免费视频百花| 丁香五月激情综合啪啪| 六月婷婷私欲| 色九九综合| 久久机热探花| 另类图片五月天激情| 日韩成人电影AV| 五月丁香六月天| 日日爽天天| 免费国产VA国产免费| 1234操逼网| 一二线视频 另类| 五月激情站| 精品99在线观看| 五月天婷婷黄色| 五月丁香婷婷在线综合蜜桃| 天天搞夜夜爽夜夜爽| 97色啪| 青青草原福利在线| 草AV9999| 操逼在线视频| 亚洲色欲AAAAAA| 97亚洲色 torrent magnet| 久久WW| 亚洲av成人一区二区电影在线| 久久激情视频| 精品人妻伦九区久久AAA片| 日本色99| 97人人超| 在线99热| 欧美叉叉叉BBB网站| 九九99精品| 超碰超碰在线| 婷婷激情四射| 欧美交换配乱吟粗大25P| 丁香五月电影| 色婷婷网| 另类五月激情| 亚洲成人精品三区| 无码橾| 九色地址91视频| 婷婷丁香九色| 国产精品成人网站| 色色色婷婷五月| 久久这里有精品| 中文资源在线a | 激情五月天婷婷| 丁香五月婷老师| 国产精品色婷婷AV综合色色| 开心激情站| 色五月 五月婷婷| 天天爽天天摸天天爱| 新伍月婷婷| 激情网五月婷婷| 丁香五月婷婷俺也要去| 综合婷婷五月天| www.日本91| 毛片新网地| 中文资源在线a| 久久婷.com| 综合久久婷婷| 成人精品视频99在线观看免费 | 亚洲尤物在线| 色婷婷亚洲五月天| 亚洲精品视频在线| 中文字幕日产A片在线看| 国产亚洲精品久久久久久郑州| 精品一二三区久久AAA片| 嫩草AV久久伊人妇女超级A| 成人国产欧美大片一区| 色玖玖综合网| 中文字幕人妻熟女在线| 中文字幕成人网站| 色一情一乱一乱一区9| 五月丁香六月激情综合| 99色最新在线视频| 五月婷婷激情久久| 四色99久久| 丁香色色网| 国产日韩精品SUV| 曰韩五月丁香色婷婷无码| 婷婷五月性感| 99热这里| 五月成人网天天| 天天操天天操天天操天天操天天操天天操天天操天天操天天操 | 六月婷婷啪啪| 亚洲经典三级| 婷婷综合在线播放| site:picc-up.com| 丁香五月天亚洲视频| 五月丁香999| 香蕉久久国产AV一区二区| 九九成人电影婷婷| 丁香五月首页| 人妻体体内射精一区二区| 国产67194| www.97视频| 日韩久久欧亚| sS丁香五月婷婷| 丁香五月婷婷骚视屏| 99re热在线视频观看| 五月天婷婷在线播放| 97在线观视频免费观看| 99A级片| http://www.lingjunshare.com/| 综合视频久久| 九九色插| 思思热在线视频观看精品| 亚洲夜夜操| 成人在线精品| 久热在线观看视频9| 婷婷色情网| 26uuu国产精品| 99热网址| 久久久久久9热不雅视频| 9色视频在线| 777.色色| 五月丁香综合啪啪| 日韩免费99| 天天拍夜夜撸| 大香蕉520| 亚洲热综合| 97色色网| 亚洲综合视频网| 丁香六月天色婷婷| 啪啪91| 五月天婷综合| 久热网在线视频| 狠狠搞狠狠操| 亚洲色图45p| www激情网| 久久综合激情| 欧美日韩国产伦精品日韩人妻一| 99热在线免费| 秋霞少妇AV网站| 啪啪激情网| 第四色首页| 99热在线播放| 亚洲色久| 色播六月| 日韩成人AV在线播放| 亭亭社区五月天| 综合色99| 狠狠色婷婷| 99成人| 91re色综合视频| 丁香五月婷婷亚洲人| 天天操综合网| 久久狠婷婷| 久久99色色| 色99在线| www.99热最新视频8| 91成人电影| 五月香六月婷| 激情图片亚洲| 九九九九九九九热| 欧亚成人A片一区二区| 国産精品| 中文无码婷婷| 97色干| 久9久9热久热| 大香蕉久| 99在线观看| 91玖玖| 人妻久热| 激情综合国产| 久久综合激情| 激情文学 综合 色| 九九在线精点品| 91精品久久久久久久| 999久久久国产精品| 玖玖玖婷婷婷| 丁香六月婷婷综合缴| 色综合色香蕉网| 天天爽天天日人人爱| 婷婷丁香花五月天| 色爱综合网| 伊人激情综合网| 极品另类| 色婷丁香| 人人干天天舔| 97精品人人A片免费看| 丁香五月AV在线| 天天操夜夜操| 开心五月天私房婷婷| 99久久极情精品一区| 91婷婷丁香| 色一情一乱一乱一区91Av| 五月天久久婷婷| 精品网站99| 丁香五月六月| 婷婷丁香五月激情图片| 色欲AVV| 亚洲人人操BD| 激情碰碰碰| 五月天综合在线观看| 亚洲综合欧美色丁香婷婷888月图片| 99青青草| 五月停停999| 久99久视频| 97成人丁香婷婷| 色爱综合网| 丁香五月 综合| 少妇熟女视频一区二区三区| 性生活久久朋友人妻| 婷婷国产五月天17c| 亚洲另类视频| 色色综合色视频| 被强行糟蹋的女人A片| 天天日夜夜夜操操操操| 亚洲成人AV在线| 丁香花五月天激情| 少妇激情五月婷婷| 丁香五月婷婷婷桃花影院| 色五月婷婷亚洲最大| 婷婷操超碰| 丁香五月性| 九九人妻福利| 4399在线观看免费高清毛片| 香焦网五月天| 色国产五月| 99热8在线| 五月丁香六月婷婷姐| 色欲九区| 在线播放人妻| 9热精品| 青青操绿aaa一区日v| 天天干人人奸97| 99国产小视频| 超碰免费人人| 久草五月丁香婷婷综合| 五月天开心色情网| 69激情小说| 99精品女人天堂| 26uuu最新地址| 26uuuavcom| www.com色播五月天| 99热免| 丁香五月,激情五月,深爱五月| 99热欧美精品| 92久久精品一区二区| 五月婷婷AV| 九九热精品| 婷婷五月色综合香五月| 淫视馆aV二区一区| 婷婷久久六月费| 99热资源在线| 日韩色色色色| 亚洲色久| www色五月| 五月丁了香蕉综合| 九热久| 极品少妇高潮啪啪AV无码| 亚洲热久久| 丁香五月激情六月欧亚激情综合导航 | 在线可以看的av网址| 久久亚洲天堂| 九九色情网站| 丁香六月啪| 久久激情五月| 精品人妻久久久久久久| 色情五月天视频网| 人妻五月天激情开心网| 操人妻AV| 99在线精品观看99| 日韩AV片| 色婷婷综合视频| 再次出发二| www.婷婷,com| 精品自拍99| 99色在线| 亚洲AV成人在线| 人人爽欧美婷婷久久久五月丁香| 五月丁香亭亭成人电影| 国产亚洲99久久精品| 97超碰欧美中文字幕| 无码人妻精品一区二区蜜桃色欲| 97福利视频| 丁香六月在线| 亚洲色婷婷视频| 亚洲夜五月| 婷婷久久性爱| 在线成人av播放| 色日本颜射| 五月婷婷成人| 怡红院视频| 婷婷五月天激情开心网| 开心五月深爱五月丁香五月激情五月 | 激情久久网 | 天天爱天天操| 夜夜谢天天干| 九九久热| 另类五月激情| av人人操| 亚洲综合狠狠艹| WWW五月天| 天天做天天爱天天搞| 国产成人在线不卡AV| 激情五月天婷婷丁香| 99精品视频在线观看| 久久a热| 色噜噜狠狠色综合日日| 亚洲狠狠干| 这里只有免费的精品| 婷婷五月丁香影院| 色五月婷婷少妇人妻| 五月综合久久| www.婷婷五月天,com| 99操逼| 91视频一起草| 婷婷五月天黄色| 五月天婷婷伊人| 成年视频免费观看| 人人操操| 久9久9久9久9久9久9| 激情中文在线| 九洲一级A片| 亚州操逼网| 97色女人在线| 大香蕉精品视频| 9久久久久| 无码人妻激情| 狠狠狠婷婷五月综合| 天天爽爽日日做做| 六月婷婷无码观看| 婷婷5月天激情综合| 小视频aaa久久久| 国产成人AV人人爽人人澡Va| 婷婷六月插屄激情| 久久99免费视频| 激情综合激情五月一起草| 五月丁香激情欧洲啪啪| 日本色五月婷婷| 大香蕉久久婷婷精品综合| 天天综合色丁香| 五月婷婷狠狠干| 狠狠爱综合| 狠狠草在线观看| 丁香五月天社区| 超碰91在线| 拍真实国产伦偷精品| 搡BBBB搡BBB搡18| 影音 五月 婷婷 久久| 91/九色黑人| 久久综合五月| 国产韩日亚洲美州欧亚综合在线| 亚洲色爽| www激情com| 91久久九久久九久久九久久九久久| 美欧日韩国产成人在战| 9久久精品| 99热 精品在线| 情色五月天 网站| 99久久新视频| 五月丁香六月婷婷啪啪综合 | 亚洲中文av| 五月婷婷新网站| 草婷婷在线| 天天综合在线网| 超碰99久久| 日本一道久久| 三级黄色大片视频| 我去色色网五雨天| 丁香五月天色综合| www.色五月.com| www.婷婷五月| 操操操B| 9超碰在线| 亚洲天堂99| 欧美成人无码高清一区二区三区| 四月婷婷丁香| 丁香五月欧美成人| 九九九九九九热| 啪啪六月婷婷| 人人摸人人射| 99热最新精品| 激情人妻蜜夜系列区| 嫩草国产| 色婷婷激情小说网| 婷婷五月天成人| 色综合色色| 五月婷婷开心丁香| 九九久久99| 伊人网色婷婷五月天| 九九色院| 日日狠夜夜狠| 在线不卡视频| 色99无码| 狠狠干总合| 神马欧美精| 男妓跪趴把舌头伸进我的嘴巴| www久久久久久久| 99精品热| 天天拍天天操| 欧美婷婷色| 操久久网| 婷婷综合在线| 久久性综合| 91久久久久久久久18| 五月婷高清视频| 超碰人人干| 欧美性生交XXXXX无码小说| www.91婷婷| 色色综合视频| 亚洲激情久久| 99色在线观看视频| 这里只有精品免费视频在线观看| 激情综合婷婷| 亚洲成人无码网站| 性色视频| 在线中文AV| 综合亚洲六月婷婷在线| 夜夜爱伊人| 欧美97超碰| 夜夜躁狠狠| 日本一级一片免费视频| 野外99热| 五月天婷网| 久久久久久人妻| 色婷婷免费观看| 五月婷亚洲精品| 久草热久草在线视频| 99在线视频播放| 九九视频在线观看| 色婷婷狠狠18yy| 婷婷丁香色五月天久久88| 91婷婷色五月| 久久免费丁香| 婷婷五月天天天| 99操逼| 国产精品国产成人国产三级| 色婷婷丁香五月天| 武则天精品久久| 国产综合视频婷婷| 图片区 小说区 区 亚洲五月 | 婷婷丁香激情综合色情| 99久久99热| 99热国内精品| 激情五月天婷婷色色色色色色色色色色色| 国产人妻人伦精品一区二区| 色综合久久88色综合天天99| 五月丁香六月婷婷手机无线| 久久五月天精品视频| 五月天婷婷丁香花| 五月 婷 久| 久久精彩视频| 午夜婷婷| 九九热10| 26UUU精品一区二区| http://www.lingjunshare.com/| 国产67194| 综合网啪| 五月丁香婷婷综合网色欲| 成人免费120分钟啪啪| 日韩成人AV在线| 九色91视频| 婷婷五月日本| 99免费超碰在线| 99热官网| 色五月色图| 欧美一级操逼视频| 特级片神马电影| 天天爽天天日人人爱| 91九色|疯狂|高潮|对白|| 毛片蕉地一二| 国产探花一片区| 日本黄色一级| 少妇搡BBBB搡BBB搡毛茸茸| 亚洲色五月天| 九九色热| 99热在线观看| 六月婷婷色| 丁香六月婷婷综合欧美| 精品51XX| 婷婷五月深爱五月| 丁香婷婷久久综合在线| 天干干夜夜操| 五月色无码| 人妻性爱| 日本狠狠爽| 婷婷国产综合| 亚洲第一色色色| 性色欲情 网站| 91干| 伊人久久艹| 中文字幕在线播放视频| 91精品久久久久| 激情六月丁香| 大香蕉人妻| 99啪啪视频| 99ri在线观看视频| 日韩成人电影AV| 激情综合久久| 久久机热这里只有精品免费视频| 玖玖资源站国产| 五月天婷婷基地丁香| 天天爽在线视频| 五月天激情综合在线| 91操操| 丁香五月天激情婷婷丁香六月| 99在线视频播放| 亚洲啪啪视频| 丁香婷婷六月激情文学| 99热在这里只有免费精品| 99视频精品视频| 五月激情丁香五月宗合| 色五月丁香在线| 日日夜夜小色哥| 思思精品热在线| 久久六月综合| 欧美色色色色色色色色色色| 亚洲色碰| 色色婷婷五月天| 少妇高潮呻吟A片免费看软件 | 影音先锋 萱萱| 综合在线观看99| 中文字幕高清av| g00d人体西西| 99久久久久| 五月丁香综合啪啪| 操国产人妻| 亚洲一区二区无码蜜乳av| 欧美日韩AAA| 这里只有精品久久| 丁香九月久久| 狠狠干综合| 五月丁香综合精品欧美| 99婷婷五月天激情| 亚洲欧美婷婷五月色综合| 色八月婷婷| 婷婷色五月天综合网| 丁香五月六月婷婷殴美综合| 性色婷婷| 婷婷五月天成人| 婷婷五月丁香综合网| 天综合日日夜综合7799| 草草操操| 亚洲综合五月天综合| 亚洲成人噜噜| 日本三级韩三级99久久| 亚洲视频一区| 超碰人人操人人9| 九月丁香亭亭| 草婷婷在线| 五月婷婷亚洲色视频| 九九碰九九爱97超碰| 天天做天天爽| 日韩五月婷婷| 五月天婷婷综合久久| 五月天激情日色在线| 欧美狠狠色| 丁香五月激情综合| 中文字幕av网站| 国产精品久久..4399| 丁香婷婷六月天| 五月丁香色综合| 91狠狠色丁香婷婷综合久久精品| 禁片二区| 人人爽天天莫| 色婷婷色五月天| 九九视频这里只有精品| 亚洲在线网站| 久久五月婷| 丁香五月,激情五月,深爱五月| 五月天操逼网| 综合色、色综合| 色呦呦美女| 日韩av干| 久久久久9| 草草色情综合网| 婷婷人人操| 婷婷五月综合在线视频| 综合五月婷婷| 伊人久久五月天| 中文字幕视频在线播放| 亚洲九九99精品视频在线播放| 99riAV国产精品视频| 久热这里精品免费| 99热国产精品| 97涩婷婷婷婷基地| 91超级碰碰| 丁香涩涩爱| 91操操| 都市激情亚洲| 天天干天天操天天上| 91偷拍视频| 在线中文字幕免费视频| 激情小说五月丁香在线视频观看视频| 五月丁香性| 99re热视频这里只精品| 婷婷99狠狠躁天天躁中| 丁香激情综合| 中文字幕乱码亚洲精品一区| 国产精产国品一二三在观看| 91九色 婷婷| 六月丁香好婷婷| 丁香六月婷| 精品爆操| 日本激情综合| 欧美成人一区二区三区在线视频| 伊人久久五月天| 五月婷亚洲精品| 日本操天堂| 全亚洲最大的婷婷五月天网站COM| 熟女激情五月天 | 99综合一区| www.天天干| www.91操| 99热这里| 91干在线视频| 99惹精品视频| 国产全是老熟女太爽了| 久久丝丝热| 91九色熟女| 亚洲啪啪精品| 人人视频色| 裸体做A爰片毛片A片免费| 亚洲成人免费电影| www.色五月.com| 一区二区三区XXXXXX| 五月婷婷激情综合拍| 久草热8精品视频在线观看| 91精品久久久久久| 91丁香五月| 婷婷成人在线| 激情欧美五月丁香| 男同色五月开心五月激情五月| 丁香花五月天| 天天日天天爽| 大波美女VA网站| 色99在线| 五月天六月丁香| 色色射| 伊人干综合| 97在线视频人妻九色| 色哟哟性爱av| 无码99| 五月天色站| 欧州色色| 超碰京东热av男人的天堂| 久久精品亚洲热| 99热人人艹| 丁香五月激情性色郤| 性欧美大战久久久久久久83| 激情五月婷婷伊人| 久热在线中文字幕色999舞| 高清激情av在线观看| 婷婷精品视频| 99热这里只有精品亚洲| 欧美韩国日本| www.伊人天堂偷偷婷婷| 色狠狠色噜噜AV天堂五区 | 日本少妇AA一级特黄大片| 99色亚洲| 在线伦子99热| 色私五月婷婷| 婷婷99视频精品| 色综合婷婷| 99视频内射三四| 久热只有精品| 亚州激情在线视频| www免费在线视频| 五月婷婷丁香av| 五月天婷婷色| 大香蕉五月| 五月停停999| 五月停停999| 久久性视频| 9精品在线| 99精品亚洲| 亚州欧美国产久精国产99综合视频| 丁香六月激情综合| 色婷丨日丨天丨综合久久| 在线播放人妻| 久草热视频在线观看| 98色丁香五月婷婷综合网| 99玖玖在线视频| 99操逼| 色婷婷影视| 天天干天天干天天干天天干天天干天天 | 五月美女婷婷风骚| 深爱开心激情| 婷婷欧美综合| 91久操| 99热精品一| 五月婷免费视频| 九九香蕉网| 精品国产va久| 色9999综合久久| 婷婷五月精品中文字幕| 色愛综合网| 91啪啪视频| 日本激情五月| 国产性爱一级| 播播网色播播| 另类小说婷婷色| 人人叉久| 26UUU精品一区二区| 日日鲁鲁夜夜爽爽| 色五月婷婷伊人| 91蜜桃婷婷狠狠久久综合9色| 5月色亭亭视频| 天天操天天插天天射| 五月婷婷天堂| 六月婷婷无码观看| 激情性爱婷婷| 91精品久久久久久综合五月天| 婷婷五月天Av| 五月婷婷色色网址| 99亚州综合精品成人网| 99视频精品全部免费观看| 伊人九九热| 99色在线| 一级二级香港秋霞欧美欧美秋霞| 色综合中文色综合网| 色色热| 九九性视频| 五月丁香综合激情| 色综合天天| 色爱亚洲| www.minyis.com【JT】实力收量可预付TG@LXSPSW8 | 91呦呦呦| 色999;丁香五月| 欧美婷| 婷婷少妇激情| 激情文学综合婷婷五月天丁香花| 女人被男人吃奶到高潮| 天天草天天舔| 欧美超级视频97| 99国产精品久久久久久久久久久| 综合在线色婷婷| 97色色色视屏| 久久婷婷夜| 免费无码毛片一区二区A片| 五月久久婷婷成人网| 六月婷婷六月天天在线免费| 国产激情一区| 久久人人妻| 激情五月婷婷开心网| 色婷婷狠狠干| 91色色色视频| 日日操天天操| 色五月亚洲| 91啪级电影| 97热久久五月婷婷| 六月五月天婷婷涩播在线| 欧美综合123区| 人人人va亚洲视频在线| 六月婷婷天天操夜夜爽视频| 亚洲啪| 久久香蕉影院| 丁香激情四射| 色欲天天综合| 六月综和久久| 大香蕉久久久久| 色婷婷激情视频| 大香蕉人妻| 久久婷丁香五月| 亚洲第一色区| 天天激情视频| 久久色情| 99人妻碰碰碰久久久久视| 丁香六月在线综合| 综合网五月| 99精品在线| 五月婷婷网站| 《诡秘之主》在线观看| 禁片二区| 午夜不卡久久精品无码免费| 丁香六月色婷婷| 五月丁香六月婷婷激情网| 特级片神马电影| 天天爽天天日人人爱| 日韩一级片| 亚洲秘 无码一区二区三区妃光/1| 婷婷色色综合| 天天色粽合合合合合合合| 久久作爱| 国产精品色色| 亚美欧色影院| 五月天色网站| 婷婷五月天激情综合| 婷婷色亚洲| 久久嘟嘟丁香| 亚洲天堂青草| 色色五月婷婷狠狠| 99精品国产在热久久| 夜夜撸夜夜骑| 日本色色图| 成人免费在线电影| 激情五月色播五月| 婷婷五月天成人网站| 男人综合网| 久久伦乱| 人妻激情视频| 99热只有精品在线| 亚洲黄色av网站| a毛片二逼wwwwwwwwww| 激情综合色五月丁香| 国产做爰视频免费播放| 五月色综合| 日日色综合| 玖玖在线视频| 狠狠色综合网| 翔田千里 50岁 无码| 久久五月天视频| 久久999久久999久久999久久| 深爱激情av| 99久久精品网| 开心四月婷婷在线色播播| 五月婷婷丁香深深爱| 五月丁香日本一抹本| 超碰免费人人| 人妻22p| 欧美色婷婷| 无码se| site:xiongshengzz.com| 99热精品在线| 婷婷香香五月| 婷婷综合激情五月中文字幕| 婷婷五月花| 综合久久婷婷| 天堂A∨在线| 午夜婷婷丁香| Av性爱网| 91婷婷五月天综合视频| 五月天中文网| 99热这里只有在线| 五月激情婷婷在线| 五月丁香激情综合| 猫咪伊人久久| 中文字幕 码精品视频网站| 色婷婷视频| 五月天婷婷久久| 天天天天干| 免费视频WWW在线观看网站| 精品久久久久成人码免费动漫| 欧美性生交XXXXX无码小说| 婷婷色色五月天| 少妇人妻丰满做爰XXX| 曰韩五月丁香色婷婷无码| 国av网| www.色色色com| av五月天婷婷丁香| 婷婷中文网站| 9191avse| 日韩三级片一区二区| 逼逼AV| 五月激情婷婷六月| 婷婷五月天福利| 综合久久97| 亚洲激情网| 香蕉人妻AV久久久久天天| 婷婷色色综合| 日都一级A片| 91人人操人人看| 婷婷久热| 丁香婷婷射| 色婷婷色五月天| 狠狠五月激情在线| 亚州视频九九99| 这里只有免费精品| 五月天久久网站| 97色欧美| 久久久久久久久久8888| 色五月亚洲| 日韩视频女神99| 久久久人妻不卡| 五月丁婷婷| 五月丁香成人视频| AV电影在线播放| 国自产拍偷拍精品啪啪一区二区| 超碰京东热av男人的天堂| 欧美日韩999| 26uuu亚洲欧美| 色域五月婷婷丁香| 美国少妇性做爰| 1024操逼视频| 求可以看的AV网址| 五月天婷婷色色网| 丰满少妇猛烈A片免费看观看| 婷婷丁香综合| 婷婷5月天激情综合| 天天色视频| 色五月婷婷五月天| 色五月婷婷激情基地| 91精品熟女| 久久久久久久人妻| 婷婷色综合| 综合久久综合五月天婷婷| 五月天另类图片区99| 蜜桃婷婷五月| 婷婷色五月天在线观看| 五月花激情| 精品视频二级九九| 亚洲成人在线免费| 天天做天天爱天天爽在| 十一月婷婷激情四射| 丁香婷婷久久| 丁香六月综合激| 韩国情人在线电视剧免费观看高清版全集| www.minyis.com【JT】国内CDN落地页保证转化QQ2101460746 | 开心激情婷婷| 99在线小视频| 五月天婷婷久久日| 婷婷网五月天| 狠狠操狠狠操AV| 97碰精品| 激情五月天婷婷直播| 97婷婷五月| 天天色天天| 《丁香激情综合久久伊人久久》影视在线观看 -高清预告手机免费播放 -三妹影院 | 99热网站| 狠狠干狠狠干| 亚洲视频国产一区| 亚洲精品性色| 五月婷婷激情综合| 99九九玖玖| 99热这里只有精品18| 婷婷五月天伦理| www.激情| 色综合偷拍| 无码人妻一区二区三区免费九色| 婷婷五月天电影网| 婷婷五月色影视先锋| 天天日天天干天天插天天射| 国产成人网站在线观看| 97色热| 91婷婷五月天嫩女| 国产视频色色色色色色色 | 婷久久久| 丁香色啪综合| 亚洲国产99| BT综合在线视频观看| 终合激情网| 婷婷大香焦| 天天爽天天日人人爱| 久久婷婷六月综合| 熟女91九色| 五月开心激情| 67194线路二在线观看| 99re热| 色99网站| 国产在线黄色| 婷婷久久精品| 人妻中文av| 婷婷五月天激情综合深爱激情 | 久大香蕉| 99噜噜噜| 五月婷婷综合在线视频小说| 国产在线激情视频| 热久久77777| 五月丁香婷婷综合网| 色婷婷大香蕉| 色女人久久| 色五月97| 欧美五月丁香| 91热视频| 亚洲综合在线丁香五月| 嫩草AV久久伊人妇女超级A| 五月天色播网| 天天插天天射| 色 免费网站视频| 91色婷婷综合久久中文字幕二区| 综合激情五月婷婷| 99视频激情四射| 97碰成超视频免费视频| 天天干狠狠| 丁香五月综合激情久久潮喷| 99热精品6| 亞洲自怕| 一级操逼内射在线视频| 99欧美精品99日本精品| 久99久热只有精品国产99| 老师的粉嫩小又紧水又多A片视频| 免費亭亭成人| 五月丁香六月激情综合| 久月丁香爱婷婷综合| 婷婷色五月激情| 夜夜爽天天| 久久女婷| 天天干天天日天天插| 极品人妻VIDEOSSS人妻| 678五月丁香亚洲综合| 538在线精品| WWW.桔色成人.COM| 99热传媒| 79色色色色| 丁香六月av| 深爱五月婷婷| 婷婷五月综合久久中文字幕| 99九色视频在线观看| 97人人操人人爽| 这里只有精品免费| 六月丁香五月激情亚洲AV| 激情丁香五月| 久久成人综合五月天| 色99最新网址| 亚洲va在线∨a天堂va欧美va| 综合爱久久| 2025中文在线视频字幕免费观看| 激情五月天综合网| 玖操97| 婷婷六月偷拍| 激情网婷婷五月天| 九九色色网| 亚洲欧美婷婷五月色综合| 亚洲色五月天是什么| 丁香五月开心七月| 亚洲综合激情五月| 国产精品人妻在线网址| 97久久久久| 色五月激情问网站| 欧美亚洲色色色色| 亚洲99精品欧美一区| 97欧美在线| 日日天天干| 婷婷涩涩网| 热久91| 黄色五月婷婷| 五月天激情站| 国内自拍97在线| 99色热视频在线| 99视频内射三四| 农村熟妇高潮精品A片| 久久 视频这里只有精总| 精品久久婷婷| 色色射| 我爱va亚洲va52| 日韩美女在线视频19| 久99久视频| 青娱乐美女福利视频美臀| 婷婷综合在线网| 九九热10| 精品视频99看在线视频| 国产乱轮一区二区三区| 欧美日韩成人一区二区| 久久久精品99亚洲综合| 日本久久色| www.五月天婷婷| 三区激情四射av| 99综合入口| 丁香婷婷久久| 亚洲99在线| 91日视频| 五月丁香在线| 天天插,天天射| 9l视频自拍9l九色成人| 另类在线免费视频| 婷婷激情五月| 婷婷五月天777| 9久热在线视频| 久久五月天婷婷| 日撸夜撸日操| 日韩在线视频网站| 日日鲁鲁鲁夜夜爽爽狠狠视频97| 色五月激情| 欧美久草在线日本一级特黄大片做受9在线观看韩国电影《两个女人》未删减-毛片 | 色欧美一级| 182TV大香蕉| 六月婷婷色五月| 久久一级片| 热久久这里只有精品| 日日色综合| 久久五月六月| 色五月,婷婷大香蕉| 欧美精品999| 亚洲视色| 天天色综合色色色色色。| 91丨人妻丨国产丨丝袜| 色色99| 丁香五月六月综合欧美| 日本的α片xxxwww| 97干在线看| 国产做爰视频免费播放| 色噜噜狠噜噜视频| 亚洲综合网激情小说| 久操干| 国产婷伊人| 91成人品| 色色综合网络| 26uuu四色| 91人人操| 五月天婷婷色播综合在线| www.婷婷.com| 婷婷丁香精品视频在线观看| 99热精品在线播放| 五月五婷婷| 激情五月天综合网站网站网站| 国产探花一片区| www.婷婷五月天| 久9免费视频| 99热这里只有的精品视| 色婷婷五月影视| 色99视| 亚洲精品又粗又大又爽A片| 六月丁香色色| 永久地址 色| 激情宗合哪里能看| 亚洲人妻电影| 激情五月成年| www.五月天| 玖玖婷婷色五月| 色色欧美色色| 日本熟女三区| 伊人久久婷| 久久久免费图片视频| 乱岳熟女50岁| 亚洲热久久| 色五月偷偷| 婷婷五月花西瓜| 久久五月婷综合网| 操一区| 996精品热视频| 久久33视频| 极品人妻VIDEOSSS人妻| 狠狠做婷婷| 久久久久亚洲AV成人无码电影| 无码色色| 欧美综合婷婷网| 色波激情五月天| 欧美熟女99| 91人碰| 五月婷丁香久久综合| 亚洲视频在线网站| 91丨九色丨东北熟女| 久久婷婷五月天懂色| 天天爱天天爽| 天天色综网| 国精产品久久| 激情婷婷丁香色五月综合| 五月丁香六月综合情在线观看| 久久精品五月天| 99久久.www| www.com在线操视频免费观看| caop视频| 高清一区二区三区日本久| 五月婷六月| 99ri在线观看视频| 超碰高清在线| 六月丁香激情| av色色国产| 狠狠色婷婷777| 婷婷六月花| 人妻VideOssS人妻| 激情久久天天| 婷婷丁香五另类网站| 777久久综合视频| 久久久精品99亚洲综合| 婷婷啪啪| 超碰亚洲天堂| 色婷婷大香蕉| 超碰成人在线观看| 丁香蜜臀黄色婷婷五月天| 色色九九五月天| 丁香六月| 1024操逼视频| 激情爱爱网站超大免费| 人妻激情视频| 99色日本| 偷偷操99| 色五婷婷| 久久婷婷五月综合色奶水99啪| 91精品人妻少妇无码影院| 97电影99热| 色五月婷婷91| 国产精品操| 色五月天堂| www99热| 丁香五月婷婷深五月| 噜噜色五月| 千人斩操逼| 天天综合永久| 99这里只有精彩视频|