免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Picolibc Locking Support 深度解析:嵌入式多任務(wù)下的線程安全鎖機制

Picolibc Locking Support 深度解析:嵌入式多任務(wù)下的線程安全鎖機制 先把話說在前面如果你只是裸機單任務(wù)跑 picolibc這文章你看了會打瞌睡但只要你把程序搬到 RTOS 上兩個任務(wù)同時開始 printf 和 malloc你很快就能體會到 locking support 到底在解決什么。picolibc 的 locking support說人話就是給 C 標(biāo)準(zhǔn)庫內(nèi)部的共享資源堆、標(biāo)準(zhǔn) I/O、errno 等補上“多線程安全”的鎖機制。它解決的是嵌入式領(lǐng)域里最隱蔽也最致命的一類 bug不崩潰、不亂碼、但時不時出現(xiàn)內(nèi)存被踩、任務(wù)卡死、錯誤碼莫名變化。這篇文章適合正在用 picolibc FreeRTOS、RT-Thread、Zephyr 或者自研 RTOS 的開發(fā)者尤其是從裸機剛轉(zhuǎn)過來、還沒意識到 libc 線程安全是個問題的朋友。我要講的不是“怎么開一個配置宏”這么簡單而是把 picolibc 鎖支持的前因后果、底層函數(shù)設(shè)計、移植實現(xiàn)以及我踩過的大大小小的坑一次性講透。1. 為什么嵌入式 C 庫需要鎖支持1.1 裸機時代的“單線程假設(shè)”C 標(biāo)準(zhǔn)庫誕生的時候根本沒人考慮多線程。標(biāo)準(zhǔn)庫內(nèi)部大量使用全局狀態(tài)strtok 用靜態(tài)指針保存剩余字符串rand 用全局種子errno 是全局變量malloc 的堆管理結(jié)構(gòu)也是全局鏈表。這些設(shè)計在單任務(wù)裸機下沒有任何問題因為你只有一個執(zhí)行流所有資源天然“同步”。可一旦上了 RTOS多個任務(wù)分時復(fù)用 CPU這幾個全局狀態(tài)就成了最危險的共享資源。很多剛接觸 RTOS 的開發(fā)者會有一種錯覺只要我不在中斷里調(diào)用 printf多個任務(wù)各調(diào)各的 printf 就沒事。真不是這樣。picolibc 的 stdio 內(nèi)部有緩沖區(qū)兩個任務(wù)同時寫 stdout 時先寫一半再被調(diào)度走另一個任務(wù)接著寫最終輸出就是亂碼。更嚴(yán)重的是 malloc堆管理鏈表被兩個任務(wù)同時操作輕則內(nèi)存分配異常重則堆結(jié)構(gòu)被破壞直接硬件異常。picolibc 作為面向嵌入式場景的 libc 替代品設(shè)計上保留了 C 標(biāo)準(zhǔn)庫的可移植性同時也保留了標(biāo)準(zhǔn)庫的“單線程假設(shè)”。所以它才需要 locking support 來彌補這個缺陷。鎖支持并不是 picolibc 獨有的概念newlib、musl、glibc 都有類似機制只是嵌入式場景里資源受限實現(xiàn)方式更加精簡。1.2 多線程下的三個典型事故現(xiàn)場我自己踩過一次特別經(jīng)典的坑。有一個跑在 STM32F4 上的 FreeRTOS 項目四個任務(wù)分別采集傳感器、刷 OLED、處理串口命令、上報日志。一開始裸機單任務(wù)跑得好好的上了 FreeRTOS 之后每隔幾分鐘 OLED 顯示就花一次串口日志偶爾出現(xiàn)一行被截斷的亂碼。當(dāng)時第一反應(yīng)是驅(qū)動問題調(diào)了 SPI 時序加了 DMA 超時重試折騰了兩天最后才發(fā)現(xiàn)根因是 printf 在多個任務(wù)間競爭 stdout 緩沖區(qū)。第二個事故現(xiàn)場是 malloc。系統(tǒng)跑了幾小時后隨機會進入 HardFault看調(diào)用棧發(fā)現(xiàn)是 free 函數(shù)里面崩了。追查發(fā)現(xiàn)兩個任務(wù)都在做動態(tài)內(nèi)存申請釋放其中一個任務(wù)在 free 的瞬間被高優(yōu)先級任務(wù)搶占新任務(wù)也調(diào)了 free堆鏈表就被改壞了。這類錯誤在嵌入式里特別難查因為它和調(diào)度時序強相關(guān)不是每次都能復(fù)現(xiàn)等抓到現(xiàn)場往往已經(jīng)晚了。第三個是 errno 污染。我在一個文件系統(tǒng)相關(guān)任務(wù)里調(diào)用底層接口失敗后打印 errno結(jié)果打出來的錯誤碼是另一個任務(wù)的。原因很簡單兩個任務(wù)共享同一個 errno 全局變量后寫的人把先寫的人的值覆蓋了。排查這種問題極費時間因為錯誤碼本身沒有規(guī)律只有加鎖或者改成 TLS 才能根治。1.3 picolibc 的兩種線程模型picolibc 處理線程安全和我之前用過的 newlib 不太一樣它支持兩套模型。老模型是struct _reent每個線程維護一份獨立的 errno、緩沖區(qū)狀態(tài)通過線程局部數(shù)據(jù)指針找到自己的 reent 結(jié)構(gòu)新模型則是直接使用 TLS線程局部存儲編譯器會為每個線程分配獨立的 errno 副本不存在共享問題。老模型最大的問題是代碼復(fù)雜每個函數(shù)都要先取 reent 指針再訪問內(nèi)部字段函數(shù)體積和調(diào)用路徑都變長。TLS 模型則簡潔得多尤其是在 ARM Cortex-M 這類硬件上picolibc 對 TLS 做了專門的編譯期支持加載 TLS 基址的指令開銷很小。理解了這一點你就能明白鎖支持的邊界errno 這類“每個線程各有一份”的東西TLS 能解決但 malloc 的堆、printf 的 stdout 緩沖區(qū)這類“物理上只有一份”的資源TLS 解決不了必須靠鎖。這也解釋了為什么很多嵌入式工程師以為開了編譯器 TLS 選項就萬事大吉結(jié)果 malloc 還是崩——因為兩個問題的本質(zhì)不一樣。2. picolibc 鎖支持的底層設(shè)計拆解2.1 鎖函數(shù)家族__lock_init 到 __lock_releasepicolibc 的鎖支持其實是一組很精簡的函數(shù)接口定義在sys/lock.h里。我在實際使用中把這組函數(shù)分成三類生命周期管理、普通鎖操作、遞歸鎖操作。生命周期管理包括__lock_init和__lock_close前者在 libc 內(nèi)部初始化某個全局資源時被調(diào)用后者在資源銷毀時調(diào)用。普通鎖操作是__lock_acquire和__lock_release分別對應(yīng)“上鎖”和“解鎖”。遞歸鎖操作則是__lock_acquire_recursive和__lock_release_recursive對應(yīng)支持遞歸持有的鎖。為什么會需要遞歸鎖考慮 malloc 的實現(xiàn)堆分配器在拿到鎖之后如果分配失敗可能觸發(fā)系統(tǒng)調(diào)用系統(tǒng)調(diào)用內(nèi)部為了記賬又要訪問同一個堆控制塊這就是典型的“同一線程重復(fù)獲取同一把鎖”的場景。如果鎖不支持遞歸第二次獲取就會死鎖。還有一個__lock_try_acquire非阻塞嘗試獲取鎖用于一些不想被阻塞的路徑。嵌入式環(huán)境里這個函數(shù)使用率不高但移植時最好一并實現(xiàn)因為 picolibc 內(nèi)部某些代碼路徑會在條件編譯下引用它。函數(shù)原型作用注意事項void __lock_init(_LOCK_T *lock)初始化鎖在 libc 內(nèi)部資源首次使用時調(diào)用void __lock_close(_LOCK_T *lock)銷毀鎖釋放底層互斥量句柄void __lock_acquire(_LOCK_T *lock)獲取鎖阻塞式等不到就一直等void __lock_release(_LOCK_T *lock)釋放鎖必須與 acquire 成對int __lock_try_acquire(_LOCK_T *lock)嘗試獲取鎖返回 0 表示成功void __lock_acquire_recursive(_LOCK_T *lock)遞歸獲取鎖同一線程可重復(fù)獲取void __lock_release_recursive(_LOCK_T *lock)遞歸釋放鎖需要配對 count2.2 弱符號機制你的覆蓋點在哪里我最開始接觸 picolibc 鎖支持時有個困惑這些函數(shù)到底是誰實現(xiàn)的后來看鏈接 map 文件才搞明白picolibc 在構(gòu)建時把這些鎖函數(shù)默認(rèn)編譯成了弱符號weak symbol。也就是說如果你在工程里沒有定義自己的__lock_acquire鏈接器就會使用 picolibc 自帶的弱引用空實現(xiàn)直接返回不上鎖。一旦你在某個 C 文件里定義了同名的強符號鏈接器的符號解析規(guī)則會優(yōu)先選擇強符號你的實現(xiàn)就會“無縫接管”libc 內(nèi)部的鎖調(diào)用。這個設(shè)計非常巧妙。它意味著你不需要重新編譯 picolibc不需要修改庫源碼只要在應(yīng)用層提供一個適配文件就能把鎖的底層實現(xiàn)完全替換成目標(biāo) RTOS 的互斥量。對于裸機工程弱符號默認(rèn)空實現(xiàn)也不會帶來任何代碼膨脹零開銷。但這里有個坑弱符號的優(yōu)先級只比“未定義”高。如果你在多個源文件里都定義了強符號__lock_acquire鏈接器直接報多重定義錯誤。另外picolibc 版本升級后鎖函數(shù)簽名如果有變動你的移植層代碼沒有跟著改鏈接時不會報錯但運行時會因為結(jié)構(gòu)體大小不匹配產(chǎn)生內(nèi)存越界。我建議在移植文件里加上編譯期_Static_assert至少把結(jié)構(gòu)體大小校驗住。2.3 構(gòu)建開關(guān)newlib-multithread 與相關(guān)選項雖然弱符號機制讓你可以在應(yīng)用層覆蓋鎖實現(xiàn)但前提是 picolibc 庫本身編譯時啟用了鎖相關(guān)代碼路徑。picolibc 使用 meson 作為構(gòu)建系統(tǒng)其中有一個關(guān)鍵配置項叫newlib-multithread。這個選項默認(rèn)關(guān)閉關(guān)閉狀態(tài)下picolibc 內(nèi)部的 malloc、stdio 代碼根本不會調(diào)用__lock_acquire你在應(yīng)用層實現(xiàn)了鎖函數(shù)也無濟于事。啟用方式是在 picolibc 源碼目錄下執(zhí)行 meson 配置時傳參meson setup build --cross-file cross-arm-none-eabi.txt -Dnewlib-multithreadtrue ninja -C buildcross-arm-none-eabi.txt是你自己的交叉編譯工具鏈描述文件名字按實際工程來。啟用后構(gòu)建系統(tǒng)會定義_HAVE_LOCK宏libc 內(nèi)部的多線程安全代碼路徑才會被編譯進去。和鎖支持經(jīng)常一起提的還有兩個選項newlib-tls和newlib-global-errno。newlib-tls控制是否使用線程局部存儲模型建議開啟newlib-global-errno控制是否把所有線程的 errno 合并成一個全局變量這個強烈建議關(guān)閉否則 errno 又會退化成共享資源失去 TLS 的意義。我見過有人圖省事把 global-errno 打開結(jié)果兩個任務(wù)跑著跑著錯誤碼互相污染排查半天。3. 實操在 FreeRTOS 上為 picolibc 實現(xiàn) locking support3.1 前置確認(rèn)你的 picolibc 是否啟用了鎖工程實踐里第一步不是寫代碼而是確認(rèn)你的 picolibc 是不是已經(jīng)編譯成帶鎖的版本。最笨也最可靠的方法是看編譯生成的 map 文件。搜索__lock_acquire如果出現(xiàn)的是 picolibc 庫內(nèi)部的弱符號說明鎖支持已經(jīng)啟用如果整個符號都沒出現(xiàn)說明newlib-multithread沒開或者庫內(nèi)部代碼路徑?jīng)]有引用鎖。還有一個快速判斷方法寫一個多任務(wù)壓測程序兩個任務(wù)各自循環(huán)malloc和free跑十分鐘。如果程序穩(wěn)定不崩說明鎖是生效的如果崩得快基本可以確定鎖沒啟用或者移植有問題。但這種方法有概率性不適合作為唯一判斷依據(jù)我建議以 map 文件為準(zhǔn)。另一個容易忽略的點如果你是自己編譯 picolibc需要確認(rèn) Thread Local Storage 相關(guān)的鏈接腳本和啟動文件是否正確。TLS 需要鏈接器分配.tdata、.tbss段工具鏈和鏈接腳本缺一不可。用現(xiàn)成的 picolibc 發(fā)行版時一般沒問題但如果你是從源碼自定義構(gòu)建或者手工改了鏈接腳本就要留意這個。3.2 實現(xiàn) _lock* 函數(shù)一份可用的 FreeRTOS 移植代碼下面是我在 Cortex-M 平臺上驗證過的 FreeRTOS 移植實現(xiàn)。核心思路是把 picolibc 的_LOCK_T類型直接映射成 FreeRTOS 的SemaphoreHandle_t鎖函數(shù)內(nèi)部操作 FreeRTOS 信號量。/* picolibc_lock_port.c */ #include sys/lock.h #include FreeRTOS.h #include semphr.h typedef SemaphoreHandle_t _LOCK_T; void __lock_init(_LOCK_T *lock) { *lock xSemaphoreCreateRecursiveMutex(); configASSERT(*lock ! NULL); } void __lock_close(_LOCK_T *lock) { if (*lock ! NULL) { vSemaphoreDelete(*lock); *lock NULL; } } void __lock_acquire(_LOCK_T *lock) { /* 遞歸互斥鎖防止 malloc/free 內(nèi)部遞歸路徑死鎖 */ xSemaphoreTakeRecursive(*lock, portMAX_DELAY); } void __lock_release(_LOCK_T *lock) { xSemaphoreGiveRecursive(*lock); } int __lock_try_acquire(_LOCK_T *lock) { return (xSemaphoreTakeRecursive(*lock, 0) pdTRUE) ? 0 : 1; } void __lock_acquire_recursive(_LOCK_T *lock) { xSemaphoreTakeRecursive(*lock, portMAX_DELAY); } void __lock_release_recursive(_LOCK_T *lock) { xSemaphoreGiveRecursive(*lock); }這里用了遞歸互斥鎖而不是普通互斥鎖原因前面說了malloc 內(nèi)部存在同一線程重復(fù)獲取鎖的路徑。如果一個任務(wù)在持有鎖期間被更高優(yōu)先級任務(wù)搶占而高優(yōu)先級任務(wù)也調(diào)用了 lock 相關(guān)的 libc 函數(shù)非遞歸鎖會直接導(dǎo)致死鎖。遞歸互斥鎖雖然比非遞歸鎖慢一點點但在這個場景下是必需的安全設(shè)計。有一點要單獨提醒上面的typedef SemaphoreHandle_t _LOCK_T;是假設(shè)你的 picolibc 允許自定義_LOCK_T類型。實際工程中_LOCK_T的定義位置可能在 picolibc 提供的sys/lock.h里也可能被某些版本固定為結(jié)構(gòu)體類型。你需要先打開 picolibc 源碼里的sys/lock.h確認(rèn)一下。如果它已經(jīng)定義成類似struct _lock_t { void *handle; }的結(jié)構(gòu)體那代碼就要改成往lock-handle里塞句柄。核心邏輯不變變的是類型賦值方式。3.3 編譯鏈接與驗證移植完成后把picolibc_lock_port.c加入工程重編整個固件。鏈接階段重點看有沒有重復(fù)定義錯誤因為 picolibc 自帶的弱符號鎖函數(shù)如果沒被排除你的強符號會和它共存正常情況下弱符號會被忽略不會沖突。如果你同時引用了啟動文件里的其它弱符號也不要慌鏈接器對弱符號的處理規(guī)則是“強符號優(yōu)先弱符號墊底”不會報錯。驗證程序我建議分成兩級。第一級是功能驗證兩個任務(wù)一個瘋狂printf一個瘋狂malloc/free系統(tǒng)跑不崩輸出不亂碼初步判斷鎖生效。第二級是壓力驗證把任務(wù)優(yōu)先級故意設(shè)置為相同的加滿調(diào)度抖動讓臨界區(qū)競爭更激烈連續(xù)跑 24 小時以上觀察有沒有卡死或者硬件異常。這兩個驗證通過移植物才算合格。我實際測試過這個移植層在 Cortex-M4 168MHz 上每次__lock_acquire/__lock_release的完整開銷大約 1 到 3 微秒。這個數(shù)字受 FreeRTOS 內(nèi)核配置影響如果開了configUSE_TRACE_FACILITY或者調(diào)試鉤子開銷會更高。對大部分外設(shè)交互類應(yīng)用來說這個成本可以接受。3.4 性能開銷與優(yōu)化方向如果壓測發(fā)現(xiàn)鎖開銷成為瓶頸有幾個優(yōu)化方向。第一個是縮小臨界區(qū)最容易做也最有效。picolibc 的鎖是加在 malloc 入口和 printf 出口的臨界區(qū)長度由內(nèi)部算法決定這個我們改不了但我們可以減少調(diào)用次數(shù)比如把分散的小 printf 拼接成一條大 printf把頻繁的單對象 malloc 改成批處理內(nèi)存池。第二個優(yōu)化方向是權(quán)衡是否真的需要全局鎖。比如你的系統(tǒng)里只有任務(wù) A 會 malloc其他任務(wù)從來不碰堆那就完全可以把newlib-multithread關(guān)掉省掉鎖的開銷。Picolibc 的鎖是全局的它判斷不了“誰會用堆”只會無差別保護。如果你能確認(rèn)“只有一個任務(wù)觸碰共享資源”關(guān)閉鎖支持就是最徹底的優(yōu)化。第三個方向是研究configUSE_MUTEX_ATTRIBUTES和 FreeRTOS 的優(yōu)先級繼承。普通互斥鎖有優(yōu)先級反轉(zhuǎn)問題低優(yōu)先級任務(wù)持鎖高優(yōu)先級任務(wù)等鎖中優(yōu)先級任務(wù)搶占低優(yōu)先級任務(wù)導(dǎo)致高優(yōu)先級任務(wù)被間接卡住。FreeRTOS 的互斥鎖內(nèi)置優(yōu)先級繼承機制但遞歸互斥鎖的行為略有不同。在強實時場景下你需要評估鎖的持有時間盡量把持鎖操作縮短到微秒級別。4. 常見問題與排查技巧實錄4.1 問題速查表我整理了鎖支持移植和運行中最常見的幾類問題做成速查表。這些問題分散在論壇和 issue 里我匯總成一張表方便你對照排查。現(xiàn)象可能原因排查方法解決方案鏈接錯誤undefined reference to__lock_acquirepicolibc 編譯時未啟鎖支持看構(gòu)建配置確認(rèn)newlib-multithread是否開啟重新編譯 picolibc開啟多線程鎖選項多重定義錯誤多個強符號__lock_acquire移植文件被重復(fù)加入工程檢查編譯日志里的文件列表只保留一個移植源文件malloc 頻繁崩潰HardFault 在 free 函數(shù)鎖未生效堆鏈表競爭查 map 文件中鎖符號來源確認(rèn)庫版本帶鎖移植正確實現(xiàn)printf 輸出亂碼、截斷stdout 緩沖競爭兩個任務(wù)同時 printf 壓測實現(xiàn)鎖函數(shù)或任務(wù)內(nèi)串行化輸出系統(tǒng)跑一段時間后死鎖鎖實現(xiàn)用了非遞歸鎖在死鎖現(xiàn)場查看任務(wù)棧換成遞歸互斥鎖中斷里調(diào)用 printf 導(dǎo)致系統(tǒng)掛起鎖在中斷上下文阻塞檢查中斷是否調(diào)用了 libc 函數(shù)中斷里禁用帶鎖的 libc 調(diào)用4.2 死鎖排查從 printf 卡死到優(yōu)先級反轉(zhuǎn)有一次我們的設(shè)備在現(xiàn)場升級時死機了復(fù)位后抓取調(diào)試信息發(fā)現(xiàn)卡死在__lock_acquire里。當(dāng)時第一個反應(yīng)是鎖沒有釋放但用調(diào)試器把任務(wù)列表打出來發(fā)現(xiàn)占用鎖的任務(wù)處于阻塞狀態(tài)而且它阻塞的原因不是在等這把鎖而是在等一個串口發(fā)送信號量。這就觸發(fā)了典型的優(yōu)先級反轉(zhuǎn)嵌套死鎖任務(wù) A 持有 malloc 的鎖調(diào)用串口發(fā)送等待串口信號量任務(wù) B 在串口中斷服務(wù)里觸發(fā)了一個快速 malloc嘗試獲取 malloc 的鎖但拿不到而串口信號量恰恰需要任務(wù) B 釋放于是形成了 A 等 B、B 等鎖的循環(huán)。這個案例讓我意識到只實現(xiàn)鎖函數(shù)是不夠的還要確保鎖的持有路徑上不要再次等待其他任務(wù)持有的資源。排查死鎖的常規(guī)思路是記錄鎖的持有者和等待鏈。我在工程里加了一個簡單跟蹤每次__lock_acquire進入時記錄當(dāng)前任務(wù)句柄和調(diào)用 PC放在一個環(huán)形緩沖區(qū)里每次__lock_release清掉記錄。死鎖發(fā)生后用調(diào)試器查看緩沖區(qū)直接看到誰在持鎖、誰在等鎖問題定位效率提升很多。這些小工具平時看著多余關(guān)鍵時刻能救命。4.3 性能陷阱鎖函數(shù)實現(xiàn)不當(dāng)導(dǎo)致系統(tǒng)吞吐驟降還有一類問題不是崩潰而是“慢”。日志任務(wù)本來每秒能刷幾百條記錄加了鎖支持之后掉到三四十條。一開始懷疑是鎖本身開銷太大后來測出來根本不是是鎖函數(shù)里用了不該阻塞的調(diào)用路徑。我在移植實現(xiàn)里一開始用的是普通信號量xSemaphoreTake這個函數(shù)在鎖被占用時會觸發(fā)任務(wù)切換和調(diào)度器操作頻繁競爭時開銷被放大。后來改成xSemaphoreTakeRecursive并且確認(rèn)在持有鎖期間不會主動讓出 CPU吞吐才恢復(fù)正常。本質(zhì)上不是函數(shù)多了幾行而是臨界區(qū)里不能做任何可能阻塞的調(diào)用否則整個系統(tǒng)的調(diào)度水位會迅速惡化。另一個性能相關(guān)的問題是中斷環(huán)境。FreeRTOS 的互斥信號量不能在中斷服務(wù)程序里使用因為portMAX_DELAY這類阻塞參數(shù)在中斷上下文是無效的。如果你在中斷里調(diào)用了 printf并且 printf 背后走了帶鎖的 stdio 路徑系統(tǒng)行為就會變得非常詭異有時候返回錯誤有時候直接卡死。我后來在中斷處理里統(tǒng)一改成寫無鎖環(huán)形緩沖區(qū)中斷外再做格式化輸出徹底繞開了這個坑。再補一個經(jīng)驗如果你的工程同時使用多個 RTOS 組件比如 lwIP 或者文件系統(tǒng)棧它們的鎖機制和 picolibc 鎖是完全獨立的兩套東西。picolibc locking support 只管 C 標(biāo)準(zhǔn)庫內(nèi)部網(wǎng)絡(luò)協(xié)議棧的內(nèi)存池、文件系統(tǒng)緩存都有自己的保護機制不要混為一談。我見過有的開發(fā)者以為“開了 picolibc 鎖整個系統(tǒng)就線程安全了”這是誤解。每層資源需要各自的鎖策略。4.4 一個隱藏已久的坑TLS 變量的初始化時機最后說一個比較冷門但影響很大的坑。TLS 模型下errno 是每個線程的線程局部變量但它的初始化依賴 RTOS 創(chuàng)建任務(wù)時為任務(wù)棧預(yù)留的 TLS 空間。如果 FreeRTOS 的configTLS_BLOCK_SIZE配置不對或者任務(wù)創(chuàng)建函數(shù)沒有正確地向任務(wù) TCB 注冊 TLS 塊那線程訪問 errno 時會讀到未初始化的內(nèi)存可能是一個隨機值也可能是別的任務(wù)寫過的殘留數(shù)據(jù)。這個問題不會像崩潰那么明顯它表現(xiàn)為某個任務(wù)偶爾拿到錯誤的 errno且錯誤碼和實際錯誤毫不相關(guān)看起來完全是隨機的。排查時很容易懷疑是業(yè)務(wù)邏輯 bug反復(fù)看代碼也找不到問題。我最后是在一個 FAE 的提示下檢查了任務(wù)創(chuàng)建時 TLS 塊的大小和 picolibc 預(yù)期的 TLS 大小是否匹配才定位到根因。具體做法是在鏈接腳本里記錄.tdata和.tbss的總大小然后把這個值配置到configTLS_BLOCK_SIZE中。你在移植 picolibc 到 FreeRTOS 時這一步千萬不要漏。5. 我的移植經(jīng)驗與收尾建議說實話picolibc 的 locking support 并不復(fù)雜真正的復(fù)雜度在于理解 libc 內(nèi)部的共享資源到底有多少以及你的 RTOS 調(diào)度行為和鎖之間的相互作用。每次換一個 RTOS、換一塊硬件平臺我都建議重新走一遍完整的移植和壓測流程不要想當(dāng)然地拿上一版代碼直接拷過去。就我自己的經(jīng)驗而言有一個比較穩(wěn)的組合配置TLS 保持開啟global-errno 關(guān)閉newlib-multithread開啟鎖底層使用 FreeRTOS 遞歸互斥鎖并且移植文件里只做鎖的獲取和釋放不做任何日志、不做調(diào)試打印。這樣既保證了線程安全又把移植層的不可控因素降到最低。如果你在移植過程中遇到特別怪異的現(xiàn)場優(yōu)先懷疑鎖的持有路徑其次懷疑 TLS 初始化最后再懷疑工具鏈鏈接腳本。這三步走完絕大多數(shù)問題都能水落石出。最后再分享一個我個人的小習(xí)慣在項目早期就把 lock 壓測代碼放進自動化構(gòu)建流程里每次 BSP 變更后跑一遍。這種問題一旦藏在系統(tǒng)深處越晚發(fā)現(xiàn)代價越大早發(fā)現(xiàn)反而最省時間。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
六月丁香VA| 综合性爱网| 狠狠狠狠狠草| 级情九色| www.91AV.com| 天天日天天色| 超碰人人色| 精品久久人妻热| 五月婷婷综合色啪首页| 九九热最新| 五月丁香六月婷婷亚洲| 另类色视频| 五月天另类小说久久小说网| 六月婷婷激情| 5月丁香啪啪啪| AV五月丁香| 9色免费网| 日日夜夜天天| 久久美女五月天| jiujiu热在线视频| 激情五月天激情五月天| 五月婷婷三级| 色欲婷婷五月天丁香| 中文AV网站| 久久A区B区| AV九九| 日日鲁鲁鲁夜夜爽爽狠狠视频97| 人妻久久久久久久 | 久久99热网| 能看的av网站| 99免费| 五月五丁香婷婷| 久久香蕉福利| 成人永久免费视频在线观看| 日日夜夜干| 99热这里只有精品青草| 五月婷精品| 思思热99er在线视频| 久久在线大香蕉| 精品人妻午夜一区二区三区四区 | 婷婷色九月| 99久久婷婷国产综合精品| 久久综合99| 九九热精品在线| 91久热| 一本久道综合99| 级人人91| 超碰中文字幕在线| 天天碰夜夜爽| 婷婷六月激情在线视频| 99热在线这里| 亚洲综合激情五月久久| 亚洲婷婷激情综合激情999精品| 另类小说五月天激情| 日日干五月天婷婷| 97色干| 色色丁香五月| 99成人网一区| 综合五月天亚洲婷婷| 久久性刺激| 丁香五月天激情四射网络不好| 夫妇交换刺激做爰| 中文字幕日本最新乱码视频 | 成人AV在线中文版| 日日操无码| 色婷婷激情五月天丁香| 久久婷婷色综合老司机| 超碰91人人操| 婷婷成人网五月天| 五月婷综合性中心| 五月色婷婷综合| 久噜久噜| 五月丁香九九九综合| 精品99网站| 亚洲XX日本| 色综合色综合色综合高潮| 日本色婷婷综合| 丁香五月天欧美成人| 好好干Av| www.亭亭五月天| 激情婷婷五月| 91久久久久久| 5五月综合网亚洲| 国产黄色av| 99热丁香| 色丁香久综合在线久综合在线观看| 婷婷五月天亚洲色| 91人人操.COM| EEUSS鲁片一区二区三区| 五月婷丁香| 成人做爰A片免费看视频| 69精品人人人人人人人人人| 精品亚洲国产成AV人片传媒| 99热这里只有精品10| 夜夜夜夜做天天天做无码视频| 激情WWW| 蜜臀嫩草| 婷婷婷婷色| 亚洲亚洲人成综合网络| 婷婷五月丁香综合激情| 色婷婷香蕉丁丁网| 精品久久99码| 久久资源综合| 亚洲五月婷婷在线| 婷婷午夜精品久久久| 亚洲精品亚洲人成人网| 婷丁香五月天| 婷婷综合爱| 色久影院| 色444综合网| 五月丁香久久综合| 26uuu日韩| 五月激情小说| 生活片五区| 丁香五月成人论坛| 性爱网五月天| 伊人久久大香线蕉精品| 五月婷婷与六月丁香图片激情| 色婷婷狠狠干芒果TV| 五月婷婷欧美| 婷婷五月丁香香蕉| 99热这里只有精品18| 五月色婷婷综合| 91聚色综合网| 五月婷婷在线网站| 亚洲精品字幕| 亚洲性爱干干| 五月婷婷天| 久久综合五月情| 婷婷色在线观看| 天堂草在线观看| 丁香五月天综合| 色色丁香五月天社区| 激情五婷精品网在线观看网址| 成人性爱无码| 亚洲人成网站999综合| 九九黄色网| 免费不卡狠操美女视频网| 亚洲精品色| 欧美人人女女精品综合五月天| 天天摸,天天爽| 成人五月天丁香婷| 色5月婷婷色| 天天摸天天做天天爱天天爽| 秋霞少妇毛片| 色99网站| 亚洲午夜电影| 久久一热| 婷婷激情丁香五月天综合| 99九九视频| 女同在线9| 丁香5月综合啪啪| 亚洲啪啪啪啪| 久久视频婷婷视频| 久久九九99| 婷婷情色五月天| 五月天六月婷婷| 色.五月综合网| 亚洲夜五月| 97精品综合久久| 一级黄色影片| 全部老头和老太XXXXX| 69久久99精品久久久久| 中文字幕永久免费| 亚洲日本激情| 激情五月丁香婷婷| 六月天无码网址| 五月色综合| 操人91| 丁香婷婷久久 | 婷婷五月亚洲综合| 色婷婷电影网| 亚洲另类久久| 五月丁香少妇| 91欧美| 99热在线爱| 六月婷婷综合| 天天天天色天天天天天干| 久久44| 婷婷五月激情欧美大胆视频| 色色综合热| 色导航色婷婷五月天在线观看| 五月婷天堂视频| 99热网站| 国产五月丁香在线| 丁香五月激情啪啪综合| 91婷婷丁香五月| 色欲九区| 国产高清av黄色看片| 精品99只有。| 91超碰人人操| 激情综合九| 五月激情婷婷丁香天堂| 日日干五月天婷婷| 婷婷五月丁香性爱| 久久xx| 77799热| 九九成人电影婷婷| 久久婷婷色色| 五月开心激情网| 《丁香激情综合久久伊人久久》影视在线观看 -高清预告手机免费播放 -三妹影院 | 五月婷中文娱乐综合| 另类视在线| 新久久五月天激情| 婷婷五月激情综合啪啪| 97人妻碰碰中文无码久热丝袜| 精品九九视频| 久久五月婷| 99热传媒| 亚洲激情网| 停停五月天激情网| 六月丁香五月激情亚洲AV| 超碰国产在线播放| 色七七九九| 欧美久草在线日本一级特黄大片做受9在线观看韩国电影《两个女人》未删减-毛片 | 97色在线观看视频| 五月婷婷丁香五月婷婷| 99热日韩| 伊人玖玖综合| 开心色色五月天综合| 日本婷婷| 天天色域综合网| 五月丁香婷婷基地| 超碰国产在线观看| 无码视频国内精品久久久| 99无码精品| 五月婷婷狠天天色综合| 婷婷五月电影院| 操97在线观看| 可以免费观看的AV| 99热综合| 欧美综合五月丁香六月婷| yazhouzonghesese| 视频免费精品免费精品免费精品免费精品免费精品免费精品免费99 | 国产.亚洲.欧洲视频在线| 可以免费看av网站| 亚洲性视频| 97超碰免费超级在线观看| 99色婷婷视频| 武则天精品久久| 99综合一区| 99久久婷婷国产综合精品青桔| 超碰免费人人肏| 九九热精品| 五月婷婷五月天天| 婷婷五月天深爱| 激情色播| 欧美色狠婷久| www,五月天com| 五月丁香成人| 丁香五月另类色婷婷麻豆| 1024久婷| 青青草Avb在线| 欧美成人在线观看| 我淫我色婷婷五月天激情四射| 91丨九色丨国产打屁股| 日韩另类| 色婷婷五月综合| 综合大香蕉| 激情五月丁香综合网站| 激情五月天伊人av| 色爱综合网| 五月天婷婷爱| 色婷另类| 99精品在线| 91久热| 大香蕉九九| 大香蕉网站,大香蕉综合| 婷婷久久综合久色| 五月天婷婷影院| 五月天婷婷激情小说| 久久久久久天天日天天爱| 亚洲精品国产成人AV在线| 中文字幕成| 丁香婷婷五月份| 欧洲MV日韩MV国产| 色亭亭丁香五月天| 伊人婷婷大香蕉| 影音先锋一区| 亚洲欧洲色色| 婷婷开心六月| 熟女网站久久| 亚洲综合五月天婷婷丁香| 五月丁香综合啪啪| 182无码| 就爱日五月天| 五月丁香精品| 丁香六月婷婷综合麻豆| 精a品a| 五月婷婷婷自由综合| 俺去啦综合网| 色婷婷丁香| 天天插天天插| 五月丁香六月激情| 五月天激情久久| 亚洲超碰在线| 九九精品在线网| 精品人妻伦一二三区久| 五月天精品| 99国产精品久久久久久久久久久 | 日韩av大全| 丁香婷婷在线| 天天日,天天插| 另类图片五月天| 香蕉久久国产AV一区二区| 玖玖综合色区在线观看| 亚洲色婷婷| 天天开心AV色综合婷婷五月天| 99re最新地址| 综合网天天| 六月婷婷色色网| 冬月かえでAV无码播放| 凹凸探花电影| 丁香激情五月少妇| 99久久www| 国产精品久久久久久妇女6080| 婷婷中文综合网| 9999三级片| 2025中文在线视频字幕免费观看| 天天天干夜夜夜操| 日本精品人妻无码77777| 99久久精彩视频| 超碰三级秋霞| 激情五月婷婷她| 国产免费AV网站| 啪啪干伊人婷婷| 九九热精品在线| 天天干,天天日| 97成人在线视频| 99色这里| 丁香五月综合婷婷| 狠狠色网| 情婷婷五月天| 激情五月婷婷| 这里只有精品视频在线| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 五月丁香六月综合基地| 思思国产99| 五月天婷婷基地| 欧美人人女女精品综合五月天| www.sd-xiangsu.cpm| 国产欧洲欧洲精品久久| 99视频热99| 華人性愛AV在線| 色天五月天在线观看视频| 欧美日韩欧美| 色综合爽| 色欲一区二区三区精品A片| www.久久久久久久久久.com| 青青草日本亚洲| 人人摸人人搞| 五月丁香婷草| 色99热| 99色在线视频观看| 久久久久久人妻久久久久久久久久人妻久久久| 欧美黄色一级录像| 九月丁香| 美女五月天| 日本久久婷婷| 色色综合网站| 色五月激情视频在线综合| 亚洲色A| 一本大道熟女人妻中文字幕在线 | 亚洲 在线 另类| 久久久人妻人伦| 丁香五月手机在线| 另类激情综合| 特级西西4444www无码| 97影院一级片| 色婷婷www| 香蕉大综综综合久久| 婷婷亚洲欧美丁香五月| 一级二级色大片| 五月亚洲| 色婷婷综合综合网| 91久久久久久久久18| 98永久精品| 婷婷成人五月天成人文学| 免费V片在线| 激情五月天在线视频| 丁香九月色| 丁香五月综合在线观看| 久久五月婷婷视频| 色狠狠综合网| 九九成人高清视频| 懂色av粉嫩AV蜜臀AV| 天天成人丁香美女AV| 九九精品免费视频99| 久久A区B区| 嘿嘿视频免费看9| 色 色 色综合com| 9久久精品视频| 日本一级特黄大片AAAAA级| 色九月婷婷丁香| 免费观看的婷婷五月视频在线| WWW、日本色丁香、co m| 六月婷婷在线| 丁香五月婷婷啪啪| 九月丁香很很色| 婷婷深爱五月| 超碰97人人操| 青草青草久热这里只有精品| 色欧美一级| 999热在线视频| 午夜婷婷久久| 无码激情AAAAA片-区区| 99只有这里有精品在线视频| 99这里只有精品视频免费| 久久精品99国产精品日本| 丁香五月婷在线观看| 99日在线观看视频| 色五月大香蕉| 日本色五月婷婷| 性爱动图国产麻豆一区二区三区| 亚洲天堂制| 成人网站免费在线播放| 欧美毛片www| 天色综合网| 婷婷丁香六月| 日本爆乳片手机在线播放| 激情小说五月天社区丁香| 色色欧美色色色| www.maotanji.com| 天天爽天天摸| 色婷婷视频| 九月av在线| 狠狠色综合网| 伊人婷婷大香蕉| 婷婷成人五月天一区| 婷婷五月丁香香蕉| 91夫妻视频| 婷婷精品免费久久| 五月天亚洲色| 久色网五月| 成人 视频免费观看网站| 蜜乳av一级av| 91丨九色丨国产打屁股| 人人干99| 精品色| 这里只有精品99www| 激情视频综合| 久久玖玖99| 久久婷婷亚洲| 大香蕉婷婷五月天| 九九性爱网| 婷婷色情小说| 丁香六月啪| 激情综合五月色丁香婷婷 | 亚洲欧州色情在线观看| 日日干综合| 精品成人在线观看| 91久久九色| 五月婷婷亚洲天堂97色婷婷| 色久九| 色在线视频网2025| 久热精品视频| 婷婷五月天美女视频| 五月份婷婷| 中文字幕97超级碰| 性爱五月丁香| 涩九九九九| 久久婷婷网址| Www.Av网9| 偷拍丁香九月激情| 中文字幕日本最新乱码视频| 无码少妇高潮喷水A片免费| 国产激情综合| 婷婷色丁香五月| 日本欧美成人片AAAA| 激情综合色播| 人人草开心五月天| 五月天激情综合网| 久99视频在线观看| 综合色99| 天天天在线观看| 人人干av| 婷婷五月电影| 欧美色色色| 337p大胆噜噜噜噜噜91Av| 在线成人视频免费| 99ri视频| 人妻少妇色综合| 久久久五月天| 超PEN精品在线| 色综合99无码| 视频在线免费观看欧洲乱码| 五月丁香激情综合啪啪| 99久热| 99久久99视频只有精品| 婷婷五月天无码视频| 99热国内| 久久亚洲激情五码| 婷婷丁香五月麻豆| 成人做爰A片免费看视频| 无码少妇高潮喷水A片免费| www婷婷| 成人丁香五月天| 久久婷婷精品| 激情深爱五月天| 91ncom.色| 女人天堂AV| 操人妻AV| 在线观看欧美| 中文字幕+乱码+中文字幕在线观看| 国产精品噜噜在线视频| 亚洲99精品欧美一区| 五月丁香婷婷婷激情爱爱| 久久曰曰| 懂色av粉嫩AV蜜臀AV| 激情熟女网| 在线婷婷| 婷婷五月天激情五月天网站| 激情小说 五月天| 丁香五月婷婷五月天| 日本综合色图| 日本久久色| 久久久婷丁香五月天激情综合| 91碰碰| 六月丁香啪| 天天日天天摸天天| 超碰人人99| www婷婷| BlACKEDRAW视频一区二区| 99热天堂| 甈你aaaaa| 婷婷免费视频| 色爱综合网| 六月丁香婷婷大香蕉| 色婷婷影视| 五月丁香操亭亭网| 99热99色| 久久久色情| 五月婷婷深深的爱| 99在线观看精品视频| 九九热这里只有精品6| 国内精品99| 九九热中文| 狠狠草综合网| 天天噜日日噜综合无码| 九九九九热99超碰| 久久杏爱视频| 日韩黄黄| 色欲婷婷五月天丁香| 久久伊人日日夜夜| 久久免片| 日韩欧美婷婷丁| 亚洲亚洲激情| 思思热视频| 激情婷婷五月在线合集| 亚洲五月天伊人| 99ri精品| 婷婷情色五月| 天插天啪天啪天啪| 99这里只有精品| www.久久久久久久| 亚洲秘 无码一区二区三区妃光/1| 欧美在线干| 日韩色色一区| 婷婷五月综合社区在线| 深爱五月天 开心网| 色五月人妻| 影音先锋91网站在线观看| 久久9热| 四色五月婷婷在线观看| 激情婷婷狠狠干综合| site:pzdcoin.com| 激情五月天婷婷五月天| 骚逼视频一区2区| 五月天色官网| 777精品久无码人妻蜜桃| 俺也去在线久久精品23欧美综合视频网站,丰满人妻一区二区三区在线视频53,丰满 | 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 五月丁香黄色| 9热成人在线视频| 五月丁香亚洲五月| 91无码色色| 久久五月天激情视频| 婷婷五月天伊人| 色综合久| 狠狠综合网| 九玖视频这里只有精品| 国产在这里只有精品| 午夜亚洲国产精品av一区二区| 综合XX网| 色婷婷99| 成人综合网站| 五月婷婷丁香av| 色五月天婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷 | 五月婷婷AV| 超碰成人电影| 亚洲另类在线观看| 伊人久久婷婷五月天激情四射| 99精品在线观看| 精品婷婷五月视| 一本大道嫩草AV无码专区| 综合色99| 99亚洲精品视频在线观看| 五月丁香激情综合| 久久视频这里99| 久Se视频在线观看| 五月丁香啪| 婷婷综合爱| 97碰碰视频| 丁香五月婷婷激情网| 激情色色| 婷婷五月六月丁香| 久久综合这里只有精品1| 日本无码专区| 中文字幕AV在线播放| 一个色的综合| 99ri精品在线| 日本无码专区| 大香蕉久| 久草热视频在线观看| 91精品国产91久久久久青草| 五月天婷婷狂暴白浆| 五月丁香亭亭| 日韩成人精品一区久久久久| 991精品在线视频| 国产做爰视频免费播放| 日韩 中文 欧美| 91啪级电影| 久久人人九| 欧美成人AAA片一区国产精品| 九九無妻| 色性日本| 在线视频色五月| www.久9| 日日夜夜干| 婷婷在线视频| 性生活久久朋友人妻| 久久视屏这里只有久久| 天天综合色丁香| 色五月婷婷7777| 日日夜夜婷婷| 国产亚洲精品久久一区二区三区| 五月丁香婷婷六月天| 激情99热| 色五月大| 午夜色丁香| 欧洲电影在线观看免费版英语版| 日韩成人综合网| 五月丁香六月婷婷网| 美女激情婷婷| 性小说五月天| 丁香六月天AV| 日本a片网址| 五月色色网| 2013AV天堂| 337久久| 五月综合激情婷婷六月色窝| 五月婷婷中文| 综合激情站| 欧美久久网| 色停停五月,在线观看| 思思久热6| 狠狠色五月| 亚色网站小视频| 中文网AV| 激情深爱婷婷网| 99er日韩| 欧美成人无码高清一区二区三区| 九九视频免费| 日日操夜夜爽白洁| 99热 在线观看| 熟女婷婷网站一婷婷五月一丁香婷婷一婷婷激情网 | 99日精品视频| 97色色婷婷五月天| 香蕉综合在线| 黄色aaaaa| 99热综合在线| 这里只有精品视频国产| 亚洲舔观看| 亚洲丁香五月天在线视频| 激情五月激情综合网一级丸片| 丁香六月婷婷一区| 狠狠人人| 五月丁香婷婷人体| 97婷婷五月天| 日韩啊啊啊| 九九综合| 人人播| 丁香六月婷婷久久综合| 精品无码久久久久久久久| 国产XXXX搡XXXXX搡麻豆| 97在线观视频免费观看 | 在线观看亚洲视频影院| 91九色在线| 色噜噜狠狠色综合伊人| 很操日本7| 九九精品在线观看视频6| 色五月婷婷很很操| 97干视频| 色五月婷婷网| 中文字幕高清av| www.色综合.com| 婷婷6月综合网| 天天射天天射一道本日本社区| 丁香五月天视频在线播放| 九九热在线视频观看| www.婷婷.com| 亚洲国产精品SUV| 九色综合五月天婷五月| www.五月婷婷.com| 丁香五月婷婷成人色区| 五月天天天色| 这里只有精品免费视频| 超碰熟女农村在线69| 日日噜噜久久婷婷五月天| 激情伊人| 99热只有这里才是精品| 五月丁香花视频| 九九这里只有精品| 色婷婷丁香社综合| 综合激情五月丁香9999久久精| 国精产品一区二区三区| 99ri在线视频| 丁香婷婷久久五月天| 六月丁香综合| 5月丁香六月婷婷| 日本超碰在线| 五月丁香狠狠爱婷婷综合| 色综合久久88色综合天天99| 婷婷五月中文字幕国产| 97av在线视频| 亚洲精品另类| 日日操夜夜操狠狠操| 开心激情综合| 精品香蕉99久久久久网站 | 九九黄色网| 激情玖玖综合网| 六月99天天婷婷激情综合| 色丁香五月天婷婷| 国产免费一区二区在线A片视频| 欧美成综合在线观看| 丁香婷婷五月天校园春色| 婷婷久久色| 日本不卡一区二区三区| 婷婷五月天久久久| 天天色天天日| 日本大人久久| 婷五月丁香| 三级三久久线久久99久目本WW| 1024成人免费看| 99激情视频热| 婷婷五月天久久| 热久久色| 丁香六月伊人| 色网五月婷婷| 最新激情五月天| 丁香六月婷婷色XXXXX| 丁香六月激情毛片| 久久亚洲激情五码| 久热A片| 色青青视频| 天天色天天操天天射| 欧美三日本三级少妇三99| 天天做天天爱天天综合| 久久婷婷青青草| 久久这里只有精品07 | 影音先锋噜一噜| 99热插| 欧美黄色韩日网| 亚洲图片 丁香婷婷| 丁香久久五月天视频在线观看| www.婷婷六月天| 五月天社区| 五月色网| 超碰在线国产| 99热婷婷| www.日本久久videos| 免费观看亚洲AV片| 国产综合色婷婷精品久久| 影音先锋天天日| 久久色9| 婷婷六月综合基地| 26uuu丁香婷婷五月| 欧美色色色色色色| 97色色婷婷五月天| 亚洲综合视频在线| 久久九九99| 久久精彩视频| 激情婷婷五月天伊人在线观看 | 婷婷色爱| 97艹| 激情五月婷黄版| 久久精品99久久久久久| 婷婷的99视频网站| 色色五月天激情| 人人摸人人| 婷婷五月天激情在线观看| 专区无日本视频高清8| 嫩BBB槡BBBB搡BBBB视频| 综合久久十三| 婷婷五月色播| 超碰99在线观看| 五月天激情小说网| 五月婷婷九| 伊人9草在线观看| 99九九综合久久九九| 伊人激情| 久久久国产精品黄毛片| 丁香六月色婷婷| 丁香五月综合激情啪啪| 五月天.com| 五月综合婷婷网| 色亭亭九月| 99在线观看精品| 五月丁香综合啪啪啪啪啪| 四色五月视频| 亚洲人妻AV| 九热视频在线伦| 五月开心网| 天天激情夜夜干| 色色色色色日韩午夜激情 | 色停停影院五月天| 婷婷五月天黄色| 婷婷天天舔| 秋霞少妇毛片| 九九热这里只有精品6| 久久婷婷欧美| 久久99网址| 国产成人精品123区免费视频| 欧美美美女性色视频| 91偷拍视频| 婷婷五月天天| 五月丁香啪啪啪综合网| 五月综合在线婷婷图片| 久久在线92| 熟妇内谢69XXXXXA片| 色五月综合资源推荐| 丁香女人五月天| 99久热精品在线| 成人做爰高潮A片免费视频| 色色色色五月| 婷婷五月天色丁香| 人妻激情视频| 日本色色影片| 色九网| 丁香婷婷五月基地| 丁香六月婷婷综合色| 丁香狠狠操| 99国产精品白浆在线观看免费| 欧美这里只有精品| 色婷婷五月综合在线| 激情久久综合| 五月亭久久无码视频| 天天日夜夜| 综合另类视频| 99热精品在线免费观看| 天天摸,天天爽| 色综合天堂| 久久久日韩特色特黄AAAA| 99re在线观看| 亭亭色色五月天| 亚洲热综合| 色宗合久久五月婷婷| 久久综合九九| 九热久| 97人妻人人| 丁香五月花影院| AA丁香综合激情| 激情色色| www.91操| 免费黄色AV| 天天色视频| 日韩精品无码99| 色综合天天网| 成人五月天在线观看| 日韩狠狠色| 超碰在线中文字幕| www.五月婷| 亚洲AV日韩AV永久无码网站| 狠狠色 综合色区| 欧美成人精品A片免费一区99| 五月丁香六月婷| 丁香五月激情啪| 色五月大| 午夜成人综合| 操九色| 国产.亚洲.欧洲视频在线| 99热这里只有精品2| 操逼棍操逼| 天天五月情| 综合五月激情网| 色久综合天天做视频| www,五月丁,com| 丁香成人综合| 婷婷激情区| 五六月丁香激情视频| 亚洲色小说在线综合| 伊人日日干| 天天开心AV色综合婷婷五月天| 亚洲色婷婷99一9|| 天天噪夜夜爽| 五月丁香六月婷婷在线播放| A A色色| 五月丁香六月婷婷综合网缴情| 开心五月天激情| 五月天综合图片| 激情婷婷五月| 久久精品4| 色色亚洲视频| 欧美操人| 国产五月视频| 一区=区操屄高清大全av| 久草 tingting| 亚洲AV无码影院| 天天搡日日搡aaaaⅩ| AV激情五月| 丁香五月激情综合在线观看| 精品人妻久久久久久久| 色五XX| pom538精品视频| 91欧美| 国产暴力强伦轩1区二区小说| 在线中文AV| 丁香香蕉婷婷| 第四色激情网| 国产精品-91JQ就要激情网91JQ6.91JQ27.CASA:16888 | 婷婷欧美综合| 婷婷五月天成人网| 另类丁香五月天区图| 99超碰人人| www.zbzhongsen.com| 激情网 五月天| 99热这里只有精品免费观看| 婷婷伊人综合中文字幕| 99激情| 五月久久| 丁香五月,开心五月,成人婷婷| 婷婷五月天xxx| 久久精热| 噜噜噜久久| WWW、日本色丁香、co m| 碰碰女| 69er小视频| 久久综合影院| 成人综合网站| 九九青草热| 亚洲开心激情网| 天天日天天爽| 少妇水多A片太爽了| 丁香五月天激情四射网| 五月天合网| 九九热在线视频观看| www.99热这里只有精品| 噢美99| 久久97| 天天狠狠干| 欧美色频| 午夜丁香综合婷婷| 99在线看片| 91色婷婷综合久久中文字幕二区| 色婷婷五月综合激情中文字幕| 美女激情综合| 深爱五月日韩| 五月色综合| 婷婷五月天AV在| 五月天婷婷在线啪啪视频| 欧美日韩成人在线网| 国产精品久久久久久久久久免费| 99黄色在线视频精品熟女| 人人做人人看人人摸| 亚洲欧美成人在线| 中文字幕+中文在线| 激情网狠狠干| 激情小说视频图片| 大香蕉狠狠爱主页| 丁香五月激情无码视频| 五月丁香综合啪啪| 激情六月天婷婷| 丁香六月激情综合啪啪| 五月开心网| 黄网在线免费观看| 欧美 日韩 成人| 色吊丝99| 六月婷色六月| 在线另类| 91精品综合久久久久久五月丁香| 看片视频在线免费日产在线看| 亚洲V国产V欧美V久久久久久| 黄色AV日韩| 夜色综合网| 色五月婷婷影视| 婷婷五月天电影在线| 天天日天天插| 激情com| 很很干天天干| 久操热线| 色色色国产| 超级碰碰碰97免费| 丁香五月婷婷大香蕉| yiqicaoav| 五月丁香在线婷婷美女| 欧美日韩二区在线| 精品福利911| 中文字幕无码人妻少妇免费视频| 天天曰夜夜爽| 五月天狠狠| 伊人网欧美在线男人天堂五月丁香| 原琪琪色影院| 亚洲成人av在线| 久综合色| 六月丁香av| 亚洲欧美成人在线| 五月丁香色色网| www.超碰| 婷婷在线观看五月天在线视频| 日日.c| 丁香婷婷综合精品六月初| 99性色| 七七九九色色| 免费观看全黄做爰的视频| 色视五月天婷婷| 色综啪啪网| 亚洲夜夜操| 91日综合欧美| 99爱爱网| 色综合久久天天综合网| 99热亚洲精品| 五月丁香婷婷无码A∨| 成人美女网| av中文网站| 欧美性交一区二区三区| 婷婷五月天福利| 国产老熟妇亲子乱对白| 激情五月天丁香| 色色永久| 五月天婷婷婷| 激情图片五月天| 婷婷四色五月| 日日日日日| 99av视频| 五月天婷婷綜合院| 婷婷成人视频| 深爱丁香激情| 五月天之色情综合网| 五月丁香综合啪啪| 色噜噜狠狠色综合日日免费| 综合在线观看99| 玖玖五月| 七七九九色色| 婷婷六月久久| 五月色网| 五月综合六月丁| 丁香五月黄色| 99精品免费视频| 久久人妻系列| 极品色丁香| 国产精产国品一二三在观看| 五月丁香人妻| 亚洲成人在线播放| 狠狠ri| 久操综合| 三十路磁力链接| 婷婷五月中文字幕| 操碰97| 九九热精品视频| 99色色热| 五月天伊人久久| 久色| 五月婷婷在线视频观看| 播五月婷婷开心| 激情婷婷五月综合| 天天弄天天操| 99这里只有精品视频| 五月丁香激情综合啪| 色婷婷另类| 91狠狠综合久久| www.婷婷五月天.com| 亚州精品色情在线观看| 久久婷婷草| 嫩草AV久久伊人妇女超级A | 亚洲成人免费电影| 情色五月天 网站| 天天色色天天| 国产精品日本一区二区在线播放| 亚洲AV成人无码电影| 人人干人人看| 操一操干一干| 五月婷婷之六月丁香| 综合网啪啪| www.久久99精品| 婷婷五月天av| 影音先锋四区| 五月第四色| 深爱婷婷色| 色色综合网站| 久久思思99| 九九久久9 9在线观看| 五月天伊人| 99乱视频| 激情五月婷婷综合| 六月五月婷婷| 99热久久这里只有精品| 中文字幕人妻在线| 性色综合网| 曰本久久女| 无码少妇高潮喷水A片免费| 99日本精品视频热| 婷婷五月综合体验看| 五月婷婷激情四月| www.狠狠色.com| 丁香五月婷婷六月婷婷| XX久久| 91xxxx九色| 色亭亭九月| 东京热五月婷婷| 国产婷婷色综合AV蜜臀AV| 久久精品性爱| 九九色逼| 丁香五月首页| 超碰免费大香蕉| 婷婷五月天激情网| 26uuu精品一区二区| 天天爽天天做| 五月婷婷在线观看| 色久综合天天做视频| 色婷婷六月综合| 性 色 婷婷| 久热2025无码| 26uuu淫色| 99人这里只有精品| 同性gv国产精品一区二区| 五月婷婷开心深| WWW夜夜| 小视频aaa久久久| 丁香六月AV| 欧美va视频不用播放器的va视频网| 久久久思思热| 99热欧| 色亚洲婷婷| 婷婷开心综合人妻小说网址| 69er小视频| 久久aaaa片一区二区| 婷婷丁香综合| 天天日,天天干,天天操| 色播播五月| 大香蕉伊人爱在线| 九九热欧美| 久久久久久久人妻| 国产乱子轮XXX农村| XX色综合| 丁香婷婷浪潮AV久久综合| 墨西哥毛片内射精| 久9精品| 97狠狠色| 亚洲综合视频天天精品| 久久综合热17c| 五月婷六月天| 综合网亚洲| 婷久久| 婷婷六月天| 内射在线CHINESE| 婷婷五月丁香综合瑟瑟| 青青草五月天| www.五月天色色.com| 综合激情伊人影视在线| 天天操天天操| 性爱视频99| 伊人激情啪啪| 五月天丁香| 亚洲色区17| 激情综合九月| 婷婷五月天色综合翘| 狠狠色噜噜| 六月99天天婷婷激情综合| 色色五月婷婷| 丁香五月婷婷综合激情哟哟哟| 激情久久综合网| 日韩色色网| 五月婷婷激情综合视频| 久久丁香五月| 亚洲精品色| 9999综合99综合人| 色婷婷九月| 狠狠色噜噜狠狠狠888了| 欧美日韩成人在线网| 五月天精品| 葵花AV在线| 婷婷丁香射射| 五月丁香五月婷婷在线观看| 91热在线| 丁香六月天婷婷色| 五月婷中文字幕| 亚洲看av的网站| 婷婷五月天激情电影| 国产成人精品亚洲线观看| 97操在线资源| 99惹| 日本爆乳片手机在线播放| 天天日天天操心| 丁香五月天天| 婷婷激情六月中文| 大香蕉网站,大香蕉综合| 免费看欧美成人A片无码| 香蕉婷婷色五月| 丁香婷婷五月六月天| 久99视频| 丁香五月 无码| 色必久悠悠影院| 亚洲无码成人| 人妻免费网站| 五月婷婷内射网| 97色欧美| 九九精品丁香花| 玖玖色资源站| 色射影院| 婷婷丁香黄色| 色五月天成人在线| 婷婷色在线视频| 婷婷丁香六月影视| 另类综合激情| 操比激情五月| AV 3P| 五月天激情婷婷| 琪琪色热色色| 男人的天堂五月丁香| 久久99热这里只频精品6学生| 色五婷婷| 开心五月网| 操B无码视频国语| 77799热| 69精品人人人人| 特级操b片| 久久久久久性爱视频| 日本一级淫| 九九免费视频在线| 99精品久久| 婷婷五月丁香综合激情| 色色色色色综合| 色婷小说| 五月香六月婷| 欧美黄色一级录像| 五月激情视频网| 婷婷五月花| xxxx五月| 天天综合精品| 99色色爰| 天天日夜夜拍| www.色婷婷| 婷婷五月综合在线| 丁香激情网| 丁香五月欧美成人| 日本99在线| 天天色粽合合合合合合合| 99免费青青蜜臀| 五月色影院| 久久99久久久久久久噜噜| 四色99久久| 免费操超碰| 人人干人人看| 丁香六月婷婷开心婷婷网| 婷婷色色婷婷| 日日操夜夜操无码免费| 色色色综合| 色综合久久88色综合天天看| www.婷婷六月天| 狠狠色丁香久久| 婷婷五月AV| 91碰碰碰| 伊人婷婷五月天| 激情五月天综合图片小说网站| 日本人妻伦在线中文字幕 | 最新丁香六月婷婷|