免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

GuruCE與Lauterbach合作:嵌入式調(diào)試與無(wú)侵入覆蓋率分析新范式

GuruCE與Lauterbach合作:嵌入式調(diào)試與無(wú)侵入覆蓋率分析新范式 1. 為什么這條合作消息值得嵌入式開發(fā)者停下來(lái)看一眼作為一名常年和MCU、SoC打交道的嵌入式工程師我對(duì)Lauterbach這個(gè)名字再熟悉不過(guò)。TRACE32幾乎就是高性能調(diào)試工具的代名詞尤其在汽車電子、航空航天這些對(duì)可靠性和實(shí)時(shí)性要求極高的領(lǐng)域它的JTAG/SWD調(diào)試方案幾乎是事實(shí)標(biāo)準(zhǔn)。所以當(dāng)我看到GuruCE and Lauterbach Establish Official Partnership這條消息時(shí)第一反應(yīng)是GuruCE是做什么的它憑什么能進(jìn)入Lauterbach的生態(tài)圈1.1 GuruCE是誰(shuí)不是一句做工具的就能概括準(zhǔn)確地說(shuō)GuruCE是一家專注于嵌入式軟件運(yùn)行時(shí)質(zhì)量分析的工具廠商。它的定位并不在調(diào)試本身而是站在調(diào)試數(shù)據(jù)的下游把從調(diào)試器、Trace采集器里拿到的原始執(zhí)行信息轉(zhuǎn)換成工程師能夠直接用于決策的質(zhì)量結(jié)論。更直白一點(diǎn)Lauterbach負(fù)責(zé)告訴你程序跑到了哪里、出了什么錯(cuò)而GuruCE負(fù)責(zé)告訴你這段程序在真實(shí)目標(biāo)上執(zhí)行得怎么樣、覆蓋率夠不夠、有沒(méi)有隱藏的時(shí)序風(fēng)險(xiǎn)。我不太想把GuruCE簡(jiǎn)單歸類為覆蓋率工具或性能分析工具因?yàn)樗暮诵哪芰ζ鋵?shí)是通過(guò)合并多種運(yùn)行時(shí)數(shù)據(jù)源對(duì)程序行為做交叉驗(yàn)證。你可以理解為它在調(diào)試工具之上加了一層質(zhì)量分析大腦。過(guò)去這類分析功能往往由大廠自研或者靠多個(gè)獨(dú)立工具手工拼湊而GuruCE做的事情是把它們結(jié)構(gòu)化、流程化讓開發(fā)者在日常迭代中就能順手完成。1.2 Lauterbach在調(diào)試工具鏈中的地位任何做過(guò)嵌入式開發(fā)的人都知道調(diào)試器和編譯器一樣屬于平時(shí)不太起眼、關(guān)鍵時(shí)刻要命的基礎(chǔ)設(shè)施。Lauterbach TRACE32從1979年做到今天能夠在全球汽車電子供應(yīng)鏈里扎根靠的絕對(duì)不只是品牌。它的核心壁壘在兩點(diǎn)一是對(duì)芯片架構(gòu)的覆蓋極廣從ARM、RISC-V到各種專有DSP核都有深度適配二是它的實(shí)時(shí)Trace能力也就是通過(guò)硬件調(diào)試接口采集CPU執(zhí)行指令流、數(shù)據(jù)訪問(wèn)、時(shí)間戳等信息做到對(duì)目標(biāo)系統(tǒng)零干擾或極低干擾。正是因?yàn)檫@種硬核形象Lauterbach在選擇合作伙伴時(shí)相當(dāng)謹(jǐn)慎。它不會(huì)隨便跟一個(gè)工具廠商簽個(gè)兼容性聲明就完事而是要求對(duì)方真正理解底層調(diào)試協(xié)議、Trace數(shù)據(jù)格式、目標(biāo)系統(tǒng)的實(shí)時(shí)約束。所以GuruCE能獲得官方合作伙伴身份這件事本身就傳遞了一個(gè)信號(hào)GuruCE的分析能力已經(jīng)通過(guò)了Lauterbach在技術(shù)層面的檢驗(yàn)可以放心地推薦給TRACE32用戶。1.3 官方合作伙伴和普通工具互相兼容有什么本質(zhì)區(qū)別這里我多說(shuō)一句因?yàn)楹芏喙こ處煂?duì)兼容和官方合作的差別沒(méi)什么概念。普通的工具兼容往往是A工具導(dǎo)出一個(gè)文件B工具再導(dǎo)入格式對(duì)不對(duì)、信息丟失不丟失全靠雙方自覺(jué)出了問(wèn)題兩邊互相推諉是常事。而官方合作伙伴關(guān)系通常意味著三個(gè)層面的對(duì)齊技術(shù)上雙方在API、數(shù)據(jù)格式、協(xié)議細(xì)節(jié)上做了聯(lián)調(diào)GuruCE可以直接讀取TRACE32的運(yùn)行時(shí)數(shù)據(jù)而不是靠CSV或日志文件這種間接翻譯。支持上兩家公司的技術(shù)支持團(tuán)隊(duì)會(huì)建立直接的反饋通道遇到問(wèn)題不會(huì)出現(xiàn)廠商A說(shuō)找廠商B、廠商B說(shuō)找廠商A的死循環(huán)。版本上新的芯片調(diào)試支持和新的分析方法會(huì)同步演進(jìn)而不是各做各的等到用戶發(fā)現(xiàn)時(shí)已經(jīng)斷層。對(duì)項(xiàng)目團(tuán)隊(duì)來(lái)說(shuō)這種深度綁定帶來(lái)的直接價(jià)值是工具鏈的風(fēng)險(xiǎn)可控了。你在做方案選型時(shí)不需要自己當(dāng)膠水工程師去驗(yàn)證兩個(gè)工具之間到底能不能配合好這個(gè)臟活累活已經(jīng)有人替你干完了。2. 聯(lián)手背后嵌入式軟件質(zhì)量分析的最大痛點(diǎn)是什么聊完背景咱們進(jìn)入正題。兩家公司為什么要在現(xiàn)在這個(gè)時(shí)間點(diǎn)建立合作我的判斷是嵌入式軟件質(zhì)量分析領(lǐng)域正卡在一個(gè)瓶頸上不是沒(méi)有工具而是工具和工具之間缺一座橋。這座橋的左邊是調(diào)試工具右邊是質(zhì)量分析而GuruCE和Lauterbach正在試圖把橋徹底打通。2.1 傳統(tǒng)覆蓋率分析的侵入式難題做過(guò)功能安全認(rèn)證的人對(duì)代碼覆蓋率應(yīng)該不陌生。ISO 26262的ASIL D等級(jí)明確要求結(jié)構(gòu)覆蓋率分析必須達(dá)到特定標(biāo)準(zhǔn)比如語(yǔ)句覆蓋率100%、分支覆蓋率100%、MC/DC覆蓋率按等級(jí)要求執(zhí)行。理論很清晰但落地的時(shí)候問(wèn)題就來(lái)了覆蓋率數(shù)據(jù)怎么采集最常見(jiàn)的做法是插樁。編譯器在源代碼或目標(biāo)代碼里插入探針程序每執(zhí)行到一個(gè)插樁點(diǎn)就記錄一次。這個(gè)方法成熟、簡(jiǎn)單、便宜但它有一個(gè)原罪——侵入性。探針本身會(huì)占用CPU時(shí)間、增加代碼體積、改變內(nèi)存布局這些都會(huì)讓程序的實(shí)際行為偏離真實(shí)情況。對(duì)于一秒鐘控制幾千轉(zhuǎn)電機(jī)的FOC算法一個(gè)額外的函數(shù)調(diào)用都可能讓PWM波形出現(xiàn)幾個(gè)微秒的抖動(dòng)而這個(gè)抖動(dòng)在繼電器和機(jī)械結(jié)構(gòu)上可能根本看不出來(lái)但在示波器上會(huì)非常明顯。我在之前的項(xiàng)目里就栽過(guò)跟頭。某次給客戶做電機(jī)控制器的覆蓋率分析用的是插樁方案測(cè)出來(lái)的結(jié)果倒是漂亮得很覆蓋率84%但客戶拿回去批量測(cè)試時(shí)發(fā)現(xiàn)有幾臺(tái)設(shè)備的啟動(dòng)時(shí)序偶發(fā)異常。最后排查了大半個(gè)月才定位到是插樁探針改變了中斷響應(yīng)時(shí)間。從那以后我對(duì)侵入式分析工具就多了一層戒心。2.2 時(shí)序漂移插樁方案對(duì)實(shí)時(shí)系統(tǒng)的影響時(shí)序漂移這個(gè)問(wèn)題比覆蓋率本身的準(zhǔn)確性更隱蔽也更危險(xiǎn)。因?yàn)槌绦蛟诓鍢吨笠廊荒苓\(yùn)行大部分功能測(cè)試也不會(huì)失敗問(wèn)題會(huì)潛伏到系統(tǒng)集成甚至量產(chǎn)階段才爆發(fā)。而基于Trace的覆蓋率分析也就是利用調(diào)試硬件的Trace接口采集程序執(zhí)行路徑則完全不同它的原理決定了覆蓋率數(shù)據(jù)是監(jiān)聽來(lái)的而不是參與進(jìn)來(lái)的。TRACE32的Core Trace接口能在CPU內(nèi)核運(yùn)行的同時(shí)把指令指針的變化、數(shù)據(jù)訪問(wèn)地址等關(guān)鍵信息以極低的開銷很多芯片設(shè)計(jì)上是零等待周期輸出到專門的Trace緩沖區(qū)內(nèi)。GuruCE拿到這段Trace數(shù)據(jù)之后在主機(jī)端做離線分析就能重建出程序到底執(zhí)行了哪些代碼路徑。整個(gè)過(guò)程目標(biāo)系統(tǒng)的代碼一行沒(méi)改運(yùn)行時(shí)的狀態(tài)也幾乎沒(méi)有被擾動(dòng)。這就解決了一個(gè)大問(wèn)題覆蓋率數(shù)據(jù)開始反映真實(shí)世界的執(zhí)行情況而不是實(shí)驗(yàn)室條件下的執(zhí)行情況。在安全認(rèn)證審查中這種數(shù)據(jù)的可信度完全不同。審查員如果看到你的覆蓋率報(bào)告是用侵入式工具產(chǎn)生的往往會(huì)追著問(wèn)探針是怎么布的對(duì)系統(tǒng)實(shí)時(shí)性有沒(méi)有影響你有沒(méi)有做對(duì)比實(shí)驗(yàn)而基于Trace的分析可以直接用硬件時(shí)序數(shù)據(jù)回應(yīng)這些質(zhì)疑。2.3 從調(diào)試到分析的工作流斷裂再來(lái)說(shuō)說(shuō)工作流。過(guò)去典型的嵌入式項(xiàng)目里調(diào)試和質(zhì)量分析是兩個(gè)獨(dú)立的環(huán)節(jié)。工程師先在TRACE32里斷點(diǎn)單步、看變量、找bug等代碼改得差不多了再開一個(gè)覆蓋率工具或者性能分析工具把固件燒進(jìn)去重新跑一遍測(cè)試。這個(gè)流程最大的問(wèn)題是你調(diào)試時(shí)用的環(huán)境和分析時(shí)用的環(huán)境往往不是同一個(gè)狀態(tài)。有些bug只在特定的輸入序列、特定的時(shí)序條件下出現(xiàn)你調(diào)試時(shí)能復(fù)現(xiàn)但一換成打開覆蓋率工具的構(gòu)建版本可能就復(fù)現(xiàn)不出來(lái)了。原因可能是插樁改變了時(shí)序也可能是優(yōu)化等級(jí)變了甚至可能是鏈接腳本里地址布局變了。這種不確定性是嵌入式開發(fā)里最消磨耐心的東西之一。GuruCE和Lauterbach的整合思路就是在同一個(gè)環(huán)境下同時(shí)完成調(diào)試和采集。你直接在TRACE32里調(diào)試調(diào)試的同時(shí)Trace數(shù)據(jù)就在后臺(tái)記錄著分析完這個(gè)bug順手就能看這段運(yùn)行的覆蓋率、時(shí)序、調(diào)用路徑。不需要重新構(gòu)建、不需要換工具、不需要復(fù)現(xiàn)第二次。對(duì)于那種千載難逢的偶發(fā)bug這個(gè)能力幾乎是救命級(jí)別的因?yàn)閎ug跑了第一次就沒(méi)了如果你當(dāng)時(shí)沒(méi)記錄下來(lái)后面可能幾個(gè)月都等不到第二次。3. 技術(shù)互補(bǔ)的邏輯TRACE32的Trace數(shù)據(jù)遇上GuruCE的分析算法前面說(shuō)了痛點(diǎn)這一節(jié)來(lái)拆解這兩家到底是怎么互補(bǔ)的。不是簡(jiǎn)單地把兩份報(bào)告放在一起就算整合真正的價(jià)值在于數(shù)據(jù)層面的原生互通和算法層面的深度融合。3.1 TRACE32的實(shí)時(shí)Trace采集能力先說(shuō)說(shuō)Lauterbach這邊能提供什么。TRACE32本身的調(diào)試功能已經(jīng)非常強(qiáng)大但它的Trace才是最核心的技術(shù)護(hù)城河之一。不同芯片的Trace實(shí)現(xiàn)差異很大ARM的CoreSight、RISC-V的N-trace、Infineon的MCDS各有各的規(guī)格和限制。Lauterbach的厲害之處在于它把不同架構(gòu)的Trace接口都抽象成了一整套統(tǒng)一的數(shù)據(jù)視圖開發(fā)者不需要關(guān)心底層是誰(shuí)家的調(diào)試硬件只需要知道我能從TRACE32里導(dǎo)出什么格式的Trace數(shù)據(jù)。按照公開的技術(shù)資料TRACE32的Trace數(shù)據(jù)里可以包含指令地址、數(shù)據(jù)地址、數(shù)據(jù)值、時(shí)間戳、任務(wù)ID、中斷嵌套層級(jí)等信息。有些高檔的Trace硬件支持連續(xù)記錄幾秒甚至幾十秒的完整執(zhí)行流注意是每一行機(jī)器指令級(jí)別。這份數(shù)據(jù)量大得驚人1秒的Trace動(dòng)輒幾百M(fèi)B靠人工看是根本不可能的必須靠程序來(lái)做自動(dòng)分析。3.2 GuruCE的分析側(cè)重覆蓋率、邊界行為與時(shí)序那么GuruCE拿到這些Trace數(shù)據(jù)之后到底分析什么呢根據(jù)它在嵌入式質(zhì)量領(lǐng)域的定位我理解核心是三個(gè)方向覆蓋率分析把Trace中的指令地址映射到源代碼行計(jì)算出語(yǔ)句覆蓋、分支覆蓋、MC/DC覆蓋等指標(biāo)。因?yàn)橛姓鎸?shí)的執(zhí)行路徑和時(shí)間戳還能區(qū)分出哪些覆蓋是在哪個(gè)任務(wù)上下文里達(dá)成的。邊界行為分析通過(guò)數(shù)據(jù)訪問(wèn)Trace檢測(cè)數(shù)組越界、棧溢出、未初始化變量讀取這類潛在的運(yùn)行時(shí)錯(cuò)誤。這種分析比靜態(tài)分析工具更接近真實(shí)執(zhí)行情況。時(shí)序分析利用時(shí)間戳重建任務(wù)執(zhí)行時(shí)間線分析任務(wù)的最壞執(zhí)行時(shí)間、中斷響應(yīng)延遲、任務(wù)切換抖動(dòng)等。在功能安全領(lǐng)域這些數(shù)據(jù)是確定系統(tǒng)調(diào)度是否可靠的重要依據(jù)。這些分析維度單獨(dú)拿出來(lái)都不算新鮮但把它們和無(wú)侵入采集結(jié)合起來(lái)就產(chǎn)生了質(zhì)變。過(guò)去你只能信任實(shí)驗(yàn)室里精心構(gòu)造的測(cè)試用例因?yàn)榍秩胧焦ぞ邲](méi)法在真實(shí)工況下長(zhǎng)期運(yùn)行。而現(xiàn)在你可以讓設(shè)備在客戶現(xiàn)場(chǎng)真實(shí)運(yùn)行一周把Trace數(shù)據(jù)定期導(dǎo)出來(lái)做分析看看覆蓋率有沒(méi)有變化、有沒(méi)有出現(xiàn)測(cè)試實(shí)驗(yàn)室里沒(méi)見(jiàn)過(guò)的執(zhí)行路徑。3.3 整合后的一條典型工作流結(jié)合場(chǎng)景描述為了讓你有更直觀的感受我結(jié)合一個(gè)具體場(chǎng)景來(lái)描述整合后的工作流長(zhǎng)什么樣。假設(shè)你在調(diào)試一個(gè)車載控制器的CAN通信模塊客戶反饋說(shuō)車輛在特定溫度區(qū)間行駛一段時(shí)間后CAN報(bào)文會(huì)出現(xiàn)偶發(fā)的延遲。你在實(shí)驗(yàn)室里怎么都復(fù)現(xiàn)不了傳統(tǒng)手段基本無(wú)能為力。有了GuruCE和TRACE32的整合方案你可以這樣做在TRACE32里正常連接目標(biāo)板配置好Trace采集的觸發(fā)條件比如檢測(cè)到CAN發(fā)送緩沖區(qū)的填充率超過(guò)閾值時(shí)開始記錄。讓固件按照客戶的工況長(zhǎng)時(shí)間運(yùn)行Trace數(shù)據(jù)持續(xù)寫入大容量的Trace存儲(chǔ)器。運(yùn)行結(jié)束后把整個(gè)Trace數(shù)據(jù)直接加載進(jìn)GuruCE的分析環(huán)境不需要做任何格式轉(zhuǎn)換。在GuruCE里查看CAN報(bào)文延遲時(shí)段的任務(wù)調(diào)度情況看具體是哪個(gè)中斷搶占了CAN發(fā)送任務(wù)延遲了多長(zhǎng)時(shí)間。再切換到覆蓋率視圖確認(rèn)這個(gè)場(chǎng)景下的代碼路徑是否和預(yù)期一致有沒(méi)有走了一些平時(shí)不走的異常分支。整個(gè)過(guò)程全部發(fā)生在同一套工具鏈里不需要重新燒錄、不需要插樁、不需要切換軟件環(huán)境。最關(guān)鍵在于這個(gè)分析是在真實(shí)運(yùn)行的數(shù)據(jù)上做的而不是在模擬環(huán)境或測(cè)試實(shí)驗(yàn)室里做的。4. 這次合作會(huì)給實(shí)際項(xiàng)目帶來(lái)哪些變化按場(chǎng)景拆解合作消息聽起來(lái)很美好但對(duì)不同領(lǐng)域的開發(fā)者來(lái)說(shuō)實(shí)際價(jià)值是不一樣的。我按幾個(gè)典型的應(yīng)用場(chǎng)景來(lái)拆解一下你看看自己是屬于哪一類。4.1 汽車電子功能安全認(rèn)證材料的短板補(bǔ)上了汽車電子是我覺(jué)得受益最大的領(lǐng)域。原因很簡(jiǎn)單ISO 26262對(duì)覆蓋率、時(shí)序、故障注入等的要求是全生命周期覆蓋的而且認(rèn)證審查極其嚴(yán)格。過(guò)去很多團(tuán)隊(duì)拿覆蓋率數(shù)據(jù)的方式還是評(píng)估版測(cè)試插樁這個(gè)方案應(yīng)付低等級(jí)還好到了ASIL D就會(huì)發(fā)現(xiàn)兩個(gè)致命問(wèn)題一是插樁覆蓋率數(shù)據(jù)很難證明在目標(biāo)硬件上真實(shí)運(yùn)行審查員會(huì)質(zhì)疑探針對(duì)時(shí)序的影響到底有多大你無(wú)法量化地回答。 二是測(cè)試場(chǎng)景和實(shí)際運(yùn)行場(chǎng)景之間存在差異現(xiàn)場(chǎng)問(wèn)題反饋到你這里時(shí)你很難還原客戶那邊的運(yùn)行狀態(tài)自然也就無(wú)從分析。GuruCE和Lauterbach的組合正好把這兩個(gè)短板補(bǔ)齊了。無(wú)侵入采集讓覆蓋率數(shù)據(jù)可以被審查員信任因?yàn)樵糡race數(shù)據(jù)就在那里硬件時(shí)序信息沒(méi)法造假。同時(shí)真實(shí)工況下記錄的Trace數(shù)據(jù)可以直接作為認(rèn)證材料證明你的系統(tǒng)在實(shí)際運(yùn)行中沒(méi)有出現(xiàn)未覆蓋的危險(xiǎn)路徑。這對(duì)認(rèn)證周期和溝通成本都是實(shí)打?qū)嵉母纳啤?.2 工業(yè)控制與電機(jī)驅(qū)動(dòng)偶發(fā)時(shí)序問(wèn)題的定位效率再來(lái)說(shuō)工業(yè)控制和電機(jī)驅(qū)動(dòng)。這個(gè)領(lǐng)域的工程師最頭疼的問(wèn)題不是功能邏輯不對(duì)而是偶爾不對(duì)。比如某臺(tái)變頻器在負(fù)載階躍變化時(shí)出現(xiàn)過(guò)壓保護(hù)某臺(tái)伺服驅(qū)動(dòng)器在長(zhǎng)時(shí)間運(yùn)行后位置精度出現(xiàn)微小漂移這些問(wèn)題的共同點(diǎn)是頻率低、持續(xù)時(shí)間短、復(fù)現(xiàn)條件苛刻。用傳統(tǒng)方式排查這類問(wèn)題基本是廣撒網(wǎng)加日志、加斷點(diǎn)、加示波器通道希望能在問(wèn)題發(fā)生的瞬間抓到異常。但日志和斷點(diǎn)本身就會(huì)改變時(shí)序很多時(shí)候你加了監(jiān)控手段問(wèn)題反而不出現(xiàn)了。而基于Trace的整合分析方案可以做到平時(shí)不干預(yù)系統(tǒng)只在Trace緩沖區(qū)里持續(xù)記錄等到故障發(fā)生后再回溯分析故障發(fā)生前的案發(fā)現(xiàn)場(chǎng)。我曾經(jīng)維護(hù)過(guò)一個(gè)老項(xiàng)目底層用的還是40MHz的MCU外部總線上掛著多個(gè)外設(shè)。有一次現(xiàn)場(chǎng)反饋說(shuō)信號(hào)采集偶爾會(huì)跳變我在調(diào)試器里掛了半天沒(méi)復(fù)現(xiàn)。如果當(dāng)時(shí)就有這種無(wú)侵入Trace分析環(huán)境我大概率能在幾分鐘內(nèi)定位到是某兩個(gè)外部中斷的優(yōu)先級(jí)配置在特定時(shí)序下出現(xiàn)了競(jìng)爭(zhēng)而不是靠猜測(cè)和反復(fù)試驗(yàn)。4.3 對(duì)中小團(tuán)隊(duì)來(lái)說(shuō)這降低了工具鏈試錯(cuò)成本可能有人會(huì)想Lauterbach TRACE32本來(lái)就是高價(jià)工具再疊加一個(gè)GuruCE是不是只有大廠才用得起這個(gè)擔(dān)憂有一定道理但從另一個(gè)角度看中小團(tuán)隊(duì)反而是這類整合的最大受益者。理由很簡(jiǎn)單中小團(tuán)隊(duì)通常沒(méi)有專門的工具鏈團(tuán)隊(duì)沒(méi)有能力自己開發(fā)調(diào)試器與覆蓋率工具之間的接口。兩個(gè)商業(yè)化工具要真正配合好往往需要相當(dāng)深的技術(shù)積累這對(duì)小團(tuán)隊(duì)來(lái)說(shuō)幾乎是不可能完成的任務(wù)?,F(xiàn)在官方已經(jīng)把集成做完了中小團(tuán)隊(duì)可以直接站在這個(gè)高度上使用省下了大量膠水開發(fā)和聯(lián)調(diào)踩坑的時(shí)間。另外對(duì)做方案評(píng)估的團(tuán)隊(duì)來(lái)說(shuō)現(xiàn)在多了一個(gè)技術(shù)維度來(lái)對(duì)比不同的調(diào)試工具選擇。如果GuruCE只支持TRACE32那這個(gè)數(shù)據(jù)格式的綁定關(guān)系本身就是一種決策依據(jù)你要是打算用TRACE32做調(diào)試那順手就能獲得一套完整的質(zhì)量分析能力不用再單獨(dú)評(píng)估覆蓋率工具和性能工具了。5. 作為工具鏈?zhǔn)褂谜呶业呐袛嗪筒僮鹘ㄗh最后這部分我從一個(gè)資深使用者的角度說(shuō)說(shuō)我自己的判斷以及如果你所在的團(tuán)隊(duì)打算接入這套生態(tài)應(yīng)該怎么入手、注意什么。5.1 我建議重點(diǎn)關(guān)注哪幾個(gè)集成能力既然是官方合作肯定不只是能讀文件那么簡(jiǎn)單。我建議你在評(píng)估或使用時(shí)重點(diǎn)確認(rèn)這幾個(gè)集成深度是否支持實(shí)時(shí)數(shù)據(jù)流傳輸還是只能離線導(dǎo)入導(dǎo)出如果能實(shí)時(shí)傳輸意味著你可以在調(diào)試的同時(shí)動(dòng)態(tài)查看分析結(jié)果。覆蓋率分析是否支持多核和異構(gòu)處理器現(xiàn)在很多車規(guī)芯片都是多核架構(gòu)甚至大小核Trace數(shù)據(jù)要能按核區(qū)分否則覆蓋率報(bào)告會(huì)混在一起無(wú)法區(qū)分。時(shí)序分析的時(shí)間戳分辨率是多少如果你的系統(tǒng)跑在200MHz以上時(shí)間戳精度至少要達(dá)到納秒級(jí)否則分析結(jié)果沒(méi)有參考價(jià)值。是否支持自定義觸發(fā)條件比如能不能按指定變量值、指定函數(shù)調(diào)用時(shí)機(jī)來(lái)觸發(fā)Trace的記錄這直接影響你針對(duì)特定場(chǎng)景做定向分析的能力。這些不僅是功能參數(shù)更是決定這個(gè)工具鏈?zhǔn)欠衲苷嬲谌肽悻F(xiàn)有開發(fā)流程的關(guān)鍵。5.2 上手前需要補(bǔ)哪些基礎(chǔ)工具再好也得上手才能變成生產(chǎn)力。根據(jù)我過(guò)去集成這類工具的經(jīng)驗(yàn)建議你在正式投入使用前先做三件事第一花時(shí)間理解你的芯片平臺(tái)的Trace能力。不同架構(gòu)的Trace硬件能力差異很大比如有些芯片的Trace只覆蓋指令執(zhí)行不包含數(shù)據(jù)訪問(wèn)有些芯片的Trace緩沖區(qū)只有幾KB無(wú)法抓取長(zhǎng)時(shí)間運(yùn)行的數(shù)據(jù)。這些限制直接決定了GuruCE能分析到什么程度。第二先在你最熟悉的測(cè)試用例上跑通全流程再鋪開到項(xiàng)目做完整驗(yàn)證。我見(jiàn)過(guò)太多團(tuán)隊(duì)一上來(lái)就在復(fù)雜系統(tǒng)上部署新工具結(jié)果在排查工具本身的問(wèn)題上耗了幾個(gè)星期。一定要先用一個(gè)小范圍、確定性的測(cè)試用例驗(yàn)證數(shù)據(jù)是可靠的再逐步放大。第三搭建一個(gè)Trace數(shù)據(jù)的歸檔機(jī)制。Trace文件體積非常大動(dòng)輒幾個(gè)GB如果不建立統(tǒng)一的存儲(chǔ)和命名規(guī)范兩周之后你就不知道該用哪份數(shù)據(jù)來(lái)分析什么了。建議按時(shí)間戳、構(gòu)建版本、測(cè)試場(chǎng)景三個(gè)維度來(lái)組織歸檔。5.3 幾個(gè)容易踩坑的注意事項(xiàng)再分享幾個(gè)我在實(shí)際使用類似工具時(shí)踩過(guò)的坑供你參考。一個(gè)是Trace深度和緩沖區(qū)大小的問(wèn)題。很多工程師以為Trace只要開著就能一直錄其實(shí)很多芯片的Trace緩沖區(qū)是有限的錄滿了之后會(huì)停止或者溢出。如果只開著默認(rèn)配置你很可能在觸發(fā)條件到來(lái)之前緩沖區(qū)就被刷掉了。所以一定要根據(jù)你的分析目標(biāo)預(yù)先想好觸發(fā)條件讓Trace記錄只保留你關(guān)心的那一段。另一個(gè)是優(yōu)化等級(jí)的問(wèn)題。Trace數(shù)據(jù)記錄的是編譯后的機(jī)器指令地址如果你用-O2甚至-O3優(yōu)化后去對(duì)比源代碼覆蓋率可能會(huì)看到一些奇怪的現(xiàn)象某些源程序行被合并了某些變量被優(yōu)化掉了覆蓋率報(bào)告看起來(lái)和代碼對(duì)不上。這并不是工具的問(wèn)題而是優(yōu)化編譯的固有現(xiàn)象。所以做覆蓋率分析時(shí)需要明確你的驗(yàn)證目標(biāo)如果是為了功能安全認(rèn)證可能需要用帶調(diào)試信息的優(yōu)化構(gòu)建來(lái)做映射如果只是為了日常分析-O0的構(gòu)建會(huì)更直觀一些。還有一個(gè)很容易忽略的點(diǎn)Trace采集雖然對(duì)目標(biāo)系統(tǒng)侵入極小但不是零影響。Trace本身要占用調(diào)試接口的帶寬如果芯片的調(diào)試時(shí)鐘頻率較低Trace數(shù)據(jù)可能無(wú)法實(shí)時(shí)傳輸這時(shí)候會(huì)需要CPU暫停來(lái)等待Trace緩沖區(qū)的排空。這個(gè)停頓在高負(fù)載情況下有可能會(huì)影響系統(tǒng)行為。所以拿到分析結(jié)果時(shí)最好多留個(gè)心眼確認(rèn)這次采集過(guò)程本身有沒(méi)有引入額外的時(shí)序擾動(dòng)。我自己的使用體會(huì)是這類調(diào)試分析一體化的工具鏈最大的價(jià)值不在于某一個(gè)單一功能有多強(qiáng)而在于它讓整個(gè)分析過(guò)程變得自然了。你不必再先假裝程序沒(méi)問(wèn)題然后再事后驗(yàn)證你可以在排查問(wèn)題的同時(shí)順便把質(zhì)量數(shù)據(jù)也采集了。這種工作方式的轉(zhuǎn)變對(duì)團(tuán)隊(duì)的質(zhì)量文化是有潛移默化影響的。等到你習(xí)慣了在調(diào)試的同時(shí)順手拿到覆蓋率報(bào)告和時(shí)序報(bào)告再回到傳統(tǒng)工具鏈會(huì)明顯覺(jué)得拖沓。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
欧美色必爱| 五月激情天| 色婷六月| 日韩在线看AV| 婷婷综合网站| 色区久久| 五月天综合在线观看视频| 非洲一级AV| 亚洲无AV在线中文字幕 | 玖玖资源网站最新站| 久久国产成人9999久久久久| 六月婷婷色综合| 五月天狠狠干| 玖玖99福利| 玖玖婷婷五月天毛片| 大香蕉九九| 五月天成人手机在线视频| 黄久久久| 日91高清无玛| 五月婷免费视频| 另类天堂| 99自拍视频在线| 婷婷五月激情小说| 婷婷五月天伊人网| 久久婷婷色五月| 色婷婷文字幕| 狠狠久久婷婷| 色五月自偷自拍婷婷婷婷| 五月天婷婷在线视频| 天天操屄网| 亚洲色涩视频| 天天干,天天舔| 亚洲视频在线网| 国产69久久久欧美黑人A片| 日本色色视频| 亚洲9久久精品| 思思久久精品| 婷婷久久综合久| 亚洲无码色色| 婷婷五月天色播| 丁香五月成人在线| 成人性爱无码| 5月丁香婷婷激情网| 婷婷五月天在线观看av| 色五月婷婷婷婷| 丁香婷婷激情五月色| 久久99精品视频| 狠狠色噜噜狠狠亚洲A∨| 国产精产国品一二三在观看| AV在线免费观看不卡| 天天操夜夜操| 午夜69成人做爰视频| 夜夜干天天操| 欧美大片| 九九久久玖玖爱| 真实的国产乱XXXX在线91| 精品亚洲国产成AV人片传媒| 亚洲乱码日产精品BD| 激情五月丁香五月| 婷婷综合中文| 密着浓厚中出乚交尾GvG935| 激情文学 综合 九月| 亚洲在线网站| 日本99在线| 久久五月婷婷丁香| a色色片| 日本三级黄色大片| 五月丁香婷婷中文网| 久久五月天黄色五月天色网址| 婷婷丁香十月| 色婷婷成人色网| 1024人妻无码中文字幕| 99色网站| 丁香六月婷婷综合网| 久久人人九| h亚洲| 婷婷五月大香蕉| 香蕉久久六月| 婷婷 激情 五月| 襙比视频| 天天舔天天摸| 久99| 大香蕉人人人| 久久杏爱视频| 五月综合色| 色婷婷狠狠爱| 久热A片| 伊人9草在线观看| 99干视频| 99re这里只有精品在线观看| 日韩久热| 丝袜熟女一区二区三区| 欧美噜噜噜草| 九九干视频| 开心五月天激情网| 五月丁香婷婷色播无码| 婷丁五月| 亚洲婷婷丁香| 激情婷婷网| 国产午夜一区二区三区| 天天天天操| www.婷婷久久五月天| 91疯狂操操操操| 久久婷五月天| 天天久综合| 激情五月天色网站| 97日在线视频| 丁香六月亚洲| 婷婷射综合| 被强行糟蹋的女人A片| 欧美激情-区二区三区| 日韩三级视频一区二区| 丁香婷婷激情五月| 99成人在线观看| 日韩中出视频| 五月丁香六月色婷婷| 日本婷婷五月天| 久久亚洲婷婷| 婷婷久久综合久| 丁香成人色情五月天| 97色色婷婷| 亚洲五月六月婷婷| 激情婷婷五六月天| 久久久这里有精品| 夜夜大香蕉婷婷丁香| 五月婷婷丁香五月亚洲色| 色色色婷婷| 99re6在线视频精品免费| 超碰在线观看9| 丁香影院五月综合| 婷婷深爱网| 啊V视频在线观看| www.久99| 五月涩涩网| 婷婷色五月丁香六月欧美啪| 伊人狠狠丁香婷婷综合尤物| 九九热99熟女| 五月丁香操婷逼| 丁香五月综合网亚洲综合欧美狠狠| 天天激情站| 欧美人人女女精品综合五月天| 操逼福利视频| 97超碰婷婷五月天| 美女婷婷六月色| 久99热在线观看| www.色欲丁香婷婷| 开心激情播播五月天| 色色色免费视频| 99人人操人人操人人精| 大香线蕉伊人| 99在线观看| 99日本黄站| 丁香五月久久社区| 婷婷大乡焦噜噜| 丁香六月婷婷色XXXXX| 久久伊人日日夜夜| 色播jjjj| 六月丁香激情| 6月丁香婷婷| 色婷婷久久综合| 九九婷婷综合| 婷婷色色网| 五月婷婷xxx| 色婷婷小说| 97视频91| 少妇性BBB搡BBB爽爽爽视頻 | wWW九九在线播放| 综合激情视频| 丁香五月激情婷婷视频| 国外亚洲成AV人片在线观看| 五月婷六月天| 五月婷婷六月丁香玖玖玫瑰91| 狠狠狠狠狠狠狠狠草| 国产亚洲精品久久久久久郑州| 99免费综合网| 亚洲综合网在线| 久久这里99| 免费观看高清无码| 丁香大香蕉| 日本三级中国三级99| 青996青| 丁香婷婷91在线观看视频| 色婷婷AV在线| 26uuu国产| 五月天四色房丁香| 狠狠爱婷婷丁香| 丁香五月欧美成人| 5月婷婷六月丁香| 欧美三级韩国三级日本三斤| 九色自拍| 少妇人妻凹凸视频| 91青娱乐青青草| 91久热| 婷婷五月天亚洲天堂| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 久久A极片| 第一区久久网站| 狠狠色综合图片| 97碰碰在线观看视频| 99久久精| 久久九九婷婷| 亚洲精品久久久无码| 激情五月天色婷婷| 五月天婷婷在线视频| 五月激情精品视频| www.99热在线观看| 五月丁香婷婷成人综合网| 日本九九热| 婷婷五月天AV| 丁香五月激情综合网激情五月| 香蕉久久五月| 色色五月天婷婷| 色导航色婷婷五月天在线观看| 久9精品| 91操操| 思思w99| 香蕉久久六月| www,99色| 超碰人妻公开在线| 天天舔天天爽| 婷婷丁香97| 99精品在线下载| 久久婷五月综合| 蜜桃五月天| 九九热re99re6在线精品| 日本婷婷网| 影音先锋天天日| 亚洲亚洲人成综合网络| 激情五月丁香婷婷| 丁香五月婷婷啪| 婷婷五月天BBw| 99小精品| 伊人五月婷婷| 伊人久久婷婷| 丁香五月综合婷婷| 婷婷色五月大香蕉在线| 国产精品涩涩涩视频网站| 99热一区| 色综合久久天天综合网| 丁香六月亚洲| 婷婷五月天国产手机在线视频观看| 五月天丁香综合久久国产| 国产在线aaa片一区二区99| 在线成人网址| 91九色在线视频| 无毒黄色网址| 香蕉99网| 人人综合91网| 97人人看一| 成人龟情网丁香五月| 久久亚洲婷婷| 欧美精品XXXXBBBB| 色欲久久综合| 99久久久| 亚洲色在线观看| 婷婷激情人妻| 九九九九毛片| 99热地址| 青青久在线视频免费观看| 婷婷五月激情丁香| 五月婷婷激情| 国产午夜成人AV在线播放| 婷婷五月天激情网| 国产人妻人伦精品一区二区| 五月婷婷六月丁香| 色五月亚洲| 色综合婷婷| 色五月婷婷在线观看| 99热成人在线| 五月婷婷激情综合av| 婷婷五月花西瓜| 五月婷婷手机在线| 五月天 无码| 五月婷婷之综合激情在线| www.91五月| 日本人妻伦在线中文字幕| 精品色色| 久久男人网婷婷| 中文字幕成人版| 91在线精品一区二区| 国产jd1024基地手机看国产| 91精品综合久久久久久五月天| 激情五月婷婷综合秋霞| 九月婷婷综合在线| 亚洲区视频| 99热色无码| 色情·com| 五月天色官网| 亚洲操操操| 丁香久久五月婷综合| 日本久热| 久久婷婷青青草| 久草视频大香蕉99| 丁香六月开心| 五月天综合激情网| 丁香五月在线播放| 国产做A爰片毛片A片美国| 五月色情婷婷| 99色热| 国熟女视频| 天天狠狠干| 婷婷五月电影| 婷婷欠久少妇| 91人妻人人做人碰人人爽九色| 丁香婷婷六月激情文学| 激情五月丁香综合网站| 99热91| 少妇高潮呻吟A片免费看软件| 精品99*| 九九热在线99| 婷婷激情五月综合丁| 色婷婷狠狠| 99热伊人| 九月婷婷在线观看| 九九视频精品这里只有| 97碰| 婷婷丁香激情综合色情| 97福利视频| 婷色综合| 六月色婷婷色| 丁香五月婷婷六月丁香| 人妻丰满精品一区二区A片| 久久综合网桃花| 思思视频这里是精品| 色婷婷亚洲精品天天综| 激情内射人妻1区2区3区| 伊人久热91| www.激情在线| 国产激情久久久| 欧美搡BBBBB摔BBBBB| 碰97久久| 五月丁香婷婷基地| 99欧美精品99日本精品| 国产熟女一区二区三区五月婷| 第四色婷婷五月| 综合网色| 久久婷婷色情7777网站| 久久这里只精品| 97色色婷婷| 99在线综合视频| 五月综合亚洲| 五月丁香啪啪啪| 激情婷婷五月| 影视av久久久噜噜噜噜噜三级| 琪琪色网在线| 性韩日色婷婷五月天激情啪啪XXX| www.天天日| 色狠狠婷婷| 99热无码精品| 伊人综合网站| 中文久久久人妻| 99re热在线视频| 五月情涩综合婷婷| 五月丁香六月色| 日韩精品呦呦va| 久久五月婷综合网| 国产成人精品123区免费视频| 操比激情五月| 综合伊人久久| 久久五月激情综合| 亚洲AV综合在线观看| 91se在线观看| 狠狠五月激情丁香六月| 亚洲操精品| 综合激情专区| 五月天丁香网站| 日本久久99久久| 五月伊人婷婷| 亚洲成人网站在线| 区美毛片子| 91成人电影| 天天日夜夜高潮| 婷婷色五月天在线| 99热天堂| 狠狠色丁香| 97色片| 久久综合爱| 九九色人| www激情| 婷婷丁香五月激情综合站_久久五月丁香激情综合_开心五月综合激情综合五月_婷 | 丁香亚洲色综合| 偷拍视频五月天| 婷婷五月天天| 99热在线看| 超碰色天堂| 极品另类| 婷婷五月中文在线| 色吧婷婷五月亚洲| 99热综合网| 超碰99资源站| 涩涩五月天| 99高级会所久久| 91男同视频| 久热只有这里精品| 婷婷 伊人 久久| 九九热自拍| 91久操| 色噜噜狠狠色综无码久久合欧美| 热久久这里只有三级视频| 婷婷五月激情丁香| 九九色综合| 26uuu国产| 丁香五月av在线| 秋霞丝袜啪啪啪| 色五月综合网| 人人人人人人人草| 97干97色| 99青青草99| 五月激情婷婷播播开心| 九九免费精品在线视频| 丁香婷婷午夜| 99性爱| 九一99| 91大神操美女| 91免费试看| 99精品在线播放| 久久婷婷五月激情网站| 中文资源在线a| 天天射影院| 六月丁香婷婷综合在线| 五月天激情网图片 - 百度| 日韩人人操| 丁香五月冃欧美| 综合久久影院| AV网址大全在| 色伦专区97中文字幕| 久久久人妻| 五月丁香久久综合精品| www.五月婷婷| 91精品综合久久久久久五月天| 五月天婷婷在线视频| 丁香六月婷婷一区二区三区| 十月丁香婷婷| caopeng97人人| 久久综合婷婷| 五月婷婷深深的爱| 成人在线网站| AV在线不卡网站| 激情综合网五月婷婷| 久久丁香五月| 久久久久久丁香五月| 五月婷婷六月丁香免费| 好叼操在线观看| 99亚州综合精品成人网| 99热在线中文字幕| 天天日天天插| 少妇婷婷五月天| 五月色网| 五月婷婷久久综合| 婷婷97碰碰| 六月色 亚洲| 无码AV免费精品一区二区三区 | 干一干xxxx| 9 7总站超级碰免费视频| 婷婷开心激情| 婷婷九月色| 伊人激情影院| 激情丁香五月天| 天天天摸夜夜夜玩| 丁香五月综合亚洲| 日本欧美国产| 色。 婷婷婷| 欧美情月伍月天| 色99日韩| 久久激情网| 亚州操逼网| 色综合色香蕉网| 成人做爰A片免费看视频| 五月天综合久久| 91九色网| 99热超碰| 99视频| 四川女人毛多水多A片| 欧美私人家庭影院| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | www:99热视频| 国产成人AV在线播放| 综合婷| 免费观看全黄做爰的视频 | 五月天国产| 激情五月婷婷| 五月天激情小说网| 九九热123| tingtingcaobi| yw国产AV| www.97干视频| 婷婷啪啪| 九六五月天婷婷| 密桃激情五月天综合网| 亚洲热视频在线| 涩五月婷婷| 日本美女上人| 六月丁香五月婷婷| 激情五月天天| 2013AV天堂| www.婷婷.com| 丁香五月自拍| 久久视频这里99| 五月精品| 狠狠色色| 另类在线免费视频| 欧美操逼天堂| www.激情五月天.com| 丁香激情合作五月| 婷婷婷婷婷婷婷五月丁香| 天天日天天色| 丁香激情五月天| 欧美成人猛片AAAAAAA| 操比激情五月| 色噜噜婷婷| 丁香六月婷婷高清| 五月丁香香蕉| 亚洲色五月| 丁香五月婷婷影院| 99热色无码| 五月丁香六月婷婷婷婷| 五月婷婷五月丁香| 香蕉久久国产AV一区二区| 日本三级99人妇网站| 五月开心久久| 五月婷婷六月激情网| 久久久免费精彩视频| 五月花激情| 教师性爱毛片| 九九热只有这里精品| 亚洲情a| 99热青青草| 少妇性按摩无码中文A片| 九伊人网| 婷婷色五月色妇| 婷婷97碰碰| 免费看欧美成人A片无码| 久久丁香社| 成人羞羞啪啪 全 视频| 中文久久婷婷| a免费在线| 丁香色六月| 综合久久五月天| 色九九综合| 色婷婷天堂| 五月综合六月婷婷| 丰满少妇猛烈A片免费看观看| 亚洲黄3级片网站欧美| 伊人六月丁香婷婷| 婷婷五月天社区| 久久婷中文字幕| 99re思思在线视频| 91色婷婷综合久久中文字幕二区| 99在线综合视频| 丁香婷婷少妇| 开心五月深爱五月| 丁香五月另类色婷婷麻豆| 欧美性爱5月天天天看| 五月婷婷综合网| 亚洲色基地| 激情婷婷狠狠干| 97色色色| 五月色综合| 丁香六月激情综合啪啪| 日韩欧美一级大黄网站| 亚洲国产成人AV在线| 色婷婷丁香五月天在线视频| 99热国产这里只有精品| 久99久在线| 婷婷六月色开 | 草草视频91| 超碰在线观看9| 天天综合色99| 婷婷五月天伊人网| 91九色无码内射| 婷婷激情五月天小说| 午夜天堂一区人妻| 婷婷五月天人妻| 8090在线影视少妇| 91啪级电影| 99在线精品免费视频| 青青草原中文字幕| 俺去也五月天| 狠色狠色狠狠色综合网| 中文人妻AV久久人妻18| 婷婷久久夜| 中文成人在线| 思思热99在线| 影音先锋一区二区资源站| 天天天日天天天干| 玖玖九九9999在线观看视频精品| www.十八禁不禁AV.com| 六月婷婷综合网2| 五月婷AV| 97成人在线视频精品| 五月天色婷婷综合| 久久久久亚洲AV成人无码电影| 国产综合婷婷| 五月天亚洲图片婷婷| 日本丁香五月| 开心五月深爱五月婷| 婷婷五月丁香激情| 另类小说五月天| www。五月天激情| 欧美精品在线观看| 五月天婷婷AV| 草操AV在线| www.ywav| 99热这里只有精品3| 日韩欧美四五区| 亚洲图色五月天| 日本五月天网站| 99re久热只有精品6在线直播.com| 婷婷五月天香蕉| 久一网站| 另类小说五月天| 五月丁香激情在线| 91avse| 久久久国产精品黄毛片| 色五月中文网| 中美日韩成人在线| 久久性爱网| 婷婷狠狠干| 久9视频| 日韩啪| 美女亚洲五月丁香| yw.av| 五月丁香久久| 激情色情五月天| 人人干99| 97啪在线观看视频| 伊人久久艹| 涩涩婷婷五月| 成人午夜无码视频| 欧美成人一区二区三区在线视频| 婷婷丁香五月天激情| 日本精品在线噜噜噜| 99视频精品| 五月婷婷五月天激情网| 秋霞午夜理论| 国产日韩av片| 五月婷婷啪啪啪啪| 91欧美| 婷婷六月丁香在线| 日本久久人| 强辱丰满人妻HD中文字幕| 成人免费在线电影| 五月婷婷欧美激情| 人妻系列久久久久久久久久久| 婷婷99丁香| 性做爰A片免费视频A片直播| 丁香五月婷婷超碰在线| 亚洲欧美国产高清vA在线播放| AAA久久久AAA久久久AAA| 六月成人网| 色情综合| 99久在线精品99re5热视频| 99热在线中文字幕| 激情五月第四色| 铁牛TV人妻| 亚洲成人日韩无码精品| 蜜桃五月天| 色狠狠色| 天天日天天干天天爽| 色五月色综合| 天天日日天天| 男人天堂伊人五月丁香| 欧洲综合视频| 国产SUV精品一区二区883| 亚洲成人免费在线| 午夜成人网站在线观看| 五月丁香色婷婷| 永久99免费视频网站| 9久国产精品| 五月天停停日日| WWW久| 日本九九网| 99热费观看| 激情五月色综合网| 丁香九九九九| 另类天堂| 草美女在线观看视频在线播放| 色情五月天小说| 99激情网| 欧爱综合视频| 婷婷五月18永久免费视频| 亚艹艹| 美女五月狠狠| 99热这里只有精品1025| 五月婷婷婷婷| 久久人妻熟女一区二区| 最新国产AV| 色很久综合| 九九婷婷综合| 开心 五月 综合| 色综合性视频| 五月丁香中文| 天天色综网| AV九九| 影音 五月 婷婷 久久| av一区免费看| 九九热10| 森林影视大全,最好看的2019年视频 | 六月丁香成人| 九九Av| 六月香五月婷| 泰州成人视频| 色99网站| 中文AV网站| 久久99久久99精品免观看粉嫩| 激情网五夜婷婷| 免费播放99性爱视频| 久久九九国产精品怡红院| 婷婷五月丁香五月| 婷婷激情久久| 九九99免费视频| 99视频在线观看视频| 婷婷五月天久久| 99热都是精品| 久久亭亭电影| 久思思热视频在线观看| 久久婷婷五月天亚洲欧美| 99热精品观看| 91av传媒高清在线视频网| 69色婷婷| 色情五月天se| 99在线视频播放| 少妇搡BBBB搡BBB搡毛茸茸| 综合色婷婷| 成人视频九九| 亚洲AV网址| 亚洲AV影片在线观看| 亚洲无线视频| 免费视频这里只有精品| 日日杆天天| 久久五月天免费网站| 99精品色色| 91大屁股精品| 人妻免费网站| 翔田千里aV中文字幕| 九九综合| 就去色色五月丁香婷婷久久久| 色10月婷婷视频| 久久久这里有精品| 色和综合网| 婷婷激情中文综合| 1024操逼视频| 久久综合香蕉国产国产蜜臀AV| 久久久久久久久久久久久久人妻视频| 日本久久婷婷| 丁香花婷婷五月天| 亚洲色综合性| 国产69久久久欧美黑人A片| 一本久道综合色婷婷五月| 丁香五月激情婷婷婷婷在线观看| 99国产精品白浆在线观看免费| 操操人人| 人妻激情视频| 99视频在线精品免费观看2| 国产69久久久欧美黑人A片| 丁香五月婷婷激情网| 五月丁香五月综合欧美| 亚洲成人丁香花| 狠狠狠狠狠狠狠狠狠狠狠色宗合图片| 狠狠干在线| 一起草Av| 色五月成人| 老妇操B| 婷婷色正月| 色亭亭丁香五月天| 五月婷导航| 伊人婷婷99热精品| 午夜婷婷五月天在线| 性做爰1一7伦| 六月婷五月丁香| 五月丁香综合网| 天天综合激情| 日本三级大片| 狠狠五月天婷婷| 国产亚洲99久久精品| 激情综合网络插| 操一区| 五月婷婷狠天天色综合| 久久精品99国产精品日本| 婷婷色无码| 99热精品在线| 丁香五月婷婷乱| 九九爱激情| 丁香五月婷婷激情中文| 墨西哥毛片内射精| 色综合色色色| 狠狠狠狠狠狠色| 亚洲AV成人在线| 天天综合情| 久久丁香五月天| 婷婷五月天Av| 欧美A片在线视频免费观看| 色色色国产| 停停六月 综合| 人人操人人爰人人一天天碰夜夜拍夜夜爽-中国A级毛片天天看天天谢… | 亚洲超级碰| 九九热黄色| 777久久精品| 五月丁香花成人社区| 99热这里只有精品最新网址| 久久9999| 99久久6| 草草女人亚洲| 亚洲无码九九| 色九月欧美| 91成人性爱视频| 五月天色婷婷小说| 丁香五月婷综合| 另类专区在线| 很很操很很操| 一起操 91N.com| 亚洲av综合网| 9久热这里只有精品视频| 亚洲天堂青草| 中文字幕在线免费观看视频| 好吊丝aV| 超碰99热精品| 男妓跪趴把舌头伸进我的嘴巴| 日日狠狠久久偷偷四色综合免费 | 日韩欧美一级大黄网站| 五月天成人网婷婷| 久久九九九九| 天天综合色| 夜夜爽天天干| 79亚洲精品少妇| 色444综合网| 九九色色| 草综合14| 日日夜夜青青草| 九九精品热播| 免费无码毛片一区二区A片| 99热这里是精品| 五月天婷婷久久日| 婷婷五月天你懂的| 无码激情AAAAA片-区区| 五月综合色| 97久久香草精品视频| 99人妻碰碰碰久久久久| 人与禽A片啪啪| 久久精品五月天| 五月天在线视频尤物视频在线看| 91成人视频| 五月天婷婷无码| 婷婷六月色| 婷婷五月天综合网| www,色中色| 婷婷伊人| 丁香五月综合无码趴趴| 另类五月激情| 婷婷五月激情中文字幕| 五月综合色| www.狠狠干com| 婷婷激情丁香五月婷婷激情丁香五月婷婷| 五月色亭丁香| 丰满少妇猛烈A片免费看观看| 91碰视频| 丁香五月天资源网| 丁香激情婷婷网| 丁香五月婷婷综合视频| 九九操操| 六月婷婷色色色| 伊综合蕉| 日韩在线视频9色| 五月丁香影院| 大香蕉人妻| 91无码高清| 久久99网| 丁香六月伊人| 天天干天天日天天插| 99九色视频在线观看| 婷婷五月六月丁香| 久久综合图片| 伊人狼人干| 99国产精品久久久久久久久久久 | 人伦30P| 97超碰在线观看免费| 国产乱子轮XXX农村| 思思热视频在线观看| 婷婷五月天天爽| 五月婷婷六月少妇激情| 色狠狠色噜噜噜a天堂一区| 99色啊| caopeng超碰| 97在线精品| 99色综合| 欧美噜噜免费观看| 久久曰曰| 永久的网站AAAA| 色五月成人| 久久色情| 九九这里只有精品在线视频| 伊人久久五月天| 综合色99| 九九激情综合| 五月婷婷干干干| 激情综合4月| 激情四射五月天偷偷看婷婷| 开心久久xxx色| 久久婷婷五月综合97色一本| 精品在线| 婷丁香久综合| 色婷婷免费观看| 五月婷婷狠狠干| 精品激情| 婷婷丁香六月五月天| 婷婷激情五月天在线视频| 亚洲五月天,激情视频| 另类激情五月天。| 蜜乳.comcom| 深爱激情AV| 五月婷婷在线观看| www天天干| 九九精品视频在线6| 天天日,天天干,天天操| 婷婷五月天成人网| 五月天婷婷色色| 狠狠操天天干| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 这里只有精品视频一区| 天天日夜夜曹| www..999热久| 五月婷婷丁香六月| 99在线免费视频播放| 性爱网六月丁香| 996热| 婷五月天在线草| 六月丁香影院| 九九色综合网| 五月丁香啪啪啪| 五月婷护士| 久久伊人9| 国产日韩欧美性生活| 婷婷色成人| 免费啪啪亚州视频| 狠狠操狠狠| 香蕉色色网| 丁香婷婷六月激情文学| www,婷婷五月天,com| 天天干天天操天天爽| 久久激情五月婷婷| 狠狠干最新地址| 五月色婷婷影院| 天天插天天日天天爽| 色五月丁香网| 久久香蕉影院| 日美三级| 综合五月草| 丁香午夜天| 五月天.com| 91精品国产色猫| 色综合99| 可以看的av| 成人国产欧美大片一区| 久久丁香社| 99er免费在线观看| 久青操| 国产精品扒开腿做爽爽爽A片唱戏 亚洲爆乳无码精品AAA片蜜桃 | 99热| 99久操| 激情伊人| 99国产这里只有精品| 激情婷婷丁香| 97在线观看| 九九热10| www.日日日.com| 亚洲综合另类| 色综合天天| 成人片在线免费看| 五月综合在线婷婷图片| 超碰在线人人| 婷婷五月丁香99| 丁香狠狠| 丁香五月激情啪| 久久一伦| 激情五月婷婷综合色播小说| 久久久这里有精品| 一本色道久久88加勒比—| 久久网思思| 天天综合五月| a免费在线| 久久五月丁香六月婷| 九月丁香婷婷| 97干在线看| 激情99在线视频| 无码91中文字幕| 99色色热| 99热在线看| 超碰人妻在线| 激情无码网| 五月天婷婷久草丁香| 婷婷成人小说综合| 老师的粉嫩小又紧水又多A片视频| 99久久亚洲精品视频| www.五月天婷婷| 丁香五月婷婷亚洲另类| 色婷婷色五月天| 久久久国产精品黄毛片| 欧美激情 日韩无码 婷婷 五月天 久久婷婷丁香五月一二三 | 丁香五月天在线观看视频| 日本久久婷婷| 9伊人网| 99综合| 人人搡人人| 久久99激情丁香婷婷小说网| 无码碰碰| 亚洲天天综合| 以及AA大片看看| 99er6热在线观看精品6| 能看的AV| 这里只有精品日韩精品| 五月色综合| 综合激情开心五月| 婷婷激情五月| 五月激情开心婷婷| 97干在线| 婷婷丁香久久五月综合| 99ER热精品视频| 色色影院aaaav| 免费观看18视频网站| 色情播放| 五月天福利影院导航| 日本激情五月天‘| 在线日本www| 五月天婷婷爱| 超级黄色片| 日本色图综合| 天天色综合天天| 激情五月婷婷| 森林影视大全,最好看的2019年视频 | 亚洲视频在线网| 天天综合精品| 97碰碰在线看视频免费| a网站免费观看| 天天爱天天做天天舔| 蜜桃人妻无码AV天堂三区| va婷婷在线免费观看| Www.se.久久| 人人色婷婷| 亚州色婷婷| 欧美电影在线播放| 日日夜夜天天爽| 综合色婷婷| 六月婷婷开心| WWW.桔色成人.COM入口| 在线亚洲综合网| 婷婷综合精品| xxxx五月激情| 狠狠色综合图片| 日本啪啪网| 色色色视频免费无码 | 五月停停激情网| 91久久九久久九久久九久久九久久| 国产 码在线成人网站| 超碰激情网| 国产精品18久久久| 九九这里有精品| 人妻操逼视频。| 久热99狠| 开心五月激情网| 成人噜噜网| 99久久6| 草综合网| 最近中文字幕2019视频1| 色婷婷色五月天| 丁香色婷婷| 九色综合五月天婷五月| 色情五月婷| 五月婷婷影视| 五月丁香婷中文| 久久久国产精品黄毛片| 99热这里只有精品9| 亚洲婷婷开心五月| www.99免费视频| 免费观看欧美成人AA片爱我多深| 人人操AV| 国产 A片 自拍| 91婷婷搞| 东北熟女高潮99综合99| 六月丁香久久| 《蜘蛛女》梁铮1995| WWW、日本色丁香co m| 婷婷天天五月天| 久草五月| 日韩成人无码人妻| 五月综合六月婷婷| 桃色Av色哟哟| 婷婷五月天午夜激情影院| 九九香蕉网| 色你久久| 亚洲综合激情五月| 性韩日色婷婷五月天激情啪啪XXX| 熟女色色一区二区| 婷婷五月天福利| 日韩精品一区二区亚洲AV观看| AV激情五月| 欧美日本99| 丁香五月之久操视频| 五月婷婷五月| 天天综合 99久久婷婷| 五月天婷婷中文字幕在线播放| 天天做天天爱天天日| 91se在线观看| 影音先锋一区二区资源站| 婷婷九月色| 久久五月婷婷丁香| 婷婷五月天中文字幕| 五月丁香亚洲综合网| 2005天天干天天1| 人人摸人人操人人爱| 国产成人网站在线观看| 久久精品婷婷| 综合色色婷婷| 五月丁香六月在线| 99思思热只有在这里看| 翔田千里aV中文字幕| 丁香六月婷婷| 日本熟妇精品99| 色九九综合热99| 久久婷综合网| 99玖玖人人| 久热久操久热久草国产91| 五月丁香六月片| 成人免费黄色短视频| 欧美成人AAA片一区国产精品| 这里只有精品免费视频| 日夜操B| 9久精品| 人妻人人操| 色九区| 99亚洲天堂| 精品人妻伦一二三区久久| 久久成人人妻| 九九激情视频| 天天色综网| 六月婷婷久久大全| 九九九九这里只有精品| 99热在这里只有精品| www.色色色色| 五月天成人小说| 欧美狠狠色| 成人婷婷| 五月丁香无码| 99成人在线观看| 亚洲亚洲人成综合网络| www.yw尤物| 99视频在线观看地址| 雪千夏麻豆| 日日噜噜久久婷婷五月天| 91干在线视频| 九月综合| 丁香婷婷人妻| 色欲操| 伊人久久五月天| 五月婷婷在线视频观看| 99九九综合久久九九| 亚州色婷婷| 婷婷丁香久久五月综合| 五月婷AV| 色欲色香伊人| 五月婷婷中文字幕| h在线看免费版在线看| 人妻熟人中文字幕一区二区| 亚洲欧洲中文日韩久久AV乱码| 丁香婷婷六月| 色情久久久| a九九热www| 美女五月天婷婷| 五月丁香花婷婷玉莉AV| 天天爱天天秀天天做| 黄色AV日韩| 97亚洲视频在线| av最新在线| 亚洲国产精品五月天| 99热骚货| 五月婷婷影院| 人人操AV| 亚州在线中文字幕| 五月天丁香久久综合 | 人碰人人人玩91| 99精日本久久| 丁香九月综合激情| 六月综和久久| 538在线精品| av九九| 91狼友视频在线观看| 日本三级中文字幕| 亚洲AV日韩无码| 色99在线视频| 怡红院AV亚洲一区二区三区H | 五月婷婷色情| 欧美成人AAA片一区国产精品| 激情图片99| 五月婷婷六月丁香综合视频在线| 这里只有精品视频在线看| 五月丁香婷婷基地| 曰韩五月丁香色婷婷无码| 另类精品视频在线观看| 丁香五月成人论坛| 婷婷成人AV| 狠狠爱青青草| 色5月婷婷色| 丁香婷婷久久老熟女综合网| 91精品国产91久久久久青草| 91色色五月天| 欧美三级欧美一级| 激情五月亚洲| 久久精彩视频| 97人人爱人人操| 六月婷婷日| 五月丁香久久综合| 伊人成综合五月婷婷| 激情五月婷婷欧美极品 | 亚洲激情av| 淑女丝袜bi操逼123| 婷婷操逼| 亚洲网站999| 俺也去在线视频| 亚洲精品又粗又大又爽A片 | 久久伦乱| 99精品视频免费| 五月天开心色色网| 欧美狠狠草| 丁香五月激情综合| 99热免费18| 婷婷五月天激情视频| 色五月激情网| 九九色大香蕉| 日韩视频99| 99日热在线视频| 激情五月天之六月婷婷| 精品久久久999| 丁香五月色欲| 丁香五月激情久久麻豆| WWW.五月天9999| 97碰超级人人看| 色五月大香蕉婷婷| 99热亚洲精品66| 日韩人妻白浆视频系列| 欧洲一区二区| 色婷婷色99国产综合精品| 香蕉曰比| 久久婷婷在线| 亚洲性爱AV在线| 久久色五月| 天天射影院| 九九热视频精品2| 99热6这里只有精品| 日韩精品一区二区亚洲AV观看| 啪到高潮激情丁香五月| 色www99| 四色女婷婷| 中文字幕丰满孑伦无码专区| 狠狠香婷婷五月| 欧美久热| 欧美日韩大黄| 精品亚洲国产成AV人片传媒| 激情五月丁香婷婷夜夜操| 九九99精品视频在线观看| 日本欧美在线| 精品人妻一区二区三区四区不卡在| 99久久婷婷五月综合| 婷婷六月综合基地| 一本久道综合99| 丁香婷婷五月综合色情| 天天色月| www久久99|