免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Drule2.0規(guī)則引擎從入門到排坑:配置、會話與生產(chǎn)實踐

Drule2.0規(guī)則引擎從入門到排坑:配置、會話與生產(chǎn)實踐 接手Drule2.0這套規(guī)則引擎的時候我心里其實有點嘀咕。項目從1.x升級過來舊的規(guī)則文件全得重寫接口層面也動了不少。當(dāng)時團隊里沒人系統(tǒng)整理過新版的用法文檔東一塊西一塊大多是一句“按老版本兼容”就帶過了。結(jié)果上線測試第一周我們就被規(guī)則不生效、會話狀態(tài)串掉這類問題連續(xù)錘了好幾次。后來我花了兩周時間把Drule2.0從配置、開發(fā)到上線排查的整套鏈路重新捋了一遍也把生產(chǎn)環(huán)境踩過的坑都補進了內(nèi)部使用手冊。這篇就當(dāng)是一個更詳細(xì)的外部版給正在或者準(zhǔn)備用Drule2.0的同行一個參考。內(nèi)容按照我對這套引擎的理解來組織重點放在“怎么用對”和“怎么排查錯”上適合后端開發(fā)、規(guī)則配置人員以及對規(guī)則引擎選型感興趣的同學(xué)。1. 規(guī)則引擎到底解決了什么問題先對齊一個認(rèn)知很多團隊把規(guī)則引擎當(dāng)成“if-else的替代品”這么理解不能說錯但容易用歪。以我參與的這個金融風(fēng)控項目為例最直接的痛點不是代碼寫不出判斷邏輯而是業(yè)務(wù)規(guī)則天天變下午三點業(yè)務(wù)方提需求說“貸款額度超過五萬且歷史逾期超過兩次的訂單要人工審核”第二天上午就要上線。傳統(tǒng)的做法是改代碼、發(fā)版、走回歸一套流程下來最快也得一兩天而且改一次代碼就要動一次測試用例成本嘩嘩往上漲。Drule2.0把“決策邏輯”從業(yè)務(wù)代碼里拆了出來變成了獨立的規(guī)則文件。規(guī)則文件可以由業(yè)務(wù)分析師或運營人員通過配置界面維護也可以由開發(fā)以文本形式提交到倉庫再走CI流程發(fā)布。推送一次規(guī)則相當(dāng)于業(yè)務(wù)邏輯的即時熱更新不需要重啟服務(wù)也不需要重新編譯主程序。再說深一層規(guī)則引擎的價值不只是“快”還有一個容易被忽略的點可審計。金融項目做風(fēng)控決策需要回答“這筆訂單為什么被拒”這個問題。如果判斷邏輯散落在代碼的十幾個if-else里你很難快速給出完整依據(jù)。規(guī)則引擎里每一條規(guī)則都有獨立的命名、條件描述和動作定義引擎執(zhí)行完還可以輸出詳細(xì)的決策軌跡我在第7章會專門講這個問題。Drule2.0和典型的Drools等老牌引擎相比最明顯的差異是降低了規(guī)則編寫的門檻同時把“規(guī)則集”和“會話生命周期”這兩個概念徹底分開了。這意味著同一條規(guī)則可以被不同業(yè)務(wù)場景以不同參數(shù)加載執(zhí)行也允許引擎在同一進程里跑多個相互隔離的規(guī)則會話。這個設(shè)計對于中大型項目來說很關(guān)鍵因為同一個風(fēng)控服務(wù)可能同時服務(wù)好幾個產(chǎn)品線每條產(chǎn)品線的規(guī)則模板和優(yōu)先級策略并不相同。如果只是幾十條固定判斷說實話硬編碼在代碼里并不丟人。規(guī)則引擎的優(yōu)勢要等規(guī)則量上了百、變更頻率上了周、參與維護的人超過兩三個之后才會明顯體現(xiàn)。所以我給你的第一條建議是先別急著給項目上規(guī)則引擎先盤一下規(guī)則的規(guī)模和變更頻率。2. 六個核心概念從規(guī)則文件到會話一次講透Drule2.0的官方文檔里概念很多但真正貫穿日常開發(fā)的其實就六個。把這六個概念和它們之間的關(guān)系搞明白后面所有配置和接口調(diào)用都不會跑偏。2.1 事實引擎操作的對象事實是進入規(guī)則引擎參與匹配的數(shù)據(jù)對象。它可以是一個訂單對象、一個用戶實體也可以是一個Map。引擎本身不關(guān)心事實的業(yè)務(wù)語義只把它當(dāng)作“是什么類、有哪些屬性、當(dāng)前值是多少”的數(shù)據(jù)載體。在Drule2.0的Java客戶端里事實通常是POJO規(guī)則里通過全限定類名加屬性引用來取值。比如規(guī)則文件里寫OrderInfo(amount 50000)就是在匹配一個名為OrderInfo的事實對象并且要求它的amount字段大于等于50000。有一點要注意同一個會話里可以插入多個不同類型的事實引擎在處理時會把這些事實統(tǒng)一放進工作內(nèi)存規(guī)則的條件部分可以引用其中任意一個或多個。2.2 條件與動作規(guī)則文件的一左一右規(guī)則文件里最核心的兩個部分是條件Left Hand Side簡稱LHS和動作Right Hand Side簡稱RHS。條件描述“什么時候觸發(fā)”動作描述“觸發(fā)后干什么”。條件部分通常由字段約束、邏輯組合和事實之間的關(guān)聯(lián)組成動作部分可以是修改變量值、調(diào)用日志、對外發(fā)消息或者只是簡單地把規(guī)則名記下來。我自己寫規(guī)則時的一個習(xí)慣是盡量讓動作簡單可控不要在動作里寫太復(fù)雜的處理邏輯。規(guī)則引擎適合做決策不適合做重型業(yè)務(wù)處理。如果某個動作需要調(diào)用第三方服務(wù)或者寫數(shù)據(jù)庫建議放到引擎外部去做規(guī)則里只輸出一個“建議結(jié)果”這樣可以保持規(guī)則文件的輕量。2.3 規(guī)則集獨立命名的規(guī)則容器規(guī)則集是一個邏輯容器把一組規(guī)則打包在一起。Drule2.0里一個規(guī)則文件或者一個發(fā)布包通常對應(yīng)一個規(guī)則集。規(guī)則集之間是隔離的這意味著你創(chuàng)建會話時只能加載指定的一個或幾個規(guī)則集不會互相干擾。項目里如果你的規(guī)則被分成“反欺詐規(guī)則集”“額度審批規(guī)則集”“黑名單規(guī)則集”它們在加載時就是獨立、隔離的。這帶來一個很大的好處你可以單獨測試、單獨發(fā)布某一個規(guī)則集而不影響其他正在運行的規(guī)則。2.4 無狀態(tài)會話與有狀態(tài)會話別選錯這是Drule2.0實際使用中最容易出問題的地方也是文檔里描述最抽象的地方之一。無狀態(tài)會話就像一次性的純凈水杯你把事實丟進去引擎當(dāng)場算完返回結(jié)果會話直接銷毀。適合一次請求一次決策的場景比如“判斷這個訂單要不要風(fēng)控攔截”。有狀態(tài)會話則像一個持續(xù)對話的窗口你可以在會話里分多次插入事實每次插入后觸發(fā)規(guī)則還可以在后續(xù)查詢之前規(guī)則的執(zhí)行結(jié)果。適合需要分階段決策、或者在一個流程里多次依賴上一次結(jié)果的場景。我強烈建議除非你的業(yè)務(wù)流程確實需要跨多次觸發(fā)保存中間狀態(tài)否則優(yōu)先用無狀態(tài)會話。有狀態(tài)會話用不好最典型的問題就是“上次請求的數(shù)據(jù)污染了本次結(jié)果”我在第7章會詳細(xì)講一個因為復(fù)用有狀態(tài)會話導(dǎo)致的線上事故。2.5 規(guī)則模板與動態(tài)參數(shù)前面說過Drule2.0降低編寫門檻主要體現(xiàn)在規(guī)則模板機制上。你可以在規(guī)則文件里定義模板變量比如minAmount和maxAmount然后在創(chuàng)建會話時傳入?yún)?shù)值。同一個規(guī)則集因為傳入?yún)?shù)不同可以形成“消費貸額度偏好模板”和“小微企業(yè)貸額度偏好模板”兩套執(zhí)行效果。這比舊版本里為每個商戶復(fù)制一份規(guī)則文件的做法干凈多了。以前我們給商戶A寫一份規(guī)則、給商戶B復(fù)制一份再改改參數(shù)結(jié)果規(guī)則數(shù)量指數(shù)級膨脹維護成本高到想罵人。用模板參數(shù)后一份規(guī)則同時服務(wù)幾十個不同配置的對象規(guī)則文件本身幾乎不需要重復(fù)維護。2.6 規(guī)則函數(shù)的擴展方式Drule2.0不可能覆蓋所有業(yè)務(wù)場景的自定義邏輯。文件里還預(yù)留了自定義函數(shù)的注冊接口開發(fā)人員可以寫一小段Java代碼把判斷邏輯打包注冊成函數(shù)規(guī)則里直接調(diào)用。比如根據(jù)身份證號計算年齡段、根據(jù)經(jīng)緯度判斷是否屬于同一城市這些邏輯就不是規(guī)則語言能優(yōu)雅表達(dá)的注冊成函數(shù)后在規(guī)則文件里用一行調(diào)用就行。這里有一個邊界要守好自定義函數(shù)應(yīng)該是“判斷工具”不要用自定義函數(shù)去操作其他事實對象或者修改全局變量否則會讓規(guī)則執(zhí)行的可預(yù)測性變得很差。3. 規(guī)則文件長什么樣一份風(fēng)格靈活但邊界清晰的配置Drule2.0的規(guī)則文件在社區(qū)版里支持好幾種格式不同行業(yè)使用習(xí)慣也不同。我基于實際項目經(jīng)驗把規(guī)則文件拆解成兩層來看。3.1 規(guī)則文件的基本骨架下面這段是個風(fēng)格類似DRL但做了簡化脫敏的示例用來展示核心字段的邏輯關(guān)系。Drule2.0對規(guī)則文件有一套schema校驗規(guī)則如果使用了不屬于本版本的關(guān)鍵字發(fā)布包在校驗階段就會報錯。具體的文件名后綴和packaging方式建議以你所用發(fā)行版的官方CLI或編輯器插件提示為準(zhǔn)。package demo.risk import com.example.dto.OrderInfo import com.example.dto.UserProfile rule 高危訂單攔截 when $order : OrderInfo(amount 50000, channel ONLINE) $user : UserProfile(riskLevel HIGH) then $order.setIntercept(true); $order.setReasonCode(AMOUNT_HIGH_WITH_RISK); drule.log(hit rule: HIGH_RISK_ORDER); end幾個關(guān)鍵點拆開說package表示所屬包名類似Java的包主要用于組織和隔離規(guī)則。import引入需要操作的事實類。不引入直接用字符串類名也可以但會犧牲編譯期檢查線上跑出來容易出類型不匹配。rule 名稱規(guī)則名稱在當(dāng)前規(guī)則集里必須唯一。一旦重復(fù)發(fā)布時直接報錯。我曾經(jīng)見過兩個同事各自加了同名規(guī)則結(jié)果發(fā)布校驗階段卡了好久。when條件區(qū)。上面示例里兩個模式之間默認(rèn)是“同時滿足”的關(guān)系。Drule2.0默認(rèn)所有條件都是與的關(guān)系如果你想表達(dá)“或”需要顯式使用or關(guān)鍵字或者拆成兩條規(guī)則。then動作區(qū)。用類似Java的語法修改變量、打日志。注意變量上的$前綴只是慣例方便區(qū)分規(guī)則變量和事實對象的內(nèi)部字段不是強制的。3.2 JSON風(fēng)格規(guī)則描述文件業(yè)務(wù)配置團隊更習(xí)慣的是JSON格式的規(guī)則描述。Drule2.0支持把規(guī)則拆成“描述動作腳本”的結(jié)構(gòu)。下面是我們在某個信貸審批場景里用過的簡化結(jié)構(gòu){ ruleSet: loan_check, ruleList: [ { ruleName: loan_overdue_check, description: 歷史逾期超過3次且當(dāng)前未結(jié)清的單直接拒絕, priority: 10, enabled: true, condition: { type: and, items: [ { field: overdueCount, operator: , value: 3 }, { field: currentStatus, operator: , value: UNPAID } ] }, action: { type: script, script: order.setResult(REJECT); order.setReason(OVERDUE); } } ] }JSON格式對非開發(fā)人員相對友好而且天然支持模板變量替換。配置人員不需要理解Java語法只需要知道字段名、比較符和結(jié)果集就能自己維護一套規(guī)則。我們把字段清單維護成一份數(shù)據(jù)字典上面的overdueCount、currentStatus就是字典里的標(biāo)準(zhǔn)字段規(guī)則配置人員照著字典寫基本不會出界。3.3 條件操作符的種類和用法Drule2.0常用操作符大概是這些操作符示例含義說明status CLOSED等于字符串用雙引號amount 10000數(shù)值比較age 25數(shù)值比較和上面一樣支持整數(shù)與小數(shù)!status ! BLOCKED不等于inchannel in [APP, MINIAPP]屬于給定集合not inlevel not in [LOW, MEDIUM]不屬于給定集合matchesmobile matches ^1[3-9]正則匹配containstagList contains VIP集合字段包含某元素exists/not existsexists(SubOrder)工作內(nèi)存中是否存在某類事實實際項目中遇得最多的是兩種問題一是字符串比較漏了引號導(dǎo)致當(dāng)成字段名解析二是時間類型的比較沒有嚴(yán)格統(tǒng)一格式導(dǎo)致規(guī)則執(zhí)行結(jié)果前后不一致。時間字段我建議統(tǒng)一轉(zhuǎn)成時間戳long類型再比較不要直接比較日期字符串。3.4 動作區(qū)支持的不只是賦值動作區(qū)看起來像Java但它主要做三類事情給事實對象的字段賦值比如order.setResult(REJECT)。調(diào)用規(guī)則引擎內(nèi)置API比如drule.log()輸出執(zhí)行日志或者用drule.insert()往工作內(nèi)存里插入一個新事實從而觸發(fā)后續(xù)規(guī)則。調(diào)用注冊好的自定義函數(shù)比如if (riskUtil.isBlack(mobile)) { ... }。動作區(qū)不適合做的是長時間阻塞的IO操作、復(fù)雜事務(wù)、需要異步回調(diào)的流程。遇到這些需求更合理的做法是規(guī)則只負(fù)責(zé)設(shè)置一個標(biāo)記值真正的處理邏輯放到引擎外部通過監(jiān)聽器或者后置鉤子去完成。4. 引擎內(nèi)部是怎么找到那條規(guī)則的優(yōu)先級、沖突與規(guī)則鏈用規(guī)則引擎的人經(jīng)常有一個疑問“我插入了事實引擎到底按什么順序執(zhí)行規(guī)則如果好幾條規(guī)則都能匹配上先執(zhí)行誰”這一章把順序問題講透。Drule2.0的處理機制并不神秘它本質(zhì)上做的是模式匹配匹配完成之后再進行規(guī)則沖突的解決與激活執(zhí)行。4.1 規(guī)則執(zhí)行的兩階段流程第一階段是“匹配”。事實插入工作內(nèi)存后引擎會把事實對象和當(dāng)前規(guī)則集里的所有規(guī)則條件進行匹配。注意不是順序遍歷那種簡單匹配引擎內(nèi)部有一個索引結(jié)構(gòu)來緩存模式與事實之間的關(guān)聯(lián)這也是為什么大量規(guī)則下引擎的執(zhí)行性能依然能穩(wěn)住的原因。這個階段的結(jié)果是產(chǎn)生一個“激活表”也就是“哪些規(guī)則在當(dāng)前事實組合下被滿足”。第二階段是“執(zhí)行-沖突解決”。如果激活表有多條激活的規(guī)則引擎按照議程Agenda的次序逐條執(zhí)行動作區(qū)的代碼。一條規(guī)則動作執(zhí)行完畢后如果它向工作內(nèi)存插入了新事實或者修改了已有事實引擎會重新進行匹配產(chǎn)生新一輪激活繼續(xù)執(zhí)行直到?jīng)]有新激活規(guī)則為止。4.2 優(yōu)先級是怎么排的數(shù)字越大越先跑Drule2.0里的規(guī)則優(yōu)先級用priority字段控制默認(rèn)值是0。數(shù)值越高在當(dāng)前議程里越靠前執(zhí)行。規(guī)則文件里可以寫成rule 高優(yōu)先級規(guī)則 priority 100 when ...在JSON風(fēng)格里對應(yīng)priority: 100。我在配置優(yōu)先級時踩過一個教訓(xùn)不要指望同一事實下互不相關(guān)的規(guī)則也嚴(yán)格按照優(yōu)先級排順序。優(yōu)先級只在“匹配同一組事實的規(guī)則”之間的執(zhí)行順序上有意義如果規(guī)則觸發(fā)的條件本質(zhì)上不同那么它激活的時機都不一樣硬調(diào)優(yōu)先級反而不容易理解。把規(guī)則按業(yè)務(wù)階段分層優(yōu)先保證層內(nèi)順序正確跨層的順序交給事實流轉(zhuǎn)去控制是我目前覺得最清晰的做法。4.3 沖突解決的三條隱性規(guī)則如果優(yōu)先級相同且都匹配了同一組事實Drule2.0內(nèi)部按照一個固定的規(guī)則來排序雖然不同發(fā)行版可能略有差異但大致思路是規(guī)則的“特化程度”高者優(yōu)先。也就是條件寫得越具體、約束條件越多的規(guī)則系統(tǒng)認(rèn)為它信息量更大越該先執(zhí)行。事實插入順序靠前的優(yōu)先。先插入的事實匹配出來的激活規(guī)則排在前面。如果規(guī)則文件里顯式聲明了規(guī)則順序按聲明的先后關(guān)系執(zhí)行。實際配置中不要指望這些隱性排序來解決業(yè)務(wù)問題而是要對“同時命中且互相影響”的規(guī)則設(shè)置顯式的優(yōu)先級防止隱性排序變化時出現(xiàn)行為抖動。4.4 規(guī)則鏈與重復(fù)觸發(fā)保護規(guī)則動作里可以插入新事實并觸發(fā)后續(xù)規(guī)則這形成了規(guī)則鏈。規(guī)則鏈可以簡化復(fù)雜決策流程的表達(dá)但有一個危險如果規(guī)則A的動作為事實X設(shè)置了一個值而規(guī)則B的條件又依賴這個值等規(guī)則B執(zhí)行完后又反過來修改了事實X導(dǎo)致規(guī)則A再次激活就可能無限循環(huán)。Drule2.0在循環(huán)防護上提供了開關(guān)配置同時建議規(guī)則作者在容易形成環(huán)的地方設(shè)置觸發(fā)次數(shù)上限這類業(yè)務(wù)條件。遇到線上規(guī)則無限循環(huán)問題先看日志里有沒有同一個規(guī)則名反復(fù)出現(xiàn)再檢查動作區(qū)是否改動了條件區(qū)依賴的字段。關(guān)于規(guī)則鏈還有一點非常重要如果一條規(guī)則的觸發(fā)條件里依賴了自己動作修改過的字段最好仔細(xì)測試否則很容易出現(xiàn)“你以為只跑一次實際被再次激活”的情況。除非確有需要否則條件字段和動作修改字段應(yīng)該盡量錯開。4.5 決策表Excel也能做規(guī)則Drule2.0的配置中心支持把規(guī)則以決策表形式導(dǎo)入。決策表比較適合“條件多、結(jié)果為離散值”的場景第一行放條件字段下一行放比較符第三行放具體條件值最后一行放結(jié)果。決策表在后臺會被引擎編譯成規(guī)則文件。業(yè)務(wù)團隊非常喜歡這種方式因為它和Excel篩選的操作習(xí)慣一致。但決策表不擅長的是處理復(fù)雜邏輯組合比如多表關(guān)聯(lián)判斷還是老老實實用規(guī)則文件更穩(wěn)妥。5. 從搭建到跑通第一次請求集成流程和關(guān)鍵步驟這章直接上實操。我用JavaKotlin混合的微服務(wù)項目環(huán)境來演示不過Drule2.0本身也提供了其他語言的客戶端思路是一樣的。建議先在一個干凈的Spring Boot工程里跑通最小鏈路再對接現(xiàn)有業(yè)務(wù)。5.1 工程依賴與初始化項目構(gòu)建工具如果是Maven第一個動作是引入Drule2.0的客戶端依賴以及對應(yīng)的規(guī)則包解析器。依賴配置的具體groupId和版本號跟隨你的發(fā)行版走公司內(nèi)部如果使用私有倉庫以私服坐標(biāo)為準(zhǔn)。引入依賴后建立一個配置類把規(guī)則集發(fā)布到本地緩存的路徑配好。Configuration public class DruleConfig { Bean public RuleEngineService ruleEngineService() { RuleEngineOptions options RuleEngineOptions.builder() .ruleBasePath(/opt/rules) .enableCompileCache(true) .build(); return new RuleEngineService(options); } }這里面的關(guān)鍵點是ruleBasePath指向存放規(guī)則文件或發(fā)布包的目錄。Drule2.0啟動時會掃描這個目錄下的規(guī)則包并預(yù)編譯所以規(guī)則文件的改動雖然可以不重啟服務(wù)但發(fā)布到該目錄的時機需要和你的文件同步更新機制配合好。5.2 創(chuàng)建無狀態(tài)會話并執(zhí)行一次決策首次跑通最推薦的方式是寫一個單元測試直接創(chuàng)建會話、插入事實、觸發(fā)執(zhí)行、斷言結(jié)果。Test void testHighAmountOrderShouldBeIntercepted() { RuleEngineService service ruleEngineService(); RuleSession session service.newSession(risk_control_rule_set); OrderInfo order new OrderInfo(); order.setAmount(80000); order.setChannel(ONLINE); session.insert(order); session.fireAllRules(); assertTrue(order.isIntercept()); assertEquals(AMOUNT_HIGH, order.getReasonCode()); }分步驟解釋newSession(risk_control_rule_set)根據(jù)規(guī)則集名稱創(chuàng)建一個無狀態(tài)會話。session.insert(order)把訂單對象當(dāng)作事實插入工作內(nèi)存。session.fireAllRules()執(zhí)行所有匹配規(guī)則的激活項。動作區(qū)通過order.setIntercept(true)直接修改了傳入對象。由于Java對象引用傳遞主線程的order對象在fire之后已經(jīng)發(fā)生了變化所以后面可以直接斷言。這是最簡單也最穩(wěn)妥的使用方式。事實對象會被直接修改因此要特別注意不要在同一個請求里對同一個對象開多個會話操作否則可能出現(xiàn)并發(fā)覆蓋。5.3 創(chuàng)建有狀態(tài)會話并分階段觸發(fā)有狀態(tài)會話適合依賴“上一次規(guī)則執(zhí)行結(jié)果”的場景。比如先走一次反欺詐校驗結(jié)果沒問題再走額度審批。示例RuleSession session service.newSession(credit_flow_rule_set); OrderInfo order new OrderInfo(); order.setAmount(30000); UserProfile profile new UserProfile(); profile.setRiskLevel(MEDIUM); session.insert(order); session.fireAllRules(); session.insert(profile); session.fireAllRules(); OrderDecision decision session.getGlobal(decision);有狀態(tài)會話持有了工作內(nèi)存中的事實所以能在多個階段之間保留狀態(tài)。它的問題是如果整個會話執(zhí)行過程中發(fā)生異常會話里所有中間狀態(tài)都必須主動清理否則下一次復(fù)用就會受影響。上面代碼里沒有做關(guān)閉嚴(yán)格的寫法應(yīng)該在finally塊里調(diào)用session.dispose()釋放會話或者干脆每次請求都創(chuàng)建新會話。如果你用的是有狀態(tài)會話并且容器是線程池的一定要想清楚“這個會話是否會被多個線程共用”。無狀態(tài)會話沒有這個問題因為它每次請求都新建并銷毀。5.4 監(jiān)聽器和審計日志配置Drule2.0提供事件監(jiān)聽機制可以在規(guī)則命中前后、議題激活前后掛鉤子實現(xiàn)審計日志收集、指標(biāo)量統(tǒng)計等功能。實現(xiàn)接口后注冊進會話即可。正常情況下線上會記錄以下內(nèi)容請求唯一ID、進入引擎時間、命中的規(guī)則名列表、每條規(guī)則的動作結(jié)果摘要、總耗時。這些審計數(shù)據(jù)是從“結(jié)果”回溯到“原因”的鑰匙建議一定在早期就配上不然后面出問題排查成本很高。5.5 一個常見的跑通后問題很多第一次接入Drule2.0的團隊會困惑為什么我在配置中心改了規(guī)則測試數(shù)據(jù)也變了但線上執(zhí)行的還是老結(jié)果排查方向通常是緩存沒刷新或者新舊版本規(guī)則集名一樣導(dǎo)致發(fā)布包被覆蓋。Drule2.0的規(guī)則編譯緩存是按規(guī)則集名版本號做的如果你的發(fā)布包沒有顯式改變版本號規(guī)則集會繼續(xù)沿用緩存版本。修改規(guī)則并發(fā)布時建議帶一個遞增版本號同時確認(rèn)配置中心的緩存刷新策略是否覆蓋了所有實例節(jié)點。6. 幾個容易忽略的配置細(xì)節(jié)會話隔離、緩存與規(guī)則數(shù)量控制規(guī)則引擎用久了你會發(fā)現(xiàn)真正讓你頭疼的往往不是規(guī)則寫得不對而是引擎在特定配置下的表現(xiàn)不符合直覺。這一章講三個值得提前做好的配置決策。6.1 會話隔離級別怎么選Drule2.0本身支持多規(guī)則集隔離但同一個規(guī)則集能不能被多個會話安全并發(fā)執(zhí)行取決于會話的隔離級別。默認(rèn)來說無狀態(tài)會話每次新建相對安全。如果追求性能優(yōu)化想用會話池復(fù)用對象一定要確認(rèn)會話里是否有全局變量。我見過一個案例規(guī)則動作區(qū)往全局變量里存了用戶ID會話池復(fù)用后第二個用戶跑同一條規(guī)則時讀到的全局變量還是第一個用戶的ID直接導(dǎo)致風(fēng)控規(guī)則誤判。后來我們把全局變量的使用全部禁止改為通過事實對象的字段傳遞才徹底解決。全局變量能不用就不用這是我在Drule2.0實戰(zhàn)里學(xué)到的第一課。6.2 編譯緩存的正確打開方式規(guī)則文件發(fā)布后第一次被請求時需要編譯編譯耗時可能到幾百毫秒甚至更多。如果希望冷啟動也體驗良好可以開啟異步預(yù)編譯。Drule2.0支持在規(guī)則集發(fā)布時主動觸發(fā)一次編譯把產(chǎn)物放入本地緩存目錄。配置緩存時要注意清理策略長期運行的服務(wù)如果規(guī)則包版本頻繁升級本地緩存會留下大量歷史版本的編譯產(chǎn)物占用磁盤空間。建議文件保留數(shù)量和保留時間都做一個明確限制。6.3 規(guī)則數(shù)量多少算太多社區(qū)里總有聲音問“Drule2.0能支撐多少條規(guī)則”我個人的經(jīng)驗是單規(guī)則集內(nèi)規(guī)則數(shù)量控制在幾百條級別是完全沒有問題的引擎內(nèi)部的索引機制能支持相對可觀的規(guī)則量。真正帶來性能麻煩的是“規(guī)則之間有大量交叉引用且觸發(fā)鏈較長”的情況并不是規(guī)則條數(shù)本身。打個比方一萬條彼此獨立的規(guī)則就像一萬個獨立的檢查關(guān)卡跑完也就挨個過一遍但十條互相觸發(fā)的規(guī)則可能形成指數(shù)級循環(huán)把引擎卡死。所以做規(guī)則架構(gòu)設(shè)計時與其糾結(jié)條數(shù)不如把每一條規(guī)則的邊界劃清楚盡量減少規(guī)則之間的隱式依賴。7. 生產(chǎn)環(huán)境踩坑實錄四類高頻問題的完整排查鏈路這章寫的都是我親眼見過甚至親手踩過的坑每個項目的背景細(xì)節(jié)都做了脫敏處理但排查鏈路是完整的。希望你看完能少走一半彎路。7.1 規(guī)則“命中”了但動作沒生效現(xiàn)象測試環(huán)境規(guī)則跑得好好的上線后日志里能看到命中的規(guī)則名但訂單并沒有被攔截結(jié)果值也沒有按預(yù)期改寫。排查鏈路首先檢查動作區(qū)是否加了對字段非空的約束。我們遇到過的事實是動作區(qū)執(zhí)行了order.setResult(REJECT)但后面的另一個動作分支又把result覆蓋成了空值。打開完整審計日志看動作區(qū)代碼塊的執(zhí)行順序。因為同一組事實同時命中多條規(guī)則時執(zhí)行順序由優(yōu)先級決定如果你在低優(yōu)先級規(guī)則里做了覆蓋高優(yōu)先級規(guī)則的結(jié)果就會被沖掉。檢查規(guī)則文件里是否有多個同名規(guī)則。同名沖突在發(fā)布時可能被攔截但舊版本規(guī)則集如果還殘留在緩存里新規(guī)則命中后動作可能被舊規(guī)則的后續(xù)執(zhí)行覆蓋。最后結(jié)論是這個場景本質(zhì)是優(yōu)先級設(shè)計不合理多條規(guī)則共享同一個輸出字段卻沒有約定唯一最終寫者。修復(fù)方案是調(diào)整優(yōu)先級并增加字段寫入前的前置校驗同時在測試環(huán)境增加了一個“同一字段多次寫”的靜態(tài)掃描。7.2 有狀態(tài)會話復(fù)用時發(fā)生的用戶數(shù)據(jù)串號現(xiàn)象兩個用戶并發(fā)請求A用戶跑到某一步時突然出現(xiàn)B用戶的用戶名和訂單金額被錯誤地打進了審計日志。排查鏈路第一反應(yīng)懷疑緩存鍵設(shè)置錯了。查完緩存沒問題但發(fā)現(xiàn)服務(wù)里復(fù)用了同一個規(guī)則會話對象。查看會話創(chuàng)建代碼發(fā)現(xiàn)為了性能優(yōu)化之前人把newSession()結(jié)果放進了本地線程池的ThreadLocal里期望同一線程復(fù)用。問題是ThreadLocal并不能保證同一個用戶的請求始終落在同一個線程。于是出現(xiàn)了A用戶的會話事實還沒清空B用戶的請求就插入到同一會話的情況。臨時方案是調(diào)高會話對象的使用周期把它從請求級改成業(yè)務(wù)級終態(tài)方案是把有狀態(tài)會話改成無狀態(tài)會話不保留跨請求狀態(tài)。這是有狀態(tài)會話最典型的坑一旦出現(xiàn)數(shù)據(jù)串號后果比規(guī)則不生效更嚴(yán)重。我的建議是除非業(yè)務(wù)有強需求否則不要為了解決性能問題去復(fù)用會話性能和正確性之間永遠(yuǎn)要優(yōu)先正確性。7.3 時間比較出現(xiàn)跨天差異現(xiàn)象一條“超過當(dāng)天18點不做自動審批”的規(guī)則晚上八點應(yīng)該攔截但實際沒有攔截。排查鏈路先檢查規(guī)則條件里的時間字段類型。發(fā)現(xiàn)規(guī)則寫的是currentTime 18:00:00字符串直接比較。不同規(guī)則節(jié)點所在服務(wù)器的時區(qū)一致但字符串格式在進入規(guī)則引擎前被某個環(huán)節(jié)轉(zhuǎn)換成了帶時區(qū)的日期時間導(dǎo)致比較結(jié)果和預(yù)期不符合。修復(fù)方式是把時間字段統(tǒng)一轉(zhuǎn)成時間戳再比較同時在前置接口層把日期時間標(biāo)準(zhǔn)化規(guī)則文件里禁止直接比較日期字符串。這個問題同時提醒我們規(guī)則引擎的匹配結(jié)果嚴(yán)重依賴事實對象的值因此“進入引擎前的事實清洗”要和“規(guī)則條件設(shè)計”放在一起考慮。字段時區(qū)不統(tǒng)一、格式不統(tǒng)一的臟數(shù)據(jù)進入引擎后規(guī)則寫得再對也可能得到錯結(jié)果。7.4 規(guī)則循環(huán)導(dǎo)致引擎卡死現(xiàn)象某個訂單觸發(fā)了某條規(guī)則后進程CPU飆升請求一直不返回直到超時。排查鏈路查看引擎日志發(fā)現(xiàn)同一個規(guī)則名在短時間內(nèi)被激活了上百次。打開該規(guī)則的動作區(qū)發(fā)現(xiàn)它修改了條件區(qū)依賴的一個字段條件滿足后再次激活形成了自觸發(fā)循環(huán)。查看規(guī)則文件歷史這個規(guī)則原本是修改另一個輔助字段的后來一次重構(gòu)把賦值對象改錯了指向了條件區(qū)的判斷字段。修復(fù)方向是把動作區(qū)和條件區(qū)完全解耦明確哪些字段是“輸入字段”哪些字段是“輸出字段”并用規(guī)則文件注釋標(biāo)明。循環(huán)觸發(fā)看起來很嚇人但其實規(guī)則引擎本身有防護機制如果你的版本沒有自動打開循環(huán)保護建議在配置中心里打開。同時給規(guī)則集設(shè)置合理的執(zhí)行超時時間就算真出現(xiàn)循環(huán)也能保證請求快速失敗而不是拖垮整個服務(wù)。8. 規(guī)則引擎上線前的檢查清單從測試到灰度最后這部分不是總結(jié)而是我們上線前用的內(nèi)部清單你完全可以抄走做二次確認(rèn)。規(guī)則編寫階段每條規(guī)則是否有清晰、唯一的命名說明字段里是否寫了業(yè)務(wù)含義。條件區(qū)是否有可以提前合并的模式減少無意義的重復(fù)匹配。動作區(qū)是否直接或間接修改了條件區(qū)依賴的字段如有是否顯式設(shè)計過循環(huán)策略。輸入字段的數(shù)據(jù)類型是否統(tǒng)一字符串格式是否滿足規(guī)則條件的格式要求。測試階段是否準(zhǔn)備了最小正向用例、最小反向用例和邊界值用例。是否測試了字段為空、字段類型異常、對象為null的場景。是否驗證了規(guī)則優(yōu)先級與你預(yù)期一致而不是僅靠“跑通得到正確結(jié)果”來推斷。是否在新規(guī)則集發(fā)布時對舊規(guī)則集做了回歸對比。發(fā)布與灰度階段規(guī)則集版本號是否遞增。是否先在一臺機器或少量流量上灰度。是否配置了規(guī)則執(zhí)行的監(jiān)控面板至少能看到命中率、平均耗時、異常規(guī)則名。是否部署了規(guī)則快速回滾能力?;貪L不只是把規(guī)則集降級還要確認(rèn)本地編譯緩存的清理。從運維角度我還建議給規(guī)則引擎單獨設(shè)置性能監(jiān)控指標(biāo)不要和應(yīng)用主流程的指標(biāo)混在一起。因為規(guī)則引擎的耗時波動往往能告訴你業(yè)務(wù)規(guī)則最近是不是出了變化把它獨立出來定位問題會快很多。我個人在實際操作中的一個體會是Drule2.0本來就可以成為業(yè)務(wù)和工程之間的一層“通用語言”。讓業(yè)務(wù)方用JSON格式維護基礎(chǔ)規(guī)則讓工程師把需要復(fù)雜邏輯的規(guī)則收口成自定義函數(shù)兩者結(jié)合規(guī)則引擎在團隊里才能真正用起來而不是變成一個誰都敬而遠(yuǎn)之的黑盒。希望這份偏實戰(zhàn)的梳理能幫你省下我當(dāng)初填坑的那些時間。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
欧美电影在线观看| 日韩综合久| www国产亚洲色婷婷com| 婷婷丁香五月天色播网站| 性爱111111| 亚洲第一成人无码A片| 五月丁香色婷| 四虎婷婷五月天| 色色狼人综合| 超碰在线中文字幕| 免费AV在线网址| 99精品偷自拍| 国产黄大片在线观看画质优化| 人人妻人人澡| 99久超碰| 2020日日干| 亚州日本欧州韩美高青高潮一| 大香蕉婷婷五月天| 91日本在线观看| 日本久碰| 丁香社92视频| 久久婷婷东京热| 国产肥白大熟妇BBBB视频| 久热69| 深爱激情五月天色婷婷| 日日干日日s| 爽极品色| 久久综合激情五月天| 视频久久9| 久热re视频在线观看网站| 色五月婷婷五月天| 欧美日韩二区在线| 秋霞网在线免费基地五月婷婷丁香| 日本色婷婷| 天天色综网| 婷婷成人五月天| 九八Av| 五月天伊人综合| 五月天婷婷成人网| 国产激情综合| 国外亚洲成AV人片在线观看| 成人在线二区| 色yeye色综合| 亚洲成人在线免费| 久热这里只有精品在线观看 | 任我肏视频精品| 香蕉AV福利精品导航| 99热这里有精品| 黄色三级日本| 91一起操| 操逼电影免费看| httpwww色com日本| 狠狠爱婷婷丁香| 国产操肏网站| 五月天天天综合| 婷婷五月天播| 人妻精品久久久久久久| aaa久久| 99热思思| 五月香婷婷| 婷婷丁香九色| 99热亚洲精品| 国产性色蜜乳| yellow视频在线观看91| 五月天开心网| 啪精品| 99热这里有精品首页10| 欧美欧盟性爱网| 99热香港| 六月婷婷色色色| 激情综合网五月| 九九亚洲视频| 丁香婷婷五月综合| 五月天激情Av| 99久视频| 九九中文色色| 亚洲激情淫网| 色婷婷色99国产综合精品| 丁香五月情| 人妻内射视频| 超热久碰.com| 色 五月俺去也| 五月丁香婷婷激情视频| 这里只有精品免费视频| 激情婷婷五月在线合集| 夜夜涩涩涩| 天天天天天天天操| 久久九九国产精品怡红院| 青青草国产亚洲精品久久| 激情小说色五月| 婷婷久久精品| 五月丁香六月激情欧美综合| 九九热精品视频在线观看| 99久久超级| 五月丁香亭亭操逼| 亚洲色爱综合| 香蕉影院色| 婷婷99狠狠躁天天躁中| 狠狠xx| 九九婷婷网五月天| 九九www| 亚洲婷婷视频| 久99视频在线观看| 婷婷玖玖五月天| 一区二区三区四区五区| 国产99久久久| 亚洲色人妻| 国产日日夜夜操| 99久久久久| 综合久久五| 丁香色婷婷| http://www.sd-xiangsu.com/| www99热| 婷婷天堂伊人| 丁香五月网| 国产在线中文字幕| 成人Av在线大片| 亚洲色vA| av婷婷丁香| 丁香五月婷婷亚洲色图| 九九碰九九爱97超碰| 丁香花狠狠婷婷亚洲中文字幕| 久久精彩综合视频| 99热这里只有精品22| 丁香五月ⅤA久久久| 亚洲一区先锋影音| 国外亚洲成AV人片在线观看| 亚洲五月婷婷在线| 国产69久久久欧美黑人A片| 99re这里只有精品99| 深爱开心激情| 天天色99| 中文字幕av在线| 婷婷九月丁香天堂丁香天堂| 婷婷激情五月| 日韩成人网址| 丁香成人五月天| 99久久婷婷国产综合精品青桔| 激情五月天色播| 色婷婷久久9.com| 婷婷五月天亚洲精品| 激情五月婷婷| 天堂婷婷丁香六月网| 国产精品美女久久久久AV超清| 激情婷婷丁香五月天| 婷婷欧美| 快乐激情五月色婷婷| 婷婷激情视频| 五月久久婷婷丁香| 九九99精品视频| 五月天成人免费视频| 狠狠色综合无线观看| 五月婷婷视频ab| 国产69久久久欧美黑人A片| 天天干,天天舔| 夜夜夜夜夜操| 噜噜噜精品欧美成人在线观看| 99久久精品免费精品国产_国产精品久久久久久_国产在线|日韩_久久国产精品电影 | 性一交一乱一交A片久久四色| 播播网色播播| 另类专区在线| 99热啪啪| 亚美欧色影院| 色综合中文| 久久婷综合| 黄色五月婷婷| 亚洲色图欧美色图日本视频| 五月婷婷五月丁香| 金桔一区二区ab地址| Av大香蕉| 开心五月深爱激情| 97精品自拍| 丁香五月天堂| 爱婷婷五月| 亚洲AV成人无码电影| 另类视在线| 97久久人人操| 亚洲成人av在线观看| 五月婷激情| 色婷婷成人网| 超碰色碰碰| 五月婷婷色播| 久久九九99字幕| 九九综合五月欧美| 婷婷伊人网| 夜夜爽天天干| 婷婷五月色天| 99'无码| 色婷婷中文| 五月天亚洲综合网| 丁香六月高清视频| 黄网网站在线播放| 色婷婷四虎| 91色综合网| 一根材五月婷成人| 久综合色| 99色久| 深爱激情六月天| 五月婷婷丁香色吧网| 久久激情天堂| 九九爱精品网站| 97超碰人人操| 久久人妻视步| 成人狠狠成人狠狠成人狠狠成人狠狠| 97久久超碰| 99ri6在线视频| 日本天天色| 五月草影视| 色欲久久综合| 婷婷色九月| 97成人丁香| 一起草性爱不卡视频| 综合五月激情| 天天婷婷天天| 丁香五月在线伊人| 色婷视频| 激情婷婷在线中文字幕| 色婷久| 欧美精品在线观看| 99国产精品久久久久久久久久久 | 色综合99| 久久九九热视频| 激情网第四色| 丁香六月婷婷综合麻豆| site:wpjngj.com| 日本97在线| 久久六月婷婷| 久久5 9视频免费观看| 亚洲av网站| 久久人妻视步| 五月婷婷无码| 五月婷婷 激情五月| 99热 免费| 婷婷中文无码| 久久激情五月天| 色婷婷色五月综合| 丁香玖玖| 26UUU欧美激情一区二区| 亚洲第二AV| 操逼五月婷婷| 亚洲mm免费| 国产AV一区二区三区最新精品| 亚洲综合在线播放| 五月天婷婷激情小说电影| 99激情| 六月合五月婷| 色婷五月天| 丁香五月成人网| 丁香婷婷五月| 丁香五月在线自慰| 亚洲激情四射| 亚洲乱码日产精品BD| 五月丁香婷婷综合网| 亚洲成人免费在线| 可以免费观看的AV| 日韩国产在线精品| 亚洲综合碰| 欧美激情-区二区三区| 久久婷婷五月综合色区| 国产操逼视频网站| www,色婷婷| 男人的天堂五月丁香| 日韩高清久久| 性色欲情 网站| 99re这里只有精品9| 噜综合| 亚色网站小视频| 情情五月天色| 狠狠穞A片一區二區三區| 丁香婷婷六月男男| 97人人超| 一起草日本| 99ri国产精品| 久热这里只有精品性色AV| 久久这里只有国产| 婷婷五月天成人网站| 丁香五月天激情网| 婷婷精品免费久久| 久九男女天堂| 啪啪黄页网| 综合色99| 五月婷婷人妻| 久久97| 中文字幕日产A片在线看| 午夜69成人做爰视频| www.亚洲激情.com| 婷婷欧美偷拍综合| 五月天激情久久| 久热9| 中文字幕日本最新乱码视频| 97干在线播放| 天天操天爱综合| 超碰不卡在线| 丁香花大香蕉婷婷综合| 欧美噜噜噜草| 舔色婷婷| 爽tv | caopeng97人人| 色婷婷狠狠干| 色五月婷婷在线| 97久久视频| 亚洲视频在线网| 五月天色色网站| 五月天小说激情| 欧美性猛交99久久久99| 黄急一级视频| 99在线er热| 激情开心五月亚洲| 久操婷婷| 天堂久久精品| 五月天亚洲色| 九九九九九九九九九九九九九九九九九九九在线视频 | 激情五月天影院| 超碰在线人妻| 另类伊人婷婷| www色五月| 成人做爰高潮A片免费视频 | 激情丁香五月婷婷| 日本不卡中文字幕| 五月婷婷av| 免费视频WWW在线观看网站| 欧美激情伊人| 五月丁香综合激情网| 99ER热精品视频| 黄色AAAAA| 最新色色五月天| 欧美久久九九| 五月丁香六月情婷婷久久| 爱久综合| 成人欧美日韩| www.91在线观看| 亚洲AV日韩在线观看| 色色色激情| 99热这里只有精品86| 六月丁丁香| 五月丁香婷婷啪啪| 五月花激情| 91丁香| 午夜色丁香| 国产欧美熟妇另类久久久| 高清视频一区| 五月丁香婷婷综合| 丁香五月电影| 日本色婷婷| 婷婷丁香九月| 婷婷在线精品| 五月婷婷无码| 久久综合五月| 99久久a线观| 伊人激情影院| 色天天狠狠干| 蜜臀综合久草| 丁香五月激情婷婷婷婷在线观看| 久久aaaaa| 五月叮香啪| 激情碰碰碰| 99视频在线精品免费观看2| 久热一区| 天天狠狠干| 果冻传媒A片一二三区| 26uuu国产精品| 男女啪啪做爰高潮无遮挡| 99热大全在线观看| 国产91资源在线| 亚洲热综合网在线观看| 丁香深五月婷婷| 深爱激清网| 伊人大香蕉综合在线| 五月天婷婷社区| 色婷婷五月中文字幕在线dvd| 五月天综合在线| 久久与婷婷| 亚洲精品白浆高清久久久久久| 五月花婷婷最新| 操精品9| 777色色色| 中日韩狠狠色| 婷婷激情图片| 华人在线免费| 五月婷婷丁香| 黃色三级三级三级三级 qixing300.shrkbk.com www.jinbozs.com tianmiaosw.com | 久久五月综合| 六月色色婷婷| 综合色网站| 九九碰九九爱97| 五月丁香啪啪啪免费看| 中文超碰视在线| 激情五月激情综合网| 色欲色天天香综合| 超碰人妻公开在线| 综合另类视频| 国产美女最新VA在线免费观看| 色综合婷婷99| 夜夜爱网站| 99亚洲大片精品永久在线观看 | 91大屁股精品| 色五月激情五月| 99爱在线观看视频| 亚洲精品五十一区| 98色花堂98t.R| 97福利视频| 五月丁香六月香综合激情| 91色碰| 99热.com| 中文在线成人| 99re这里只有精品在线观看| 久久婷婷五月天| 日本97在线观看| AV中文在线| 狠狠五月天激情| 久久99婷婷| 好吊兆人妻| 色播六月| 天天色噜| 操熟女成人网| 亚州激情在线视频| 色婷婷777狠狠| 超碰在线日夜| 婷婷色综合| 激情五月综合亚洲另类| 99热久草| 大波美女VA网站| 久久92| 欧美激情综合色综合色| 九九熱最新視頻| 日日噜噜久久婷婷五月天| 综合色色网| 狠狠爱五月婷婷| 狠狠草综合网| 五月丁香花伦理电影| 黑人无码一区| 色欧美日| 婷婷五月天天激情| 玖玖婷婷免费| 欧美电影在线观看| 婷婷丁香五月综合| 五月丁香六月激情综合| 色情五月婷| 狠狠插日日干撸| 婷婷一本和五月丁香| 另类激情五月| 99福利导航| 91精品国产色猫| 久久五月婷天天干| 六月婷综合| 久久久国产精品黄毛片| 五月丁香啪啪网| 婷婷五月色情天| 日韩 中文 欧美| 99综合| 久久开心五月天激情| 色婷五月天网站| 激情图片婷婷| 偷拍视频五月天| 丁香婷婷五月天色播| 五月综合激情久久| 丁香五月第九色| 婷婷五月天天| 六月丁香好婷婷| 国产成人va在线| 亚洲九九99精品视频在线播放| 热无码A∨| 日韩五月婷婷| sewuyuejiqingwang| 人人干天天操五月丁香| 五月丁香狠狠地噜噜噜噜| 色婷婷丁香五月丁香| 色插综合网| 草婷婷在线| 无码人妻一区二区三区免费九色| 97婷婷五月天| 天堂综合久久| 99热日本| 天天干天天日蜜臀av| 五月婷婷 婷婷五月 一区二区 久久久| 欧美成人AAA片一区国产精品| 青青久在线视频免费观看| www久视频com| 99热在线观看这里只有精品| 新五月天婷婷激情电影| 99久久玖玖| 丁香五月综合| 五月婷婷色| 26uuu国产| 97干干干丁香| 五月丁香在线观看99| 26uuu精品一区二区| 99在线精品观看99| 五月婷婷深爱六月| 婷婷五月天AV在线| 精品一区二区三区免费毛片爱| 在线观看国产高清视频免费网站 | 日本五月天一页| 伊人色综合网| 国产精品人成A片一区二区| 婷婷99综合| 五月花激情网| xxxx五月激情| 婷婷六月天激情| 五月婷色| 久久婷婷五月综合网| A1片久久久| 色色99色色| 色色色9| 丁香六月久久| 91在线97视频| 色10月婷婷视频| 精品三区影院| 日本色五月| 五月九九综合| 亚州激情网站无码| 激情综合网五月婷婷| 丁香五月成人| 碰碰人人漕| 丁香五月天天日| 天天爱天天操| 爱操天堂| 婷婷丁香五月天综合网| 亚洲天堂啪啪| 久热精品9999| 天天天天天操| XX色综合| 五月婷婷婷综合网| 欧美日韩AAAA| 老美AA片| 亚洲五月丁香综合网| ai97re99一本| 激情综合啪啪啪| 天天干天天操天天拍| 亚洲精品久久久久AV无码| 亚洲无aV在线中文字幕 | 在线中文字幕视频| 熟女激情五月天| 极品少妇高潮啪啪AV无码| 五月丁香久久丝袜啪啪| 五月开心深深爱激情综合| 色日本五月天| 狠狠人妻色综合| 久久久精品色| 亚洲超碰中文字幕| 五月婷婷影视| 777米奇影视第四色| 五月天大香蕉| 久99视频| 婷婷五月天AV| 99热精品在线| 久9视频| 天天干天天干天天操| 亚洲综合网在线| 婷婷伊人无码| 激情五月婷婷视频一区二区三区| 婷综合| 久久婷婷五月综合色丁香| 神马久久五月天| 五月丁香激情在线| 8050一级网| 5月色亭亭视频| 日本久久天堂| 天天日天天摸天天| 99热在线观看| 亚洲无码影音| 丁香婷婷人妻| 洗浴中心操B视频| 色婷青青| 五月丁香婷婷激情澎湃四射| 狠狠色综合五月人人| 丁香婷婷人妻综合网| 国产精产国品一二三在观看| 伍月激情天| 在线观看免费人成视频无码| 五月天自拍视频| 极品人妻VIDEOSSS人妻| 五月综合精品| 5五月综合网亚洲| 99热这里只有精品3| 丁香色情五月综合激情| 色天五月天在线观看视频| 色婷婷四色| 97干婷婷| 九九热这里有精品视频| 欧美精品999| 5月色亭亭视频| 色色色视频免费无码 | 人妻熟人中文字幕一区二区 | 区区欧美你爱| 婷婷五月天久久综合88| 一级性爱视频| 综合久久丁香婷婷,五月婷婷六月丁香,开心激情综合网,六月丁香在线观看,婷婷丁 | 久久久全国免费视频| 色婷婷丁香五月综合| 97操在线资源| 1024日韩| 亚洲国产成人裸舞| 久久婷婷丁香五月宗合| 激情综合五月婷婷| 中文字幕久久一区二区三区| 色五月婷婷激情基地| 亚洲av网站| 久久这有这里精品| 色婷婷综合在线| 97操在线视频| 精品皮股午夜AV| 日亚二欧美| 这里只有精品视频在线| va亚洲中文在线| 久9热视频在线观看| 色情综合网| 人妻久久久久久久久久久| 欧美大香蕉视频| 日本不卡一区二区三区| 色婷婷丁香五月| 思思99精品视频| 伊人激情网| 九月丁香婷婷| 国产成人亚洲综合A∨婷婷| 日本91在线| 97色 五月天丁香| 9l视频自拍九色9l视频自拍九色9l社区| 深情六月婷婷综合久久| 五月婷婷,狠狠操| 99精品成人无码A片观看金桔| 丁香五月Av| 五月婷婷 欧美| 丁香六月婷婷色XXXXX| 综合网激情| 国产五月天欧美色| 天天干天天日日| 色情婷婷。| 国产精品91抖高| 中文字幕成人| 夜色综合网| 五月天停停基地| 激情文学 综合 色| 99热亚洲| 夫妻超碰在线| 91热视频| 久草热8精品视频在线观看| 婷婷在线播放| 夜夜操,天天撸| 新99思思视频| 综合玖玖性爱免费视频| 青996青| 婷婷最新地址| 欧美成人精品A片免费一区99| 91超级碰在线| 亚洲天堂色色| 丁香婷婷成人网站| 亚洲色就是色色色| 久久这里都是精品| 97碰在线| 婷婷色色丁香五月天| 激情五月天激情综合网| 能直接看的AV网站| 日韩久久这里只有精品| 丁香五月日本| 啄木鸟黑丝一区二区| 精品视频这里只有精品| 91久久99久久91熟女精品| 影音先锋男人资源站一区二区| 高清免费在线视频| 老师高潮流白浆喷水的A片| 无码少妇高潮喷水A片免费| 久久久久人妻网址| 久久婷婷五月天| 久久五月丁香婷婷| 五月天综合在线| 日本色婷婷| 激情综合网五月婷婷| 丁香 久久| 26.uuu丁香五月婷婷| 久久免费精彩视频| 丁香综合婷婷五月天| 国产精品VA在线| 天天日天天干天天操| 99热久| 桃色五月天| 97干视频在线| 久久五月丁香| 久久婷婷五月天| 成人综合网站| 丁香五月花影院| 91午夜婷婷狠狠久久综合9色| Aaa久久| 爱狠射| 日韩一级网站| 在线婷婷| 久久伊人日日夜夜| 久久婷婷五月综合色和| 五月丁香五月综合欧美| 五月天开心色情网| 91精品丝袜久久久久久| av操逼网| 五月丁香婷婷啪啪综合| 日本一级一级一级一级| 五月婷婷色丁香| 五月深爱激情网| 日本美女五月天| 色婷五月| 国产日产亚系列精品版优势| 啪啪操网| 国产日产成人亚洲欧美国产VA| 综合xx网| 久色视频| 色婷婷视频| 另类亚洲电影| 少妇搡BBBB搡BBB搡毛茸茸 | 婷婷色九月| 996er热| 色婷婷综合久久| 久久久久激情网| 国产色丁香| 五月天成人小说网| 人人摸人人搞| 久久ri精品视频| 五夜婷婷| 99视频这里有精品免费观看| 大香蕉人妻| 日韩专区五月天婷婷丁香| 婷婷五月天AV在线| 韩国婷婷丁香五月| 久久久97| 好大好粗嗯啊-一级黄色大片免费观看-成人AV| 91超碰在线观看| 色五月激情基地| 91婷婷丁香| 丁香五月欧美婷婷综合| 97碰久久| 九九精品在线观看视频6| 91超级碰碰| 午夜]香婷婷深深爱| 99综合免费视频| 99色色色色| 国产精品涩涩涩视频网站| 国产资源在线视频| 色高清无码视频| 久草大| 色护士综合| 婷婷五月AA五月在线| 色五月五月婷婷| 97色综合| 日本噜噜色网| 超碰99在线观看| 婷婷五月丁香花综合| 五月丁香激情欧洲啪啪| 丁香六月天| 丁香五月天堂网| 五月天婷婷基地| 国产亚洲AV人片在线| 日本美女天天日天天爽| 另类天堂| 变态另类9| 婷婷中文字幕| 久久婷婷六月综合综合| 99热色在线精品| 欧美性生交XXXXX无码小说| 99热啪啪| 色五月成人| 狠狠色丁香久久| 六月婷婷中文字幕| 超碰在线个人观看| 欧美VA在线观看| 黄色热99| 婷婷激情综合网| 婷婷五月天成人| 欧日美女Va| 这里只有精品1| 色婷婷六月天| 91久久久久久久久18| 色婷婷先锋| 五月丁香激情综合网| 六月婷婷日| 久久婷婷五月天亚洲欧美| 日韩黄在免| 婷婷六月中文字幕| 九九色婷婷五月天| 五月婷婷丁香在线视频| 伊人免费视频9| 亚洲成人va| 东北熟女高潮99综合99| 精a品a| 五月丁香啪。| 性色婷婷| 轮奸综合网| 99久久99久久综合| 五月婷婷香蕉| 色吧网综合| 人妻久久久久久久 | 色色色热热热| 色你久久| 成人午夜无码视频| 欧美综合丁香网| 欧美三级视频| 狠狠爱五月婷婷| 日韩无码成人电影| 丁香六月啪啪| 亚洲妇女熟BBW| 狠狠夜夜五月丁香| 丁香五月婷婷社区| 天天日,天天干,天天操| www.久久爱.com| AV性爱网| www.五月丁香av| 午夜日日| 看片视频在线免费日产在线看| 婷婷五月丁香狠狠| 亲子乱AV-区二区三区| 丁香婷婷六月| 九九国产精视频| 国产精品久久久久久喷浆| 亚洲五月色| 亚洲AV日韩无码| 99在线精品观看99| 岛国AV网| 99re热精品在线视频| 欧美成人在线观看| 久色激情| 四虎婷婷五月天| 色色丁香色五月| 九九这里都是精品| 婷婷五月天激情五月天| 成人丁香色| 在线看的免费网站| 丁香久久综合| 玖操97| 丁香蜜臀黄色婷婷五月天| 这里只有精品视频| 亚洲色网址| 99爱免费在线观看| 玖玖爱导航| 色五月综合| 99看片| 噜综合| 日本一级大片| 蜜臀AV在线观看| 操九色| 热的无码综合视频| 日日噜狠狠| 久久这里只有精品视频15| 99热.com| 五月激情影院| 青青草婷婷综合五月| 丁香五月在线自慰| 亚洲182在线观看| 高清无码入口| 丁香激情五月| 婷婷成人小说综合| 丁香婷婷激情综合五月激情| 2022人人操人人看| 婷婷99狠狠躁天天久久久九九九| 五月婷婷与六月丁香图片激情| 婷婷六月伊人| 五月婷婷开心色伊人| 欧美综合五月丁香六月婷| 久久婷婷原创视频| 亚洲成人网站在线观看| 97精品欧美91久久久久久久| 五月成人天| 九玖欧洲亚洲| 五月天婷婷在看| 丁香五月婷婷亚洲人| 97碰碰在线观看视频| 日本美女97在线视频| 色婷婷九月| 狠狠色婷婷7777久| 日韩成人电影在线播放| 日婷婷久久开心| 婷婷五月中文字幕国产| 丁香 婷婷五月| 五月天色色激情综合| 亚洲色激情| 亚洲激情五月| 激情婷婷狠狠干| 久久五月六月| 综合五月草| 日韩成人网址| 五月色婷| 激情四射五月天| www.91在线观看| 精品动漫 无码av| 9l视频自拍九色9l黑人| 久爱综合| 99久| 久久99激情五月天| 久久综合站| 99丁香五月| 91狠狠色丁香婷婷综合久久狠丁香综合久久精品 | 五月丁香A片| 百度一下国产精品A| 熟女色色一区二区| 操日本99| 色综合久久无码| AV中文字幕夜夜操b天天摸bb | 日本精品人妻无码77777| 五月丁香综合网| 丁香五月av| 国产偷人爽久久久久久老妇APP| 99热在线播放| www.97视频| 丁香五月天久久| 日本大人久久| 色色色五月天激情资源| 色 五月 天 婷婷 丁香 九月| 综合网狠狠| 色婷婷www| 级情九色| 狠狠做五月婷婷| 五月丁香六月婷婷综合伊人| 国精产品一区二区三区| 天天舔天天操| 丁香五月日韩| 久久曰曰| 色色色com| 九九久久免费视频44| 国产精品视频| 婷婷六月丁香开心深深爱| 美妞av| 丁香五月婷婷手机| 天天射影院| 婷婷丁香18| www.丁香六月婷婷久久天堂影院.con| 天天肏在线视频| 琪琪色热色色| 五月天婷婷六月激情网| 怡红院院久久| 激情六月天婷婷| 婷婷综合网| 中文字幕丰满孑伦无码专区| 亚洲免费成人电影AV| 五月婷婷深深爱| 激情五月丁香综合蜜桃| 性色视频| 综合激情视频| 精品AV无码超碰| 亚洲人妻Av| 五月天婷婷在看| 色五月亚洲| 97精品综合| 丁香影院五月综合| 99久久综合网| 五月丁香婷婷中文网| 九九色图| 国产欧美性成人精品午夜| 国产精品成人网站| 丁香五月网络网络| 五月丁香六月激情视频| 超碰在线99| 99视频在线观看视频| 婷婷四月 成人 狠狠干| 九九精品在线观看视频6| 丁香五月激情婷婷| 亚洲一二三网| 高清无码.com| 五月天激情婷婷| 日本va网站| 婷婷五月激情视频| 久久久免费精彩视频| 99人人干人人操| 丁香香五月激情免费视频| 五月婷婷丁香五月婷婷丁香| 少妇水多A片太爽了| 99re热99| 欧美成人色婷婷| 欧美日韩精品人妻狠狠躁免费视频| 丁香五月停停基地| 亚洲五月天婷婷综合| 综合网亚洲| 色哟哟性爱av| 五月天色婷婷网| 色99在线| 九九99免费视频| 五月婷婷亚洲| 色色色香蕉五月婷| 美女丁香五月天| 九热免费视频| 97碰操| 五月精品免费XXX| 色综合久| www.久久| 五月婷网| 亚洲无码yw| 婷婷五月另类网站| 91男人操女人视频| 精品九九在线观看| 夜夜干天天操| 91精品久久久久久77777| 成年人丁香五月| Www.se.久久| 色小说五月婷婷| 狠狠色综合网| 色婷婷黄色网络| 99在线热| 色综合久久综合中文综合网| 五月天婷婷综合| 色九月综合网| 婷婷伊人五月天| 九九精品丁香花| 狠狠五月天婷婷激情网。| 国产偷人爽久久久久久老妇APP| 六月99天天婷婷激情综合| 超碰操网| 久久99视频| 九九综合久久| 久久五月综合| 深爱激情六月天| 亚洲操人| 久久精品这里只有精品免费首页| 91成人品| 五月丁香亚洲综合| 99久在线精品99re8热| 91人妻人人做人碰人人爽九色| 五月天久久网站| 超级碰碰碰97免费| 成人一级片| 色婷婷电影| 天天操夜夜啊| 精品一二三区久久AAA片| 一本久久亚洲五月婷婷| 日本人妻伦在线中文字幕| 婷婷的五月天另类视频| 9精品久久999| 日日夜夜小色哥| 狠狠久久婷| 99无码| 99自拍视频在线观看| 天天插天天爽| \\五月天婷婷激情| 久热99中文字幕| 亚美欧色影院| 国产无人区大片| 色五月婷婷久久| 亚洲天天免费| 九久久九精品视频| 五月婷婷啪啪| 大香蕉五月天婷婷| 99激情| 亚洲人妻五月丁香婷婷| 婷五月天六| 二色AV| 五月丁香六月婷婷不卡免费无码| 欧美十二区| 9九色首页| 激情久久四色| 成人精品免费在线观看| 亚洲午夜一区二区| 五月婷婷开心亚洲无| 99re欧美精品| 六月婷婷啪啪| 天天爱天天做天天舔| wwww.9免费视频| 91爱啪啪| 亚洲国产成人裸舞| 婷婷久久精品| 97精品人人A片免费看| 丁香五月天在线| 色综合久| 99视频综合网| 操碰97| av网站中文| 91超碰人人操| 丁香五月无码| 9久热在线视频精品| 欧美交换配乱吟粗大25P| 色偷偷色婷婷| 天天天久久久| 39视频第二区| 九九亚洲视频| 天天干天天插| oVV4WIB3vFi8D| 五月丁香花视频| 操操操97| 亚洲最大在线| 激情小说之五月| 午夜免费试看| 99天堂网最新| 婷婷五月花| 97久久精品| 婷婷视频在线| 五月丁香色婷婷婷基地| 密臀av无码人妻精品| 中文字幕日产A片在线看| 国产亚洲色婷婷久久99精品91| 丁香六月中文| 久久激情五月天| 日逼影音先锋AV男人资源站| 丁香五月性爱| 色欲午夜无码久久久久久张津瑜| 亚洲五月婷天天操| 婷婷99狠狠躁天天躁| 色站9/| 五月开心播播网| 丁香色婷婷| 99视频九九热| 五月丁香六月婷婷亚洲综合| 亚色网站小视频| 丁香五月天网站| 色九九九九| 热久91| 久久se 综合网 | 操B五月天| 九九超碰人人| 婷婷丁香五月社区亚洲| 国产精品国产成人国产三级| 久久98热re| 色99在线视频| 99热这里只有精品一区| 日本ww亚洲| 狠色狠色狠狠色综合网| 亚洲高清在线| 色综合网址| 天堂网啪啪| 色婷婷性爱| 97丁香视频| 大香蕉丁香婷婷| 色五月婷婷在线观看第一页舔| 99热婷婷| 超碰在线国产| 婷婷欧美| 五月在线| 天天干电影| 夜夜撸日日操| 色婷婷电影网| 99热这里只有精品8| 狠狠香蕉| 久久久网站| 欧美日韩成人在线| 久久综合99| AV操操操| 亚洲人人操| av九九| 国产精产国品一二三在观看| 伊人激情AV一区二区三区| 激情综合五月| 99网| 色.五月综合网| 久操香蕉| 月丁香久久久| 99内射视频| 99精品在线观看视频| 久久婷婷网| 久久久久9| 开心六月丁香五月婷婷| 天天在线天天综合网色| 97久久香草精品视频| 狠狠操.COM| 欧美婷婷五月丁香| 丁香五月婷婷大香蕉| 九九热啪啪| AV人人操| 人妻熟人中文字幕一区二区| 韩日另类| 天天综合色99| 26uuu丁香婷婷五月| 色色丁香| 狠狠人妻久久久久久综合丁香| 亚洲行行色色| 天天操比比| 99操逼| 极品人妻VIDEOSSS人妻| 婷婷丁香成人色综合| Aα在线免费观看| 久热 91| 亚洲国产色婷婷| 久久久99精品| 狠狠操天天干| 天天干电影| 韩国中文字幕91| 欧美激情久| 99re这里只有精品99| 婷婷五月天深爱| 婷婷色正月| 婷婷中文在线| 国产免费性爱| 国产婷婷综合| 欧洲亚洲免费视频区| 亚洲六月色| 97资源碰碰| 少妇水多A片太爽了| 97热九九| 日本www五月婷婷| 五月天最新网| 99热这里都是精品| 五月婷婷丁香综合,亚洲天堂| 91狠狠综合网| 五月婷婷丁香五月婷婷| 九九综合色综合| 啪啪五月天啪啪| 深爱激情网综合| 九九黄色网| chaopeng在线人人| 婷婷综合| 五月天综合图片| 婷婷五月婷婷| 综合色视频| 操笔无码| 欧美影院| 2018夜夜草| 久久五月视频| 亚洲色婷婷视频| 丁香五月av| 伊人五月婷婷国产视频| 天天综合天天做天天综合| 69精品人人人人| 丁香五月激情婷婷婷婷在线观看| 99热精品在线| 国产探花一片区| 九九热再线九九视频免费在线观看| 一起草性爱不卡视频| 婷婷亚洲天堂| 婷婷五月综合社区| 99思思热只有在这里看| 亚洲色频| 成人av观看| 色色cOm| 亚洲综合五月天| 久久总和99| www,色色色网站| 99色爱| 伊人久久激情图区五月| 丁香狠狠色婷婷| 婷婷基地成人五月天| 久热最新视频| 狠狠干夜夜干| 91九色小视频| 亚洲日韩欧美综合VA| 综合天堂AV久久久久久久| 天天操天天爱天天日| 九九无码| 伊人成综合五月婷婷| www.com操| 五月丁香影院| 丁香五月亚洲AV| 婷婷激情综合| 丁香五月激情网| 丁香婷婷视频在线| 第四色色六月色综合| 久久婷婷色丁香| 丰满老熟妇BBBBB搡BBB| 91婷婷在线| 99操久久| 99色色| 婷婷五月丁香综合激情| 91碰九色| 噜噜色婷婷| 99ri视频在线观看| 五月激情综合美女久久| 91九九九九九九| 丁香五月婷婷在线视频| 丁香六月婷婷操逼网| caopeng97日韩| 香蕉久久av一区二区三区 | 亚洲深喉AV| 能看的av片| 8090在线影视少妇| 久久婷婷色丁香| 亚洲精品白浆高清久久久久久| 久鲁鲁色网| 九九色色| 色婷綜合网| 这里只有精品96| 玖久精品视频9| 欧美97超碰| 色婷婷狠狠干芒果TV| 91猫咪国产在线播放| 天天色天天| 性色婷婷| 六月激情综合|