免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Drule2.0規(guī)則引擎從入門到排坑:配置、會話與生產(chǎn)實踐

Drule2.0規(guī)則引擎從入門到排坑:配置、會話與生產(chǎn)實踐 接手Drule2.0這套規(guī)則引擎的時候我心里其實有點嘀咕。項目從1.x升級過來舊的規(guī)則文件全得重寫接口層面也動了不少。當(dāng)時團隊里沒人系統(tǒng)整理過新版的用法文檔東一塊西一塊大多是一句“按老版本兼容”就帶過了。結(jié)果上線測試第一周我們就被規(guī)則不生效、會話狀態(tài)串掉這類問題連續(xù)錘了好幾次。后來我花了兩周時間把Drule2.0從配置、開發(fā)到上線排查的整套鏈路重新捋了一遍也把生產(chǎn)環(huán)境踩過的坑都補進了內(nèi)部使用手冊。這篇就當(dāng)是一個更詳細(xì)的外部版給正在或者準(zhǔn)備用Drule2.0的同行一個參考。內(nèi)容按照我對這套引擎的理解來組織重點放在“怎么用對”和“怎么排查錯”上適合后端開發(fā)、規(guī)則配置人員以及對規(guī)則引擎選型感興趣的同學(xué)。1. 規(guī)則引擎到底解決了什么問題先對齊一個認(rèn)知很多團隊把規(guī)則引擎當(dāng)成“if-else的替代品”這么理解不能說錯但容易用歪。以我參與的這個金融風(fēng)控項目為例最直接的痛點不是代碼寫不出判斷邏輯而是業(yè)務(wù)規(guī)則天天變下午三點業(yè)務(wù)方提需求說“貸款額度超過五萬且歷史逾期超過兩次的訂單要人工審核”第二天上午就要上線。傳統(tǒng)的做法是改代碼、發(fā)版、走回歸一套流程下來最快也得一兩天而且改一次代碼就要動一次測試用例成本嘩嘩往上漲。Drule2.0把“決策邏輯”從業(yè)務(wù)代碼里拆了出來變成了獨立的規(guī)則文件。規(guī)則文件可以由業(yè)務(wù)分析師或運營人員通過配置界面維護也可以由開發(fā)以文本形式提交到倉庫再走CI流程發(fā)布。推送一次規(guī)則相當(dāng)于業(yè)務(wù)邏輯的即時熱更新不需要重啟服務(wù)也不需要重新編譯主程序。再說深一層規(guī)則引擎的價值不只是“快”還有一個容易被忽略的點可審計。金融項目做風(fēng)控決策需要回答“這筆訂單為什么被拒”這個問題。如果判斷邏輯散落在代碼的十幾個if-else里你很難快速給出完整依據(jù)。規(guī)則引擎里每一條規(guī)則都有獨立的命名、條件描述和動作定義引擎執(zhí)行完還可以輸出詳細(xì)的決策軌跡我在第7章會專門講這個問題。Drule2.0和典型的Drools等老牌引擎相比最明顯的差異是降低了規(guī)則編寫的門檻同時把“規(guī)則集”和“會話生命周期”這兩個概念徹底分開了。這意味著同一條規(guī)則可以被不同業(yè)務(wù)場景以不同參數(shù)加載執(zhí)行也允許引擎在同一進程里跑多個相互隔離的規(guī)則會話。這個設(shè)計對于中大型項目來說很關(guān)鍵因為同一個風(fēng)控服務(wù)可能同時服務(wù)好幾個產(chǎn)品線每條產(chǎn)品線的規(guī)則模板和優(yōu)先級策略并不相同。如果只是幾十條固定判斷說實話硬編碼在代碼里并不丟人。規(guī)則引擎的優(yōu)勢要等規(guī)則量上了百、變更頻率上了周、參與維護的人超過兩三個之后才會明顯體現(xiàn)。所以我給你的第一條建議是先別急著給項目上規(guī)則引擎先盤一下規(guī)則的規(guī)模和變更頻率。2. 六個核心概念從規(guī)則文件到會話一次講透Drule2.0的官方文檔里概念很多但真正貫穿日常開發(fā)的其實就六個。把這六個概念和它們之間的關(guān)系搞明白后面所有配置和接口調(diào)用都不會跑偏。2.1 事實引擎操作的對象事實是進入規(guī)則引擎參與匹配的數(shù)據(jù)對象。它可以是一個訂單對象、一個用戶實體也可以是一個Map。引擎本身不關(guān)心事實的業(yè)務(wù)語義只把它當(dāng)作“是什么類、有哪些屬性、當(dāng)前值是多少”的數(shù)據(jù)載體。在Drule2.0的Java客戶端里事實通常是POJO規(guī)則里通過全限定類名加屬性引用來取值。比如規(guī)則文件里寫OrderInfo(amount 50000)就是在匹配一個名為OrderInfo的事實對象并且要求它的amount字段大于等于50000。有一點要注意同一個會話里可以插入多個不同類型的事實引擎在處理時會把這些事實統(tǒng)一放進工作內(nèi)存規(guī)則的條件部分可以引用其中任意一個或多個。2.2 條件與動作規(guī)則文件的一左一右規(guī)則文件里最核心的兩個部分是條件Left Hand Side簡稱LHS和動作Right Hand Side簡稱RHS。條件描述“什么時候觸發(fā)”動作描述“觸發(fā)后干什么”。條件部分通常由字段約束、邏輯組合和事實之間的關(guān)聯(lián)組成動作部分可以是修改變量值、調(diào)用日志、對外發(fā)消息或者只是簡單地把規(guī)則名記下來。我自己寫規(guī)則時的一個習(xí)慣是盡量讓動作簡單可控不要在動作里寫太復(fù)雜的處理邏輯。規(guī)則引擎適合做決策不適合做重型業(yè)務(wù)處理。如果某個動作需要調(diào)用第三方服務(wù)或者寫數(shù)據(jù)庫建議放到引擎外部去做規(guī)則里只輸出一個“建議結(jié)果”這樣可以保持規(guī)則文件的輕量。2.3 規(guī)則集獨立命名的規(guī)則容器規(guī)則集是一個邏輯容器把一組規(guī)則打包在一起。Drule2.0里一個規(guī)則文件或者一個發(fā)布包通常對應(yīng)一個規(guī)則集。規(guī)則集之間是隔離的這意味著你創(chuàng)建會話時只能加載指定的一個或幾個規(guī)則集不會互相干擾。項目里如果你的規(guī)則被分成“反欺詐規(guī)則集”“額度審批規(guī)則集”“黑名單規(guī)則集”它們在加載時就是獨立、隔離的。這帶來一個很大的好處你可以單獨測試、單獨發(fā)布某一個規(guī)則集而不影響其他正在運行的規(guī)則。2.4 無狀態(tài)會話與有狀態(tài)會話別選錯這是Drule2.0實際使用中最容易出問題的地方也是文檔里描述最抽象的地方之一。無狀態(tài)會話就像一次性的純凈水杯你把事實丟進去引擎當(dāng)場算完返回結(jié)果會話直接銷毀。適合一次請求一次決策的場景比如“判斷這個訂單要不要風(fēng)控攔截”。有狀態(tài)會話則像一個持續(xù)對話的窗口你可以在會話里分多次插入事實每次插入后觸發(fā)規(guī)則還可以在后續(xù)查詢之前規(guī)則的執(zhí)行結(jié)果。適合需要分階段決策、或者在一個流程里多次依賴上一次結(jié)果的場景。我強烈建議除非你的業(yè)務(wù)流程確實需要跨多次觸發(fā)保存中間狀態(tài)否則優(yōu)先用無狀態(tài)會話。有狀態(tài)會話用不好最典型的問題就是“上次請求的數(shù)據(jù)污染了本次結(jié)果”我在第7章會詳細(xì)講一個因為復(fù)用有狀態(tài)會話導(dǎo)致的線上事故。2.5 規(guī)則模板與動態(tài)參數(shù)前面說過Drule2.0降低編寫門檻主要體現(xiàn)在規(guī)則模板機制上。你可以在規(guī)則文件里定義模板變量比如minAmount和maxAmount然后在創(chuàng)建會話時傳入?yún)?shù)值。同一個規(guī)則集因為傳入?yún)?shù)不同可以形成“消費貸額度偏好模板”和“小微企業(yè)貸額度偏好模板”兩套執(zhí)行效果。這比舊版本里為每個商戶復(fù)制一份規(guī)則文件的做法干凈多了。以前我們給商戶A寫一份規(guī)則、給商戶B復(fù)制一份再改改參數(shù)結(jié)果規(guī)則數(shù)量指數(shù)級膨脹維護成本高到想罵人。用模板參數(shù)后一份規(guī)則同時服務(wù)幾十個不同配置的對象規(guī)則文件本身幾乎不需要重復(fù)維護。2.6 規(guī)則函數(shù)的擴展方式Drule2.0不可能覆蓋所有業(yè)務(wù)場景的自定義邏輯。文件里還預(yù)留了自定義函數(shù)的注冊接口開發(fā)人員可以寫一小段Java代碼把判斷邏輯打包注冊成函數(shù)規(guī)則里直接調(diào)用。比如根據(jù)身份證號計算年齡段、根據(jù)經(jīng)緯度判斷是否屬于同一城市這些邏輯就不是規(guī)則語言能優(yōu)雅表達(dá)的注冊成函數(shù)后在規(guī)則文件里用一行調(diào)用就行。這里有一個邊界要守好自定義函數(shù)應(yīng)該是“判斷工具”不要用自定義函數(shù)去操作其他事實對象或者修改全局變量否則會讓規(guī)則執(zhí)行的可預(yù)測性變得很差。3. 規(guī)則文件長什么樣一份風(fēng)格靈活但邊界清晰的配置Drule2.0的規(guī)則文件在社區(qū)版里支持好幾種格式不同行業(yè)使用習(xí)慣也不同。我基于實際項目經(jīng)驗把規(guī)則文件拆解成兩層來看。3.1 規(guī)則文件的基本骨架下面這段是個風(fēng)格類似DRL但做了簡化脫敏的示例用來展示核心字段的邏輯關(guān)系。Drule2.0對規(guī)則文件有一套schema校驗規(guī)則如果使用了不屬于本版本的關(guān)鍵字發(fā)布包在校驗階段就會報錯。具體的文件名后綴和packaging方式建議以你所用發(fā)行版的官方CLI或編輯器插件提示為準(zhǔn)。package demo.risk import com.example.dto.OrderInfo import com.example.dto.UserProfile rule 高危訂單攔截 when $order : OrderInfo(amount 50000, channel ONLINE) $user : UserProfile(riskLevel HIGH) then $order.setIntercept(true); $order.setReasonCode(AMOUNT_HIGH_WITH_RISK); drule.log(hit rule: HIGH_RISK_ORDER); end幾個關(guān)鍵點拆開說package表示所屬包名類似Java的包主要用于組織和隔離規(guī)則。import引入需要操作的事實類。不引入直接用字符串類名也可以但會犧牲編譯期檢查線上跑出來容易出類型不匹配。rule 名稱規(guī)則名稱在當(dāng)前規(guī)則集里必須唯一。一旦重復(fù)發(fā)布時直接報錯。我曾經(jīng)見過兩個同事各自加了同名規(guī)則結(jié)果發(fā)布校驗階段卡了好久。when條件區(qū)。上面示例里兩個模式之間默認(rèn)是“同時滿足”的關(guān)系。Drule2.0默認(rèn)所有條件都是與的關(guān)系如果你想表達(dá)“或”需要顯式使用or關(guān)鍵字或者拆成兩條規(guī)則。then動作區(qū)。用類似Java的語法修改變量、打日志。注意變量上的$前綴只是慣例方便區(qū)分規(guī)則變量和事實對象的內(nèi)部字段不是強制的。3.2 JSON風(fēng)格規(guī)則描述文件業(yè)務(wù)配置團隊更習(xí)慣的是JSON格式的規(guī)則描述。Drule2.0支持把規(guī)則拆成“描述動作腳本”的結(jié)構(gòu)。下面是我們在某個信貸審批場景里用過的簡化結(jié)構(gòu){ ruleSet: loan_check, ruleList: [ { ruleName: loan_overdue_check, description: 歷史逾期超過3次且當(dāng)前未結(jié)清的單直接拒絕, priority: 10, enabled: true, condition: { type: and, items: [ { field: overdueCount, operator: , value: 3 }, { field: currentStatus, operator: , value: UNPAID } ] }, action: { type: script, script: order.setResult(REJECT); order.setReason(OVERDUE); } } ] }JSON格式對非開發(fā)人員相對友好而且天然支持模板變量替換。配置人員不需要理解Java語法只需要知道字段名、比較符和結(jié)果集就能自己維護一套規(guī)則。我們把字段清單維護成一份數(shù)據(jù)字典上面的overdueCount、currentStatus就是字典里的標(biāo)準(zhǔn)字段規(guī)則配置人員照著字典寫基本不會出界。3.3 條件操作符的種類和用法Drule2.0常用操作符大概是這些操作符示例含義說明status CLOSED等于字符串用雙引號amount 10000數(shù)值比較age 25數(shù)值比較和上面一樣支持整數(shù)與小數(shù)!status ! BLOCKED不等于inchannel in [APP, MINIAPP]屬于給定集合not inlevel not in [LOW, MEDIUM]不屬于給定集合matchesmobile matches ^1[3-9]正則匹配containstagList contains VIP集合字段包含某元素exists/not existsexists(SubOrder)工作內(nèi)存中是否存在某類事實實際項目中遇得最多的是兩種問題一是字符串比較漏了引號導(dǎo)致當(dāng)成字段名解析二是時間類型的比較沒有嚴(yán)格統(tǒng)一格式導(dǎo)致規(guī)則執(zhí)行結(jié)果前后不一致。時間字段我建議統(tǒng)一轉(zhuǎn)成時間戳long類型再比較不要直接比較日期字符串。3.4 動作區(qū)支持的不只是賦值動作區(qū)看起來像Java但它主要做三類事情給事實對象的字段賦值比如order.setResult(REJECT)。調(diào)用規(guī)則引擎內(nèi)置API比如drule.log()輸出執(zhí)行日志或者用drule.insert()往工作內(nèi)存里插入一個新事實從而觸發(fā)后續(xù)規(guī)則。調(diào)用注冊好的自定義函數(shù)比如if (riskUtil.isBlack(mobile)) { ... }。動作區(qū)不適合做的是長時間阻塞的IO操作、復(fù)雜事務(wù)、需要異步回調(diào)的流程。遇到這些需求更合理的做法是規(guī)則只負(fù)責(zé)設(shè)置一個標(biāo)記值真正的處理邏輯放到引擎外部通過監(jiān)聽器或者后置鉤子去完成。4. 引擎內(nèi)部是怎么找到那條規(guī)則的優(yōu)先級、沖突與規(guī)則鏈用規(guī)則引擎的人經(jīng)常有一個疑問“我插入了事實引擎到底按什么順序執(zhí)行規(guī)則如果好幾條規(guī)則都能匹配上先執(zhí)行誰”這一章把順序問題講透。Drule2.0的處理機制并不神秘它本質(zhì)上做的是模式匹配匹配完成之后再進行規(guī)則沖突的解決與激活執(zhí)行。4.1 規(guī)則執(zhí)行的兩階段流程第一階段是“匹配”。事實插入工作內(nèi)存后引擎會把事實對象和當(dāng)前規(guī)則集里的所有規(guī)則條件進行匹配。注意不是順序遍歷那種簡單匹配引擎內(nèi)部有一個索引結(jié)構(gòu)來緩存模式與事實之間的關(guān)聯(lián)這也是為什么大量規(guī)則下引擎的執(zhí)行性能依然能穩(wěn)住的原因。這個階段的結(jié)果是產(chǎn)生一個“激活表”也就是“哪些規(guī)則在當(dāng)前事實組合下被滿足”。第二階段是“執(zhí)行-沖突解決”。如果激活表有多條激活的規(guī)則引擎按照議程Agenda的次序逐條執(zhí)行動作區(qū)的代碼。一條規(guī)則動作執(zhí)行完畢后如果它向工作內(nèi)存插入了新事實或者修改了已有事實引擎會重新進行匹配產(chǎn)生新一輪激活繼續(xù)執(zhí)行直到?jīng)]有新激活規(guī)則為止。4.2 優(yōu)先級是怎么排的數(shù)字越大越先跑Drule2.0里的規(guī)則優(yōu)先級用priority字段控制默認(rèn)值是0。數(shù)值越高在當(dāng)前議程里越靠前執(zhí)行。規(guī)則文件里可以寫成rule 高優(yōu)先級規(guī)則 priority 100 when ...在JSON風(fēng)格里對應(yīng)priority: 100。我在配置優(yōu)先級時踩過一個教訓(xùn)不要指望同一事實下互不相關(guān)的規(guī)則也嚴(yán)格按照優(yōu)先級排順序。優(yōu)先級只在“匹配同一組事實的規(guī)則”之間的執(zhí)行順序上有意義如果規(guī)則觸發(fā)的條件本質(zhì)上不同那么它激活的時機都不一樣硬調(diào)優(yōu)先級反而不容易理解。把規(guī)則按業(yè)務(wù)階段分層優(yōu)先保證層內(nèi)順序正確跨層的順序交給事實流轉(zhuǎn)去控制是我目前覺得最清晰的做法。4.3 沖突解決的三條隱性規(guī)則如果優(yōu)先級相同且都匹配了同一組事實Drule2.0內(nèi)部按照一個固定的規(guī)則來排序雖然不同發(fā)行版可能略有差異但大致思路是規(guī)則的“特化程度”高者優(yōu)先。也就是條件寫得越具體、約束條件越多的規(guī)則系統(tǒng)認(rèn)為它信息量更大越該先執(zhí)行。事實插入順序靠前的優(yōu)先。先插入的事實匹配出來的激活規(guī)則排在前面。如果規(guī)則文件里顯式聲明了規(guī)則順序按聲明的先后關(guān)系執(zhí)行。實際配置中不要指望這些隱性排序來解決業(yè)務(wù)問題而是要對“同時命中且互相影響”的規(guī)則設(shè)置顯式的優(yōu)先級防止隱性排序變化時出現(xiàn)行為抖動。4.4 規(guī)則鏈與重復(fù)觸發(fā)保護規(guī)則動作里可以插入新事實并觸發(fā)后續(xù)規(guī)則這形成了規(guī)則鏈。規(guī)則鏈可以簡化復(fù)雜決策流程的表達(dá)但有一個危險如果規(guī)則A的動作為事實X設(shè)置了一個值而規(guī)則B的條件又依賴這個值等規(guī)則B執(zhí)行完后又反過來修改了事實X導(dǎo)致規(guī)則A再次激活就可能無限循環(huán)。Drule2.0在循環(huán)防護上提供了開關(guān)配置同時建議規(guī)則作者在容易形成環(huán)的地方設(shè)置觸發(fā)次數(shù)上限這類業(yè)務(wù)條件。遇到線上規(guī)則無限循環(huán)問題先看日志里有沒有同一個規(guī)則名反復(fù)出現(xiàn)再檢查動作區(qū)是否改動了條件區(qū)依賴的字段。關(guān)于規(guī)則鏈還有一點非常重要如果一條規(guī)則的觸發(fā)條件里依賴了自己動作修改過的字段最好仔細(xì)測試否則很容易出現(xiàn)“你以為只跑一次實際被再次激活”的情況。除非確有需要否則條件字段和動作修改字段應(yīng)該盡量錯開。4.5 決策表Excel也能做規(guī)則Drule2.0的配置中心支持把規(guī)則以決策表形式導(dǎo)入。決策表比較適合“條件多、結(jié)果為離散值”的場景第一行放條件字段下一行放比較符第三行放具體條件值最后一行放結(jié)果。決策表在后臺會被引擎編譯成規(guī)則文件。業(yè)務(wù)團隊非常喜歡這種方式因為它和Excel篩選的操作習(xí)慣一致。但決策表不擅長的是處理復(fù)雜邏輯組合比如多表關(guān)聯(lián)判斷還是老老實實用規(guī)則文件更穩(wěn)妥。5. 從搭建到跑通第一次請求集成流程和關(guān)鍵步驟這章直接上實操。我用JavaKotlin混合的微服務(wù)項目環(huán)境來演示不過Drule2.0本身也提供了其他語言的客戶端思路是一樣的。建議先在一個干凈的Spring Boot工程里跑通最小鏈路再對接現(xiàn)有業(yè)務(wù)。5.1 工程依賴與初始化項目構(gòu)建工具如果是Maven第一個動作是引入Drule2.0的客戶端依賴以及對應(yīng)的規(guī)則包解析器。依賴配置的具體groupId和版本號跟隨你的發(fā)行版走公司內(nèi)部如果使用私有倉庫以私服坐標(biāo)為準(zhǔn)。引入依賴后建立一個配置類把規(guī)則集發(fā)布到本地緩存的路徑配好。Configuration public class DruleConfig { Bean public RuleEngineService ruleEngineService() { RuleEngineOptions options RuleEngineOptions.builder() .ruleBasePath(/opt/rules) .enableCompileCache(true) .build(); return new RuleEngineService(options); } }這里面的關(guān)鍵點是ruleBasePath指向存放規(guī)則文件或發(fā)布包的目錄。Drule2.0啟動時會掃描這個目錄下的規(guī)則包并預(yù)編譯所以規(guī)則文件的改動雖然可以不重啟服務(wù)但發(fā)布到該目錄的時機需要和你的文件同步更新機制配合好。5.2 創(chuàng)建無狀態(tài)會話并執(zhí)行一次決策首次跑通最推薦的方式是寫一個單元測試直接創(chuàng)建會話、插入事實、觸發(fā)執(zhí)行、斷言結(jié)果。Test void testHighAmountOrderShouldBeIntercepted() { RuleEngineService service ruleEngineService(); RuleSession session service.newSession(risk_control_rule_set); OrderInfo order new OrderInfo(); order.setAmount(80000); order.setChannel(ONLINE); session.insert(order); session.fireAllRules(); assertTrue(order.isIntercept()); assertEquals(AMOUNT_HIGH, order.getReasonCode()); }分步驟解釋newSession(risk_control_rule_set)根據(jù)規(guī)則集名稱創(chuàng)建一個無狀態(tài)會話。session.insert(order)把訂單對象當(dāng)作事實插入工作內(nèi)存。session.fireAllRules()執(zhí)行所有匹配規(guī)則的激活項。動作區(qū)通過order.setIntercept(true)直接修改了傳入對象。由于Java對象引用傳遞主線程的order對象在fire之后已經(jīng)發(fā)生了變化所以后面可以直接斷言。這是最簡單也最穩(wěn)妥的使用方式。事實對象會被直接修改因此要特別注意不要在同一個請求里對同一個對象開多個會話操作否則可能出現(xiàn)并發(fā)覆蓋。5.3 創(chuàng)建有狀態(tài)會話并分階段觸發(fā)有狀態(tài)會話適合依賴“上一次規(guī)則執(zhí)行結(jié)果”的場景。比如先走一次反欺詐校驗結(jié)果沒問題再走額度審批。示例RuleSession session service.newSession(credit_flow_rule_set); OrderInfo order new OrderInfo(); order.setAmount(30000); UserProfile profile new UserProfile(); profile.setRiskLevel(MEDIUM); session.insert(order); session.fireAllRules(); session.insert(profile); session.fireAllRules(); OrderDecision decision session.getGlobal(decision);有狀態(tài)會話持有了工作內(nèi)存中的事實所以能在多個階段之間保留狀態(tài)。它的問題是如果整個會話執(zhí)行過程中發(fā)生異常會話里所有中間狀態(tài)都必須主動清理否則下一次復(fù)用就會受影響。上面代碼里沒有做關(guān)閉嚴(yán)格的寫法應(yīng)該在finally塊里調(diào)用session.dispose()釋放會話或者干脆每次請求都創(chuàng)建新會話。如果你用的是有狀態(tài)會話并且容器是線程池的一定要想清楚“這個會話是否會被多個線程共用”。無狀態(tài)會話沒有這個問題因為它每次請求都新建并銷毀。5.4 監(jiān)聽器和審計日志配置Drule2.0提供事件監(jiān)聽機制可以在規(guī)則命中前后、議題激活前后掛鉤子實現(xiàn)審計日志收集、指標(biāo)量統(tǒng)計等功能。實現(xiàn)接口后注冊進會話即可。正常情況下線上會記錄以下內(nèi)容請求唯一ID、進入引擎時間、命中的規(guī)則名列表、每條規(guī)則的動作結(jié)果摘要、總耗時。這些審計數(shù)據(jù)是從“結(jié)果”回溯到“原因”的鑰匙建議一定在早期就配上不然后面出問題排查成本很高。5.5 一個常見的跑通后問題很多第一次接入Drule2.0的團隊會困惑為什么我在配置中心改了規(guī)則測試數(shù)據(jù)也變了但線上執(zhí)行的還是老結(jié)果排查方向通常是緩存沒刷新或者新舊版本規(guī)則集名一樣導(dǎo)致發(fā)布包被覆蓋。Drule2.0的規(guī)則編譯緩存是按規(guī)則集名版本號做的如果你的發(fā)布包沒有顯式改變版本號規(guī)則集會繼續(xù)沿用緩存版本。修改規(guī)則并發(fā)布時建議帶一個遞增版本號同時確認(rèn)配置中心的緩存刷新策略是否覆蓋了所有實例節(jié)點。6. 幾個容易忽略的配置細(xì)節(jié)會話隔離、緩存與規(guī)則數(shù)量控制規(guī)則引擎用久了你會發(fā)現(xiàn)真正讓你頭疼的往往不是規(guī)則寫得不對而是引擎在特定配置下的表現(xiàn)不符合直覺。這一章講三個值得提前做好的配置決策。6.1 會話隔離級別怎么選Drule2.0本身支持多規(guī)則集隔離但同一個規(guī)則集能不能被多個會話安全并發(fā)執(zhí)行取決于會話的隔離級別。默認(rèn)來說無狀態(tài)會話每次新建相對安全。如果追求性能優(yōu)化想用會話池復(fù)用對象一定要確認(rèn)會話里是否有全局變量。我見過一個案例規(guī)則動作區(qū)往全局變量里存了用戶ID會話池復(fù)用后第二個用戶跑同一條規(guī)則時讀到的全局變量還是第一個用戶的ID直接導(dǎo)致風(fēng)控規(guī)則誤判。后來我們把全局變量的使用全部禁止改為通過事實對象的字段傳遞才徹底解決。全局變量能不用就不用這是我在Drule2.0實戰(zhàn)里學(xué)到的第一課。6.2 編譯緩存的正確打開方式規(guī)則文件發(fā)布后第一次被請求時需要編譯編譯耗時可能到幾百毫秒甚至更多。如果希望冷啟動也體驗良好可以開啟異步預(yù)編譯。Drule2.0支持在規(guī)則集發(fā)布時主動觸發(fā)一次編譯把產(chǎn)物放入本地緩存目錄。配置緩存時要注意清理策略長期運行的服務(wù)如果規(guī)則包版本頻繁升級本地緩存會留下大量歷史版本的編譯產(chǎn)物占用磁盤空間。建議文件保留數(shù)量和保留時間都做一個明確限制。6.3 規(guī)則數(shù)量多少算太多社區(qū)里總有聲音問“Drule2.0能支撐多少條規(guī)則”我個人的經(jīng)驗是單規(guī)則集內(nèi)規(guī)則數(shù)量控制在幾百條級別是完全沒有問題的引擎內(nèi)部的索引機制能支持相對可觀的規(guī)則量。真正帶來性能麻煩的是“規(guī)則之間有大量交叉引用且觸發(fā)鏈較長”的情況并不是規(guī)則條數(shù)本身。打個比方一萬條彼此獨立的規(guī)則就像一萬個獨立的檢查關(guān)卡跑完也就挨個過一遍但十條互相觸發(fā)的規(guī)則可能形成指數(shù)級循環(huán)把引擎卡死。所以做規(guī)則架構(gòu)設(shè)計時與其糾結(jié)條數(shù)不如把每一條規(guī)則的邊界劃清楚盡量減少規(guī)則之間的隱式依賴。7. 生產(chǎn)環(huán)境踩坑實錄四類高頻問題的完整排查鏈路這章寫的都是我親眼見過甚至親手踩過的坑每個項目的背景細(xì)節(jié)都做了脫敏處理但排查鏈路是完整的。希望你看完能少走一半彎路。7.1 規(guī)則“命中”了但動作沒生效現(xiàn)象測試環(huán)境規(guī)則跑得好好的上線后日志里能看到命中的規(guī)則名但訂單并沒有被攔截結(jié)果值也沒有按預(yù)期改寫。排查鏈路首先檢查動作區(qū)是否加了對字段非空的約束。我們遇到過的事實是動作區(qū)執(zhí)行了order.setResult(REJECT)但后面的另一個動作分支又把result覆蓋成了空值。打開完整審計日志看動作區(qū)代碼塊的執(zhí)行順序。因為同一組事實同時命中多條規(guī)則時執(zhí)行順序由優(yōu)先級決定如果你在低優(yōu)先級規(guī)則里做了覆蓋高優(yōu)先級規(guī)則的結(jié)果就會被沖掉。檢查規(guī)則文件里是否有多個同名規(guī)則。同名沖突在發(fā)布時可能被攔截但舊版本規(guī)則集如果還殘留在緩存里新規(guī)則命中后動作可能被舊規(guī)則的后續(xù)執(zhí)行覆蓋。最后結(jié)論是這個場景本質(zhì)是優(yōu)先級設(shè)計不合理多條規(guī)則共享同一個輸出字段卻沒有約定唯一最終寫者。修復(fù)方案是調(diào)整優(yōu)先級并增加字段寫入前的前置校驗同時在測試環(huán)境增加了一個“同一字段多次寫”的靜態(tài)掃描。7.2 有狀態(tài)會話復(fù)用時發(fā)生的用戶數(shù)據(jù)串號現(xiàn)象兩個用戶并發(fā)請求A用戶跑到某一步時突然出現(xiàn)B用戶的用戶名和訂單金額被錯誤地打進了審計日志。排查鏈路第一反應(yīng)懷疑緩存鍵設(shè)置錯了。查完緩存沒問題但發(fā)現(xiàn)服務(wù)里復(fù)用了同一個規(guī)則會話對象。查看會話創(chuàng)建代碼發(fā)現(xiàn)為了性能優(yōu)化之前人把newSession()結(jié)果放進了本地線程池的ThreadLocal里期望同一線程復(fù)用。問題是ThreadLocal并不能保證同一個用戶的請求始終落在同一個線程。于是出現(xiàn)了A用戶的會話事實還沒清空B用戶的請求就插入到同一會話的情況。臨時方案是調(diào)高會話對象的使用周期把它從請求級改成業(yè)務(wù)級終態(tài)方案是把有狀態(tài)會話改成無狀態(tài)會話不保留跨請求狀態(tài)。這是有狀態(tài)會話最典型的坑一旦出現(xiàn)數(shù)據(jù)串號后果比規(guī)則不生效更嚴(yán)重。我的建議是除非業(yè)務(wù)有強需求否則不要為了解決性能問題去復(fù)用會話性能和正確性之間永遠(yuǎn)要優(yōu)先正確性。7.3 時間比較出現(xiàn)跨天差異現(xiàn)象一條“超過當(dāng)天18點不做自動審批”的規(guī)則晚上八點應(yīng)該攔截但實際沒有攔截。排查鏈路先檢查規(guī)則條件里的時間字段類型。發(fā)現(xiàn)規(guī)則寫的是currentTime 18:00:00字符串直接比較。不同規(guī)則節(jié)點所在服務(wù)器的時區(qū)一致但字符串格式在進入規(guī)則引擎前被某個環(huán)節(jié)轉(zhuǎn)換成了帶時區(qū)的日期時間導(dǎo)致比較結(jié)果和預(yù)期不符合。修復(fù)方式是把時間字段統(tǒng)一轉(zhuǎn)成時間戳再比較同時在前置接口層把日期時間標(biāo)準(zhǔn)化規(guī)則文件里禁止直接比較日期字符串。這個問題同時提醒我們規(guī)則引擎的匹配結(jié)果嚴(yán)重依賴事實對象的值因此“進入引擎前的事實清洗”要和“規(guī)則條件設(shè)計”放在一起考慮。字段時區(qū)不統(tǒng)一、格式不統(tǒng)一的臟數(shù)據(jù)進入引擎后規(guī)則寫得再對也可能得到錯結(jié)果。7.4 規(guī)則循環(huán)導(dǎo)致引擎卡死現(xiàn)象某個訂單觸發(fā)了某條規(guī)則后進程CPU飆升請求一直不返回直到超時。排查鏈路查看引擎日志發(fā)現(xiàn)同一個規(guī)則名在短時間內(nèi)被激活了上百次。打開該規(guī)則的動作區(qū)發(fā)現(xiàn)它修改了條件區(qū)依賴的一個字段條件滿足后再次激活形成了自觸發(fā)循環(huán)。查看規(guī)則文件歷史這個規(guī)則原本是修改另一個輔助字段的后來一次重構(gòu)把賦值對象改錯了指向了條件區(qū)的判斷字段。修復(fù)方向是把動作區(qū)和條件區(qū)完全解耦明確哪些字段是“輸入字段”哪些字段是“輸出字段”并用規(guī)則文件注釋標(biāo)明。循環(huán)觸發(fā)看起來很嚇人但其實規(guī)則引擎本身有防護機制如果你的版本沒有自動打開循環(huán)保護建議在配置中心里打開。同時給規(guī)則集設(shè)置合理的執(zhí)行超時時間就算真出現(xiàn)循環(huán)也能保證請求快速失敗而不是拖垮整個服務(wù)。8. 規(guī)則引擎上線前的檢查清單從測試到灰度最后這部分不是總結(jié)而是我們上線前用的內(nèi)部清單你完全可以抄走做二次確認(rèn)。規(guī)則編寫階段每條規(guī)則是否有清晰、唯一的命名說明字段里是否寫了業(yè)務(wù)含義。條件區(qū)是否有可以提前合并的模式減少無意義的重復(fù)匹配。動作區(qū)是否直接或間接修改了條件區(qū)依賴的字段如有是否顯式設(shè)計過循環(huán)策略。輸入字段的數(shù)據(jù)類型是否統(tǒng)一字符串格式是否滿足規(guī)則條件的格式要求。測試階段是否準(zhǔn)備了最小正向用例、最小反向用例和邊界值用例。是否測試了字段為空、字段類型異常、對象為null的場景。是否驗證了規(guī)則優(yōu)先級與你預(yù)期一致而不是僅靠“跑通得到正確結(jié)果”來推斷。是否在新規(guī)則集發(fā)布時對舊規(guī)則集做了回歸對比。發(fā)布與灰度階段規(guī)則集版本號是否遞增。是否先在一臺機器或少量流量上灰度。是否配置了規(guī)則執(zhí)行的監(jiān)控面板至少能看到命中率、平均耗時、異常規(guī)則名。是否部署了規(guī)則快速回滾能力?;貪L不只是把規(guī)則集降級還要確認(rèn)本地編譯緩存的清理。從運維角度我還建議給規(guī)則引擎單獨設(shè)置性能監(jiān)控指標(biāo)不要和應(yīng)用主流程的指標(biāo)混在一起。因為規(guī)則引擎的耗時波動往往能告訴你業(yè)務(wù)規(guī)則最近是不是出了變化把它獨立出來定位問題會快很多。我個人在實際操作中的一個體會是Drule2.0本來就可以成為業(yè)務(wù)和工程之間的一層“通用語言”。讓業(yè)務(wù)方用JSON格式維護基礎(chǔ)規(guī)則讓工程師把需要復(fù)雜邏輯的規(guī)則收口成自定義函數(shù)兩者結(jié)合規(guī)則引擎在團隊里才能真正用起來而不是變成一個誰都敬而遠(yuǎn)之的黑盒。希望這份偏實戰(zhàn)的梳理能幫你省下我當(dāng)初填坑的那些時間。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
五月激情婷婷丁香| 人妻av在线| 欧美性爱五月天| 激情綜合網址| 这里只有精品视频99| 欧美黑人巨大猛烈cuckold| wwww.9免费视频| 丁香五月婷婷五月| 第一区久久网站| 久久精品五月| 日日做A爰片久久毛片A片英语| 伊人狠狠操| 九九超日本| 色五月激情视频在线综合| 99九九精品| 狠狠狠狠狠草| 久热视频这里只有精品68| 97干在线| 色玖玖玖| 色呦呦在线| 97碰超级人人看| 久色成人| www.99视频| 成人做爰黄A片免费看直播室男男 A片试看120分钟做受图片 | 香焦网五月天| 成人综合网站| 国产精品激情AV久久久青桔| 天天色视频| 99视频只有这里精品| 91美女被操| 色婷婷亚洲综合网站| 色啪影院| 97精品综合久久| 99精品在线观看视频| 激情超碰网| 天天精品视频在线观看视频| 人妻VideOssS人妻| www.sebowuyue| 欧美色必爱| 国产熟妇的荡欲午夜视频| 在线成人网址| 99热激情| 激情性爱五月天| 久久综合影院| 激情合网婷婷| 嫩BBB搡BBBB榛BBBB| 97在线刺激| 亚洲mm色| 桃色激情婷婷伊人网| 婷婷六月综合在线| 婷婷激情5月| 天天摸天天舔在线视频| 内射综合网| 无码字幕中文| 97久操视频| 久热精品免费视频4| 九九五月天| 五月丁香综合激情网| 丁香九月综合| wwwss在线观看| 啪啪激情网| 亚洲激情综| 人人色婷婷| 99爱在线视频| 这里只有精品视频免费在线观看| 人妻无码视频网| 99在线免费观看| 六月丁香五月婷婷| 久久久9久| 亚洲 成人 电影av在线观看| 91色色色| 色五月婷婷久久爱| 亚洲婷婷丁香五月亚洲| 人人舔天天| 99热国产这里只有| 深爱激情网噜噜色| 操人久久| 久久视这里只有精品| 激情五月天色色网| 5月婷婷激情6月| www.色婷婷。com| 九九久久视频| 狠狠做深爱婷婷久久综合一区| 538在线精品| 国产精自产拍久久久久久蜜 | 五月婷婷久草在线视频综合| 色五月在线视频观看| 激情综合网五月天| 亭亭色色五月天| 色五月网址| 99热| 国产视频色色色色色色色| 五月丁香六月激情啪| 五月丁香好婷婷姑娘综合网| www.minyis.com【JT】实力收量可预付QQ2101460746 | 青青草伊人婷婷| 青柠影视免费高清电视剧| 国产毛片操B| 婷婷色色亚洲| 99超级碰免费视频| 色综合色综合色综合色综合| 91操碰| av在线免费播放观看| 久色激情| 丁香婷婷色五月合集| 久热黄色| 亚洲精品444久久久久久| 人人操操| 久久五月丁香六月婷| 五月天婷婷色综合| 激情综合色五月六月婷婷| 五月婷婷久久网| 久久五月婷天天干| 国产成人+综合亚洲+天堂| 五月天婷婷激情六月久久| 99久久婷婷国产综合精品草原| 丁香五月天激情综合网| 国产精品美女| 丁香综合久久| 天天操夜夜啊| 色婷婷五月天偷拍| 91蝌蚪窝视频在线| 五月天欧美 另类小说| 97色色色| 色色色五月天激情资源| 国产色色在线| 九九视频在线观看视频6| 狠色色狠网| 中文av网站| 一区二区传媒视频| 思思精品热在线| 激情网五月| 91久久久久久久久久| 婷婷激情区| 大香网伊人久久综合| 狠狠色综合精品视频在线| 久大香蕉| 五月丁香黄色| 97性视频| 五月婷婷啪啪啪| 五月婷婷激情综合拍| 亚洲五月婷婷| 精品亚洲日韩99欧美片| 亚洲第一第二网站| 精品国产AV色一区二区深夜久久 | 婷婷五月综合社区| 精品AV无码超碰| 激情五月天在线观看婷婷| 午夜电影网VA内射| 国产一级黄色影片,| 五月丁香怕啪啪| 色99在线视频| 亚洲国产网站| 激情五月婷在线精品| 天天干天天干天天干| 欧美色色色色色| 色婷婷丁香中文在线播放| 婷婷五月色播| 婷婷丁香水多多视频| 操人91| 国产原创视频91九色| 五月婷婷中文网| 可以免费观看的av| 九九亚洲小视频| 婷婷天堂综合| 看黄的网站18禁| 538任你爽| 激情婷婷五月在线合集| 五月天婷婷永久免费视频| 思思热在线观看| 亚洲九九免费| 日日日日日| 五月婷婷无码| 四LLL少妇BBBB槡BBBB| 五月天合网 | 狠狠99| 激情综合网五月婷婷| 91亚洲免费片| 亚洲综合五月天婷婷丁香| 五月天丁香成人| 久99热| 激情九月丁香婷婷| 五月婷婷69| 超碰在线网站| www.99日本| 99精品国产在热久久婷婷| 天天天天天天噜| 五月天婷婷在线AN| 色呦呦美女| 五月婷婷激情综合| 婷婷丁香激情五月| 日本久久超碰| 天天干天天干天天干| 丁香婷婷大香蕉| 丁香五月婷婷基地| 六月丁香婷婷六月激情综合| 青青草99re| 精品成人a v无码内射| 苗黎美女四级成人版一级二级毛片| 成人婷婷深爱综合网| 久久91久久精品久久| 激情综合色播| 九九人人自拍| 国产精品VIDEOSSEX久久发布| 五月丁香啪啪综合网| 色婷婷女优有码五月亭| 9l视频自拍9l九色成人| 99免费| 综合色情网| 777精品久无码人妻蜜桃| 亚洲精品色色色| 丁香五月天狠狠操| 逼特逼在线免费播放| 无人精品在线视频| 色色色在线播放| 成人va在线| 99热国产这里只有精品| 婷婷久久五月| 丁香 亚洲 久久| 亚洲色啪| 26UUU欧美激情一区二区| 激情五月综合ì香亚洲| 婷婷色啪| 国产黄色大片| 五月天婷婷在线观看精品男人| 九色综合网| 99热亚洲精品66| 9l视频自拍9l九色9l成人| 99玖玖在线视频| 色婷婷丁香五月高清在线| 久久九⑨| www,奇米影视| 婷婷色婷婷| 婷婷亚洲欧美丁香五月| oumeisesewang| 色五月自偷自拍婷婷婷婷| 欧美在线视频99| 五月婷婷av| 中文久久久人妻| 97碰碰电影| 无码日本精品XXXXXXXXX| 久久婷网| 五月天亚洲综合网| 色综合天天天天做夜夜| 婷婷六月久久| 青草久久五月婷伊人| 色吊丝永久访问网址| 久久久99精品免费观看| 色婷婷电影网| 操一区| 天天激情欧美美女| 5月婷婷激情6月| 在线中文字幕av| 激情婷婷丁香五月| 亚洲亚洲人成综合网络| 亚洲啪啪视频| 久9免费视频| 久久久五月婷婷| 丁香六月天AV| 色婷婷丁香六月| 大香蕉久久久久| 9 1大香蕉| 亚洲天堂婷婷丁香| 激情内射人妻1区2区3区| www.色婷婷| 97香蕉久久超级碰碰高清版| 五月婷婷丁香在线| 潘金莲AAAAAAAAAA| 午夜天堂啪啪| 五月婷婷六月丁香| 色色日本| 婷婷久久亚洲| 五月天激情.com| 日本色色图| 色婷婷91| 操九色| 伊人九九九久| 七七久久综合| 综合激情九月婷婷,激情综合婷婷中文字| 国产乱人偷精品人妻A片| 激情五月天社区| 日本精品99网站| 综合网啪| 视色综合| 九一99| 五月丁香婷中文字幕| 久久五月网| 九九热只有这里是精品| 国产五月婷| 婷婷久久夜| 婷婷天天舔| 激情啪啪五月天| www99热| 丁香五月色| 丁香五月亚洲激情婷婷射| 久久免费干| 久久涩视频| 色婷婷狠狠18yy| 婷婷六月天国产综合| 色五月天婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷 | 777米奇影视第四色| 97色啪| 日韩高清成人| 婷婷久久久| 色五月中文网| 欧美在线操| 婷婷丁香18| 99热久久这里只有精品| 黄色高清无码| 婷婷激情六月综合| 久久6这里只有精品| 九九草热在线观看| 日本道久久91| 五月婷婷激情性爱| 欧美色图天堂网| 天天综合亚洲综合网天天αⅴ| 色色色视频免费无码 | 五月婷婷之激情五月| 天天爽天天透天天爱| 97在线99| 日韩 中文 欧美| 二色AV| 亚洲六月婷婷| 99re8热精品免费视频| 狠狠色丁香久久综合婷婷亚洲成人福利 | 五月丁香成人| 亚洲精品一区中文字幕乱码| 欧美精品A片一区在线观看| 中文资源在线a| 婷婷六月丁香在线| 五月天第四色开心色播| 天天日日夜夜爽。| 丁香五月在线观看| 激情婷婷。| 另类图片激情五月| 99久久精品网| www.五月婷婷久久.com| 97成人丁香| 成人丁香色| 南京搡BBBB搡BBBB| 在线观看免费狠狠色丁香香综合| 精品一二三区久久AAA片| 婷婷伊人五月天| 久久国产一区二区三区| 色五月婷婷91| 欧美婷婷五月天综合| 婷婷九月在线| 一本色道久久综合狠狠躁一二三| www婷婷| 色婷婷在线视频综合| 色爱99| 内射干少妇亚洲69XXX| 婷婷六月综合基地| 激情五月婷婷中文字幕| 天天干电影| 日本nghangse中文字幕| 激情五月六月婷婷综合啪啪| 亚洲色碰| 日本在线视频看se99| 天天天久久久| 99热99久久| 九九无码AV| 色情综合| 色五月五月天色婷婷色五月| 伊人久久艹| 五月天社区| 丝袜激情网| 影音先锋一区二区三区| 五月天色狠狠| 97色精品视频| 伊人玖玖网| 婷婷97碰碰| 91男同| 亚洲综合激情五月久久| 极品人妻VIDEOSSS人妻| 婷婷六月久久综合导航| www久久久久久久97| 丁香花色色网| 五月天婷婷色播在线网| 婷婷五月天AV在| 天堂综合久久 | 九九久久久综合| 五月丁香婷婷六月| 天天日日夜夜爽| 久热免费视频| 五月天婷婷在线观看| 久久婷中文字幕| 久久久激情视频| 丁香五月在线伊人| 九色porny在线观看激情四射| 婷婷综合亚洲| 日日爽日日操| 婷婷五月色影视先锋| 99精品免费视频| 玖久精品视频9| 九九人人看| 激情五月久久| 狠狠干在线| 成人做爰A片免费看网站找不到了| 大地9中文在线观看免费高清| 五月婷婷丁香综合网| 九九九九大香蕉| 九九99久久| 丁香五月久久综合| 激情综合网五月在线播放| 最新高清无码专区| 激情六月丁香| 九九热免费| 色婷婷影院| 丁香88AV五月婷婷| 99视频| 丁香婷婷色五月| 中文字幕在线观看视频www| 热日韩欧美| 亚洲精品影视| 天天综合在线网| 五月婷婷中字在线| www.91九色| 中国女人做爰A片| 激情五月天啪啪| 视频这里只有精品16| 中文字幕欧美久久| 五月色婷婷夜色| 天天爽天天| 99热这里只有精品青草| 精品九九视频| 亚洲 25P| 最新热中文字幕| 51XX嘿嘿午夜无码| 肏日网在线看| 亚洲岛国电影| 亭亭色色五月天| 婷婷丁香综合成人| 五月熟妇婷婷久久| av婷婷丁香 六月| 成人av在线网址| 91久久精品国产91性色TV| 亚洲成人一区| 五月丁香操婷逼| 丁香婷婷视频| 日韩五月丁香| 激情五月婷婷丁香| 热思思| 开心五月激情网| 加勒比日本一区二区三区| 丁香五月天天久久综合小说| 日本不卡高字幕在线2019| 少妇高潮一区二区三区99欧美| 草草影院爱爱| 日日干日日| 岛国AV网站| 99热99极品观看| 天天精品视频免费观看| 99热这里只有精品18| 爆乳熟女一区二区三区爆乳| 色婷婷五月天| 婷婷五月色激情欧美激情| sewuyuetingtingiii| 99色色网| 五月之婷婷| 97干网站| 最新婷婷五月丁香| 久操操| 另类小说五月天综合网| 狠狠色丁香婷婷久久综合| 色偷偷五月天| 人妻精品一区二区三区| 91丁香综合| 婷婷六月丁| 《》【无码】想被搞到爽AV应募而来的超M素人 西纯子 10musume-011723-01 | 激情床戏| 精品9久| 婷综合| 婷婷丁香五月天狠狠| 国产亚洲网站在线| 99久久综合狠狠综合久久| 婷婷五月天奸女| 天天色色婷婷| 五月天激情综合首页| 激情六月天婷婷| 丁香色情五月天| 午夜成人在线免费视频| 青青草青青草五月天| 婷婷激情九月| 色噜久| 99色| 日本特黄aaaaa| 久久婷婷丁香| 99资源人人| BBWCUCKOLD精品熟妇| 亚洲免费观看高清完整版AV线| 五月 丁香 欧美| 99久久婷| 九月激情综合婷婷| 日本婷婷色| 伊人激情| 五月婷婷啪啪| 综合色99| 国产成人高清| 五月天综合视频| 久久这里只有精品无码| 深爱五月婷婷开心中文字幕| 亚洲激情综合网| 激情五月婷婷她| av一级棒av| 五月丁香综合激情| 91丨九色丨东北熟女| AVDV久久| 丁香六月欧美| 激情综合网五月激情| WWW激情五月天| 亚洲午夜精品久久久久久人妖| 色婷另类| 婷婷激情人妻| 在线视频99| 色99免费视频中文| 丁香六月激情毛片| 9久久精品视频| 中文字幕婷婷在线| 97碰碰电影| 丁香婷婷影院| 99日本视频在线观看专区| 国产精品18久久久| 亚洲午夜在线视频| www.第四色99| 99操不停| 97成人超碰免| 激情中文在线| 超碰在线精品| 99 r热| 99re6热在线精品视频播放速度| 久久久久久久8| 啪精品| 久9精品| 99热这里有精品首页10| 色婷婷婷婷| www色五月| 97碰久久| 99国产小视频2013| 日日干综合| 五月丁香啪啪啪啪| 五月婷婷色激情| 六月丁香婷婷综合在线| 日韩在线视频中文字幕| 丁香婷婷久久 | 五月婷婷AV| 久久久18| 91丨九色丨国产打屁股| 国产暴力强伦轩1区二区小说| 亚洲熟妇AV乱码在线观看| 日韩艹比| 一级性感毛片| 99九九在线| 樱花99视频| 欧美熟女乱又伦| 丁香成人色情五月天| 色色AV色色色东莞| 色狠狠综合网| 国产肥白大熟妇BBBB视频| 欧美色图片88| 东北黄色一级| 激情综合网五月在线播放| VA日本视频| 蜜乳A√| 怡红院视频| 91婷婷色五月| XX色综合| 色玖玖网| Av性爱网| 激情婷婷啪啪| 国产成人av在线| 六月婷婷综合| 97久操| 日韩不卡DvD| 九九热这里精品| 五月婷婷狠狠干| av在线免费网站 | 欧美超碰亚洲| 永久的网站AAAA| 久久网思思| 婷婷五月天影视首页| 国产午夜一区二区三区| 婷婷综合久久综合| 久久最新色色色| 婷婷五月伦理网站| 丁香五月天堂网| av婷婷丁香| 超碰97人人操| 丁香五月欧美激情| 日本九九九九| 九九av在线| 亚洲激情网站无码| 人人干女人| 亚洲字幕AV一区二区三区四区| 日本五月天激情| 六月丁香激情网| 五月天婷婷无码| 婷婷放心五日爱| 999热在线视频| 天天天干夜夜夜操| 99久久.www| 五月 丁香 欧美| 色婷婷狠| 丁香六月婷婷社区| 337p午夜影院| 亚洲天天| 综合激情肏逼网| 日韩AV色色色| 五月天成人综合| 综合网啪| 丁香六月婷婷激情| 国产精产国品一二三在观看| 欧美色色色| 九九视频在线| 99亚洲精品综合在线 | 996热re视频精品视频| 亚洲国产精品成人午夜| 99这里是99在线视频| 婷婷色综合av| www.狠狠操| 婷婷最新地址| 五月丁香在线精品| 婷婷亚洲综合| 粉嫩av懂色av蜜臀av熟妇| 久久一热| 91久女| 色播播之激情五月婷婷| 丁香五月伊人| 色情综合| 色三级色三级| 亚洲婷婷久久综合| 丁五月激情视频免费| 色狠狠婷婷| 天天日狠狠| 狠狠干婷婷| 欧美人人操| www.9797国产| 夜夜久久综合网| 五月天另类小说| 综合狠久久| 丁香五月狠狠综合欧美| 免费看欧美成人A片无码| 欧美丁香婷婷天天操| 五月丁香综合啪啪| 99久久网站| 欧美人人操| 六月大香蕉| 天天舔天天爽| 热99久| 色噜噜狠狠色综无码久久合欧美| 天天综合91入口| 色色亚洲五月天| 六月丁香色婷婷| 国产高清av黄色看片| 丁香五月天婷婷久久综合| 99操逼| 九九热只有这里是精品| 国产看真人毛片爱做A片| 五月花婷婷在线精品视频| 久草热在线视频| 激情色中文| 五月综合色| 五月丁激情| 日韩人妻白浆视频系列| 久狠日av| 婷婷九九视频| 婷婷色在线观看| 91欧美| 丁香五月天激情综合| 五月婷婷开心色伊人| 人妻熟人中文字幕一区二区| 亚洲国产成人裸舞| 色婷婷女优有码五月亭| 久久久99精品免费观看| 成人国产欧美大片一区| 99丁香婷婷综合网| 超碰69天堂| 综合九九日本| 激情六月天婷婷| 亚洲另类电影| 亚洲日本激情| 99热这里只有精品69| 色情久久久| 综合色激情| 色婷婷激情| 国产精品色婷婷99久久精品| 亚洲精品成人| 婷色五月天| 久久婷婷六月综合国际| 超碰97色| 五月色色网| 天天射夜夜爽| 第四色婷婷五月| 五月婷婷六月开心| AV在线大香蕉| 欧美内射AAAAAAXXXXX| 99A片| 啪精品| 久操人妻| 丁香五月,激情五月,深爱五月| 天天干狠狠| 久久九九爽| 欧美性猛交 XXXX 乱大交| 日韩在线视频9色| 五月天伊人久久久久| 久热无码| 亚洲成人黄色网| 久9久9久9久9久9久9| 久久久中文| 婷婷免费视频| 人妻爽爽爽久久久久久久久| 深爱五月日韩| 五月花激情| www.丁香六月婷婷久久天堂影院.con| 国产操肏网站| 五月丁香999| 婷婷五月天激情小说| 综合激情五月丁香| 五月婷婷黄| 色99亚洲| 人人九色| 激情五月天婷婷播播久久综合91| 9有码中文| 五月婷婷综合色啪首页| 色丁香五月天| 玖玖@三月天天丁香婷婷| 五月丁香婷婷色色| 天天爽免费视频| 丁香五月自拍| 91色操| 91久久婷婷人人澡草 | 美女视频图片久久91| 天天性视频| 五月婷婷在线免费| 丰满少妇乱A片无码| AV在线资源| 无码人妻一区| 久久久国产精品黄毛片| 色婷婷久久| 六九色综合婷婷五月天| aV直接看| 99热久只有| WWW.99热| 婷婷激情四射网| 婷婷视频在线| av高清无码| 26UUU| 超碰免费人妻| 色播五月综合网| 性生活久久人妻| 农村熟妇高潮精品A片| 日本精品99网站| 五月丁香婷婷爱| 色婷婷色丁香色欲av| 亚洲mm色| 蜜桃成语时李时珍 免费| 九九综合| 在线看片av| 色婷婷a v| 五月综合激情网| 色约约视频一区二区三区四区五区| 婷婷五月天国产手机在线视频观看| 激情五月天色色网| 色情丁香五月婷婷精品| 99人妻碰碰碰久久久久视| 久久久久久18| 色婷婷狠狠18| 在线综合91| 色色色免费视频| 九九无毛| 直接看的AV| 2021日韩无码| 色天五月天在线观看视频| 久久久噜噜噜操操操| 亚洲色综合性| 91seAV| 五月丁香六月激情欧美综合| 996热re视频在线观看视频| 欧美日韩AAA| 色综合9| 激情丁香五月天图片| 成人va在线| 99热这里只有精品首页| 玖玖五月| 婷婷久久久| 99er精品| 日韩艹比| 天天插插天天| 天天综合 99久久婷婷| 日本99在线视频| 激情综合婷婷| 久久综合九九| 婷婷五月噜噜| 天堂五月婷婷| 五月婷婷中文字幕| 婷婷丁香午夜综合影视| 新激情五月天| 人妻久久人妻久久第一区| 日韩黄色网络| 激情第四色| 天天插夜夜爽| 激情九九九九| 亚洲精品无码久久| 亚洲五月天天| 97干资源在线观看| 六月丁香成人| 日本欧美成人片AAAA| 99热777| 91疯狂操操操操| 色婷婷五月在线| 五月婷婷天天色| 影院久久久| 人妻熟妇国产精品| 九九在线免费观看| 午夜免费高清AV片| 色五月婷婷网| 天天做天天爱天天要| 99热免费精品| 密着浓厚中出乚交尾GvG935| 六月婷婷色| 婷婷五月天堂网| 婷婷五月丁香99| 99在线播放视频| 激情五月天之六月婷婷| 殴美日韩成人| 99热在线观看| 婷婷午夜综合| 丁香五月激情视频在线| 国产脫衣舞一区二区三区| 亚洲精品又粗又大又爽A片| 婷婷五月天综合在线 | 国产做爰视频免费播放| AV成人在线播放| 亚洲欧洲自拍图片专区五月天| 日都一级A片| 国产暴力强伦轩1区二区小说 | 天天色天天操天天射| 五月婷婷激情视频| 色婷婷在线视频久| 玖玖99免费视频| 丁香五月婷婷色综合| 97精品欧美91久久久久久久| 婷婷五月天成人综合网| 婷婷丁香射射| 26.uuu丁香五月婷婷| 婷婷无五月无码视频| 久久激情网| 五月天堂在线| 五月丁香色综合| 国产SUV精品一区二区883| 久Se视频在线观看| 婷婷五月色综合| 99精品综合| 五月丁香啪。| 日本色图综合| 亚洲丁香网| 五月天丁香网| 91免费看片| 婷婷五月天激情五月天| 久久久精品人妻| 极品九九九九九九| 天天综合色综合| 亚洲天天| 亚洲乱码w在线观看| 久久99这里只有精品视频 | 激情婷婷五月天日本系列| 色色色色热| 天天插天天射天天干| 久久这里99| 婷婷五月花| 久草五月婷婷| 久久久天天啊| 性爱激情久久| 五月丁香激情婷婷综合字幕| 婷婷五月激情五月激情| 99色五月| 噜噜色婷婷| 久久婷婷六月综合国际| 热热久久精品视频| 九九久久99| 99久久婷婷五月综合| 欧美成人A片AAA片在线播放| 国产精品日本一区二区在线播放| 亚洲va日| 99亚州综合精品成人网| 全高清无码视頻| 狠狠色成人影片| 色色色丁香| 好好干av| www.91av.com| 婷婷五月精品在线| 激情综合五月| 久久国产精品乱子伦_靑青草…| 色色色欧美| 五月丁香成人| 九九综合伊人| 天天色丁香| 庭庭久久内射| 99色| www,com,五月色色| 色婷久久| 久久婷婷夜| 五月天成人在线播放| 五月五月婷婷| 五月婷婷婷丁香播| 4399伦理午夜| 涩五月婷婷| 欧美大道不卡| 丁香 久久| 五月天久久www| 色播婷婷五月天| 久久人操| 亚洲这里只有精品| 丁香五月香蕉在线| 久热99| 色欲日日躁| 激情五月天婷婷播播久久综合91| 深爱激情av| 丁香五月 性爱| 国产无套精品一区二区| 色五月中文字幕| 久久婷婷色综合| 五月丁香久久网| www.99热| 激情五月天无码| 热久综合| 亚洲婷婷五月天综合| 永久的网站AAAA| 日韩欧美骚货| 中文字幕不卡+婷婷五月| 色婷婷激情| 97操男人的天堂| 婷婷天堂综合| 五月婷婷插一插| 激情综合网五月| 玖玖在线视频| 激情婷婷视频在线| 亚洲性受XXXX五月丁香| 五月丁香无码视频| 久热这里只有精品99re| www...com黄在线观看| 丁香五月激情网| 五月丁综合在线观看| 99热色精品| 丁香五月激情综合| 一起草av在线观看| 婷婷久久五月天亚洲欧美国产日韩在线观看 | 99re这里只有精品首页| 99九九99九九九视频精彩| 桃色成人网| 婷婷五月丁香花综合| www天天干| 五月天婷婷影院| 亚洲av电影在线| 色婷婷五月天激情| 色五月欧美| 少妇AB又爽又紧无码网站| 91精品久久久久久久久| 人人看人人草人人摸| 色区久久| 国产精品成人网站| 色亚洲婷婷| 99热91| 欧美网站视频4399| 久热这里只有精品66| 激情超碰网| 久久婷婷综合基地| 丁香久久五月天视频在线观看| 丁香五月九九| 五月丁香六月婷综合成人综合| 五月激情网五月综合网| 日噜噜色| 亚洲六月婷婷| 丁香五月天啪啪a日本| 五月五婷婷网| 欧洲区自拍| 色情五月综合婷婷| 99爱在线精品视频免费观看| 九九精品网站| 久色大香蕉| 天天干天天干天天| 天天操婷婷| 天天草天天爱| 九九re精品视频在线观看 | 99热色在线精品| 色综合激情| 亚洲天堂制| 国产日韩欧美性爱| 丁香五月天婷婷中文字幕| 色五月 激情婷婷 综合五月天| 日本久久超碰| 久久久精品婷婷五月天| WWW.婷婷| 99无码视频| 六月五月久久丁香| 激情AV在线| 天天色凹凸| 久久久天堂国产精品女人| 日本一毛片| 色婷婷丁香五月天| 久久五月天合网| 欧美色色色色色色色色色色| 婷婷五月丁香基| 六月激情网| 大香蕉99热| 99在线精品视频在线观看| 热久久77777| 色99网| 狠爱婷色| 日本在线播放97| www99热| 操人91| 九九99热| 久久久久久人妻久久久久久久久久人妻久久久| AV天堂淫乩| 国产伦理精品高清在线观看网站一区二区| 欧美日韩国产一区二区| 九九XX视频| 无码少妇高潮喷水A片免费| 婷婷丁香五月综合| 991国产精选视频在线播放下载| 精品久9| 99这里有精品| www.99热视频| 久月婷婷| 日亚二欧美| 舔色婷婷| 国产三级秋霞| 人人爽亚洲| 永久地址 色| 小视频一区 | 噼里啪啦完整版中文在线观看| 婷婷丁香18| 婷婷午夜天| 岛国AV网| 九九99精品视频在线观看| 伊人婷婷大香蕉| 丁香婷婷性久久| 黄网免费看| 激情婷婷久久| 超碰男人色| 五月天婷婷基地综合网| 91疯狂操操操操| 综合五月丁香六月婷婷| 九九九午夜视频| 色色影院黄大片| 成人短视频在线免费观看| 美国天天操无码| 激情久久综合网| 色色色色色五月| 日韩在线一级| 色婷婷a v| 大香蕉久久久久| 亚洲人妻av| 婷婷第六色| 婷婷五月丁香综合瑟瑟| 亚洲成人黄色网| 午夜成人AV在线| 欧美特大片黄| 91九色国产在线| 丁香五月深爱五月婷婷| 婷婷狠狠97| 中文字幕日产A片在线看| 亚洲日日日| 99久热这里有精品| 大香蕉75线| 99热在线观看| 九九综合色综合| 久久性爱网站| 婷婷久久大香蕉| 国内自拍1区| 大香蕉手机视频| 婷婷丁香五月高清| 婷婷五月蜜桃成人桃色丁香| 久久国产AV| 亚洲精品白浆高清久久久久久| 99精品网| 国产精品久久久60086| 丁香九月婷| 超碰成人在线免费观看| 综合色99| 久久人人九| 天天爽天天做| 婷婷丁香五月激情综合站_久久五月丁香激情综合_开心五月综合激情综合五月_婷 | 91在线看免费 九九九九| 专区无日本视频高清8| 婷婷久久综| 99爱在线观看视频| 色婷婷在线综合色播网| 秋霞A V毛片| 99在线免费视频播放| 成人做爰高潮A片免费视频| 国产午夜精品一区二区| 五月婷婷亞洲中文| 五月www| 色婷婷XXXXX| 亚洲色图五月丁香| 啪啪色激情五月天| 怎么样可以看免费的一级av| 这里只有精品久久| 婷婷六月啪啪| 成人丁香| 日本操B视频| 丁香五月天激情综合网| 91精品电影18T| 久久香蕉影院| 生活片五区| 日本丁香久在线| 91久久精品视频| 伊人九热| 影音先锋日本三级资源| 丁香九月婷婷| 九九在线视频| 久草五月| 九九操操| 成人在线精品| 99热e| 五月婷婷偷拍| 欧美乱码国产一级A片| 激情五月天影院| 丁香五月激情在线| 亚洲AV色婷婷人禽五月天| 婷婷五月天激情五月天| 色六月天| 丁香五月激情无码视频| 六月丁香激情婷婷| 丁香婷婷五月六月天| 色青青视频| 精品一区二区三区木瓜| 五月婷婷综合色啪首页| 91啪级电影| 五月婷综合性中心| 天天射天天射一道本日本社区 | 色色五月丁香婷婷综合| 久久婷婷五月综合色天| wwww.色婷婷| 另类图片五月天婷婷| 婷婷色情五月| 日本成人综合| 丁香婷婷啪啪| 九九热亚洲中文在线观看免费| AV九九| 乱女乱妇熟女熟妇综合网站| 欧美婷婷五月激情| 天天草天天日| 强伦轩人妻一区二区电影| 丁香综合婷婷五月天| 日韩高清成人| 色婷婷五月天在线观看| 激情综合五月| 91色五月在线观看| 一起草aV| 99精品久久久| 99热思思在线观看| 操操操操操电影网| 色天使色婷婷| 久久久久er热| 国产免费一区二区在线A片视频| 五月综合视频| 亚洲乱码日产精品BD| 国产人人操| 91超级碰在线视频| 激情五月第四色| 婷婷五月综合啪| 九九热免费视频| 婷婷六月丁| 国产麻豆视频| 99操免费视频| 思思色播| 婷婷五月天综合色| 久久久久婷| 久热这里| 99视频综合网| 婷婷久久网| 婷婷五月色丁香在线看| 婷婷五月综合啪| 9999久久久久| 91人无码久久久久久| 人人操AV| 丁香婷婷五月六月天| 激情爱爱网站超大免费| 超碰99在线| 久久婷婷东京热大香樵| 国产精品久久99| 99热这里全是精品| 精品人妻一区| 久99久视频精选| 五月色视频| 亚洲男女激情| 福利视频在线播放| 激情综合色婷婷啪啪六月天| 国产裸舞福利资源在线视频| 久久婷婷五月天蜜桃| 99热免费| 百度4399有码精品V在线观看| 99爱免费在线观看| 丁香六月综合激情| 午夜精品人妻无码一区二区三区| 丁香婷婷性久久| 五月婷婷香蕉| 五月丁香婷中文| 大大香蕉综合在线| 婷婷五月天视| 婷婷涩涩五月天| 五月天开心色色网| 91久久婷婷| 亚洲操操操| 国产熟妇乱子伦hd| 9久视频| 久久久久er热| 51精品国自产在线| 五月婷丁香| 五月天成人在线视频网站| 色爽干| 色之综合网| 91九色精品女同系列| 99精品久久久久久久久| 婷婷国产日本欧美| 五月天久久久| 五月婷婷七月丁香| 久久婷婷五月综合伊人| 欧美S码亚洲码精品M码| 亚洲精品国产成人AV在线| 色五月丁香五月| 岛囯综合激情网| 五月五丁香婷婷| 大香蕉啪啪啪| AV大香蕉| 婷婷伊人综合中文字幕| 国产婷婷五月| 综合图区激情| 午夜精品久久久久久久爽| 开心五月天私房婷婷| 九九色婷婷| 欧美色宗和激情| 能看的AV| 色色日本欧美| 丁香五月婷婷日本| 久久亭亭电影| 色婷婷丁香香香蕉视频| 九月丁香很很色| 五月天激情婷婷五月天久久| 俺也去色| 免費亭亭成人| 99只有精品| 中文人妻主播久久| 大香蕉啪啪啪| 96人人操人人操人人| 开心五月激情网| av 一区三区四区| 色五月在线观看| www.色五月| 桃色五月天| aaaaaa片| 白人荫道BBWBBB大荫道| 亚洲性图一区二区三区| 办公室少妇激情呻吟A片在线观看| 婷婷激情丁香五月天综合| 天天干天天色综合| 精a品a视a频| 久久97| 五月婷婷综合色啪首页| 激情色五月天| 亚洲色色香蕉| 一本色道久久综合狠狠躁一二三| 九热免费视频|