免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

開源支付編排層 Hyperswitch 部署解析:從路由策略到多通道接入

開源支付編排層 Hyperswitch 部署解析:從路由策略到多通道接入 做過支付接入的都知道一件事支付渠道越用越多每多一家就要重新經(jīng)歷一整套對接流程。兩三條通道還能靠代碼里的 if-else 撐住通道數(shù)量到了五條以上路由策略、失敗重試、回調(diào)處理、對賬口徑就開始互相打架出問題的時候連排查都無從下手。這篇內(nèi)容圍繞開源支付方案 Hyperswitch 做拆解和部署解析盡量把“為什么要引入支付編排層”“核心架構(gòu)怎么拆”“部署有哪些關(guān)鍵步驟”“接入通道和配置路由時要注意什么”這些環(huán)節(jié)一次說透適合正在選型支付中臺、或者已經(jīng)決定自托管開源支付網(wǎng)關(guān)的團隊參考。1. 為什么要折騰一個開源支付編排層場景驅(qū)動與選型邏輯1.1 沒有統(tǒng)一層的多通道接入痛點藏在哪表面上看接一個支付通道就是調(diào)幾個接口而已。真正做起來就會發(fā)現(xiàn)每個通道都有自己的一套調(diào)用協(xié)議有的用 REST 接口有的要求簽名后才允許請求有的把失敗原因拆成三級錯誤碼有的只有一個字符串描述退款接口的差異更大有的支持部分退款有的只能整單退有的退款還有時間窗口。更麻煩的是回調(diào)。支付結(jié)果要靠服務(wù)端異步回調(diào)來通知但每個通道的回調(diào)字段命名不同簽名算法不同重試次數(shù)和間隔也不同。我們在模擬項目X里整理了十幾條通道的接入文檔光是回調(diào)樣例的字段映射就做了四版。如果這些邏輯全部堆在業(yè)務(wù)代碼里后果就是每次接新通道都要改業(yè)務(wù)模塊而業(yè)務(wù)模塊的每次改動都可能影響到舊的支付邏輯。線上偶發(fā)出現(xiàn)“常見失敗”錯誤的原因往往就是這類業(yè)務(wù)代碼疊加導(dǎo)致的問題。路由策略也是繞不過去的坎。同一個用戶、同一筆訂單不同通道可能給出完全不同間的成功率。某通道A在北上廣深的穩(wěn)定性和某通道B在邊遠(yuǎn)地區(qū)的表現(xiàn)可能截然相反而且通道費率還不一樣。若沒有統(tǒng)一策略層就只能把路由邏輯寫死在代碼里換個參數(shù)都要發(fā)布一次。1.2 自研網(wǎng)關(guān)的隱性成本經(jīng)常被低估很多團隊會覺得不就是做個封裝層嗎自己寫一個網(wǎng)關(guān)模塊就行用不著引入開源方案。這個判斷低估了支付編排層的復(fù)雜度自研網(wǎng)關(guān)不只是把請求轉(zhuǎn)發(fā)出去還涉及統(tǒng)一錯誤碼、冪等控制、狀態(tài)機流轉(zhuǎn)、異步調(diào)度、重試與熔斷、回調(diào)驗簽、對賬數(shù)據(jù)落地、配置熱更新。一個相對完整的內(nèi)部網(wǎng)關(guān)如果從零開始做至少要覆蓋兩套對外接口和十套左右內(nèi)部狀態(tài)流轉(zhuǎn)邏輯。正常排期會達到三到四個月而且前期還不含演練和故障預(yù)案。相比之下在一個成熟支撐的支付服務(wù)之上做二次開發(fā)最快兩三周就能把沙盒環(huán)境跑通。我并不是說自研不可行而是在多數(shù)團隊并非專業(yè)做支付基礎(chǔ)設(shè)施的前提下從成熟方案起步、按需裁剪整體投入產(chǎn)出會克制得多。對比維度自研編排網(wǎng)關(guān)基于開源支付方案搭建核心代碼量需完整新建已有基礎(chǔ)按需裁剪多通道接入每個通道寫一套復(fù)用適配層框架路由與降級從零設(shè)計內(nèi)置規(guī)則機制迭代穩(wěn)定度依賴團隊經(jīng)驗有社區(qū)版本修復(fù)支撐運維要求全鏈路自主維護核心組件可觀測1.3 Hyperswitch 到底解決了哪一類問題Hyperswitch 這類項目解決的典型問題就是“在商戶系統(tǒng)和支付通道之間增加一層可編程的編排層”。它本身不碰資金不替你做清算它的職責(zé)集中在三件事統(tǒng)一接口、統(tǒng)一數(shù)據(jù)模型、統(tǒng)一路由調(diào)度。商戶側(cè)只需要對接一套標(biāo)準(zhǔn)支付 API后面連的是某個通道A還是通道B由編排層在執(zhí)行時決定。用一句大白話概括它不是幫你選定任何一家支付服務(wù)商而是讓你別被任何一家綁定死。當(dāng)某通道的費率調(diào)整或服務(wù)出現(xiàn)波動時你可以把流量平滑切到另一條通道對上層業(yè)務(wù)幾乎沒有影響。2. 拆解 Hyperswitch核心模塊、調(diào)用鏈與狀態(tài)機2.1 兩個視角看架構(gòu)對外統(tǒng)一 API對內(nèi)一排適配器拆開看 Hyperswitch 的架構(gòu)最核心的思路是“雙向抽象”。向上它面向業(yè)務(wù)系統(tǒng)提供一套統(tǒng)一支付 API包括創(chuàng)建支付、查詢狀態(tài)、發(fā)起退款、注冊退款結(jié)果通知等基礎(chǔ)操作。無論底層是哪個通道業(yè)務(wù)側(cè)拿到的響應(yīng)結(jié)構(gòu)都是一致的。這樣業(yè)務(wù)研發(fā)只需要關(guān)心支付業(yè)務(wù)語義不需要關(guān)心通道差異。向下它通過連接器適配器與各家通道打交道。連接器適配器做的事情遠(yuǎn)比想象中細(xì)請求字段映射把業(yè)務(wù)側(cè)的金額、幣種、用戶標(biāo)識等數(shù)據(jù)映射為通道要求的格式響應(yīng)字段映射把通道返回的結(jié)果轉(zhuǎn)換為統(tǒng)一數(shù)據(jù)結(jié)構(gòu)錯誤碼翻譯把通道自定義的錯誤碼歸一化成為內(nèi)部標(biāo)準(zhǔn)錯誤碼方便上層統(tǒng)一判斷簽名與鑒權(quán)按通道要求的簽名方式對請求簽名并驗證通道而來的回調(diào)簽名能力差異補償對于不支持部分退款的通道在適配層做好整單退款或阻斷提示。這種架構(gòu)帶來的直接好處是新增一個通道時不需要動業(yè)務(wù)代碼只需要在連接器配置層新增一個適配項然后配置好路由關(guān)系即可。核心模塊大致可以分成五塊模塊主要職責(zé)數(shù)據(jù)/狀態(tài)載體API 服務(wù)層接收商家端支付請求轉(zhuǎn)發(fā)給調(diào)度層請求上下文路由核心根據(jù)規(guī)則選出目標(biāo)通道路由配置調(diào)度器負(fù)責(zé)異步任務(wù)、超時處理、重試隊列消息隊列/任務(wù)表回調(diào)處理器驗簽、解析結(jié)果、更新支付狀態(tài)支付單狀態(tài)配置與密鑰管理管理通道憑據(jù)、加密密鑰、路由策略配置存儲2.2 一次支付的完整調(diào)用鏈從發(fā)起請求到回調(diào)落地我們拆一條比較典型的支付鏈路看看編排層內(nèi)部到底發(fā)生了什么業(yè)務(wù)系統(tǒng)調(diào)用“創(chuàng)建支付”接口傳入訂單號、金額、幣種、用戶選擇的支付方式API 服務(wù)層校驗參數(shù)生成內(nèi)部支付單號并把支付狀態(tài)標(biāo)記為待處理路由核心接收支付單讀取當(dāng)前生效的路由策略通過預(yù)計算選出目標(biāo)通道調(diào)度器把支付狀態(tài)下發(fā)觸發(fā)連接器適配層通過目標(biāo)通道創(chuàng)建遠(yuǎn)端支付會話通道返回支付會話標(biāo)識、跳轉(zhuǎn)地址等信息服務(wù)層把結(jié)果組裝成統(tǒng)一響應(yīng)返回給業(yè)務(wù)系統(tǒng)用戶完成支付后通道向回調(diào)處理器發(fā)起異步異步通知回調(diào)處理器驗簽解開數(shù)據(jù)更新本地支付單狀態(tài)并觸發(fā)訂單完成回調(diào)業(yè)務(wù)系統(tǒng)接收支付完成通知執(zhí)行后續(xù)發(fā)貨、積分等動作。這個流程里最容易忽略的是第 3 步的“預(yù)計算”和第 6 步的“回調(diào)驗簽”。路由預(yù)計算不是隨便選一個通道而是需要考慮通道狀態(tài)、歷史成功率、費率成本、用戶地域等多種條件。回調(diào)驗簽則決定了支付結(jié)果是否可信任何繞過驗簽直接更新狀態(tài)的做法都會給資金安全留下巨大隱患。2.3 狀態(tài)機與冪等設(shè)計為什么失敗重試不會重復(fù)扣款支付單從創(chuàng)建到終態(tài)狀態(tài)機設(shè)計非常關(guān)鍵。通常包含待支付、支付處理中、支付成功、支付失敗、已退款、部分退款等狀態(tài)。這里最難的是“支付處理中”這個中間態(tài)請求已經(jīng)發(fā)給通道但還沒有收到明確成功或失敗結(jié)果。如果此時掉電或超時需要靠狀態(tài)機允許從中間態(tài)重新查詢通道狀態(tài)而不是簡單地把狀態(tài)改回待支付。冪等設(shè)計是防止重復(fù)扣款的基石。一般來說每次支付請求會攜帶冪等鍵由訂單號和內(nèi)部支付單號組成。編排層在收到重復(fù)請求時會直接返回原有請求的處理結(jié)果而不是重新向通道發(fā)起扣款。我們在實際驗證中專門用腳本并發(fā)發(fā)了十幾筆相同訂單號的請求最終都指向同一筆支付單沒有出現(xiàn)重復(fù)扣款。需要明確的是編排層所有的狀態(tài)都是“支付過程狀態(tài)”不等于資金狀態(tài)。真正錢的流轉(zhuǎn)記錄還是要以通道側(cè)的對賬單為準(zhǔn)。這一點在業(yè)務(wù)系統(tǒng)對接時就要約定清楚避免兩邊口徑不一致。3. 部署解析從零跑通一套可觀察的單機環(huán)境3.1 部署前要準(zhǔn)備好的東西版本、依賴與應(yīng)用密鑰單機部署 Hyperswitch 并不復(fù)雜但有幾個前置條件比代碼本身更容易讓人卡住。首先部署環(huán)境需要準(zhǔn)備 Docker 和容器編排插件。雖然源碼方式也能直接運行但在日常開發(fā)驗證中容器化明顯更省事。單機驗證建議至少給到 4 核 CPU、8G 內(nèi)存和 20G 磁盤太低的配置跑不起來數(shù)據(jù)庫初始化階段經(jīng)常 OOM。其次應(yīng)用依賴集中在一個關(guān)系型數(shù)據(jù)庫和一個緩存服務(wù)。數(shù)據(jù)庫用于保存支付單、路由配置、事件記錄等結(jié)構(gòu)化數(shù)據(jù)緩存用于保存短期會話狀態(tài)和頻控計數(shù)。如果本地沒有這兩個服務(wù)先用系統(tǒng)包或容器把數(shù)據(jù)庫和緩存部署好確保網(wǎng)絡(luò)連通。最終還需要準(zhǔn)備一組應(yīng)用密鑰用于加密敏感的通道憑據(jù)。生產(chǎn)環(huán)境會建議通過外部密鑰管理服務(wù)注入單機演示可以直接放在環(huán)境變量里。這個密鑰一旦丟失之前加密過的配置就無法解開了所以一定要做好備份。3.2 用容器編排把核心依賴?yán)饋硪砸粋€最小化的本地驗證環(huán)境為例我習(xí)慣先把依賴層用容器拉起再啟動支付服務(wù)本身。下面是一個簡化版本的編排配置重點是展示依賴關(guān)系不同版本下具體鏡像名會有些差異services: postgres: image: postgres:15 environment: POSTGRES_USER: pay_user POSTGRES_PASSWORD: pay_password POSTGRES_DB: pay_db ports: - 5432:5432 volumes: - pg_data:/var/lib/postgresql/data redis: image: redis:7 command: [redis-server, --appendonly, yes] ports: - 6379:6379 volumes: - redis_data:/data volumes: pg_data: redis_data:這個配置里有兩個細(xì)節(jié)值得強調(diào)。第一給 Redis 開了 appendonly否則容器重啟后緩存數(shù)據(jù)可能丟失第二數(shù)據(jù)庫和服務(wù)的數(shù)據(jù)目錄都用命名卷持久化避免容器重建導(dǎo)致數(shù)據(jù)清空。啟動依賴后再單獨啟動支付服務(wù)容器。這個階段最關(guān)鍵的是環(huán)境變量。以下列表可以對照檢查環(huán)境變量作用示例數(shù)據(jù)庫連接串應(yīng)用連接數(shù)據(jù)庫postgres://pay_user:pay_passwordpostgres:5432/pay_db緩存地址應(yīng)用連接緩存服務(wù)redis://redis:6379/0應(yīng)用密鑰加密通道憑據(jù)一串32位以上的隨機字符串日志級別控制日志輸出量info路由配置路徑指定路由規(guī)則文件位置/etc/pay/router.json3.3 初始化配置數(shù)據(jù)庫遷移、應(yīng)用啟動與健康檢查數(shù)據(jù)庫啟動后下一步是確認(rèn)數(shù)據(jù)庫遷移已經(jīng)執(zhí)行。支付編排服務(wù)一般會把表結(jié)構(gòu)變更放在遷移腳本中首次啟動時自動執(zhí)行。如果遷移失敗要在日志里找到具體是哪張表創(chuàng)建失敗常見原因是數(shù)據(jù)庫版本太低或字符集配置不對。遷移通過后啟動服務(wù)用健康檢查接口確認(rèn)狀態(tài)。這個階段我們會在本地執(zhí)行類似下面的命令把服務(wù)注冊到內(nèi)部檢測系統(tǒng)里docker compose up -d docker compose ps curl -s http://127.0.0.1:8080/health健康檢查返回正常狀態(tài)后千萬別急著直接連生產(chǎn)通道先做兩件事第一確認(rèn)應(yīng)用能正常讀寫數(shù)據(jù)庫最簡單的方式是發(fā)起一次查詢支付單狀態(tài)的請求第二確認(rèn)緩存連接正常否則路由決策和頻控邏輯會在流量上來后頻繁報錯。3.4 數(shù)據(jù)目錄、日志目錄與常見啟動失敗的信號部署過程中最常見的啟動失敗信號我列幾個高頻的數(shù)據(jù)庫連接被拒大概率是連接串里的賬號密碼和數(shù)據(jù)庫實際配置不一致先檢查數(shù)據(jù)庫容器的環(huán)境變量端口占用支付服務(wù)默認(rèn)端口被其他進程占用調(diào)整映射端口前記得同步修改健康檢查的地址Redis 內(nèi)存耗盡本地 Redis 默認(rèn)沒有內(nèi)存上限數(shù)據(jù)量上來后可能 OOM單機驗證建議限制 maxmemory并設(shè)置適當(dāng)?shù)奶蕴呗赃w移超時數(shù)據(jù)庫第一次建表很慢容器編排里可以把數(shù)據(jù)庫服務(wù)標(biāo)記為健康后再啟動應(yīng)用避免應(yīng)用比數(shù)據(jù)庫先起來。日志目錄需要提前規(guī)劃。單機部署時日志落在容器標(biāo)準(zhǔn)輸出直接通過容器日志接口查看即可。如果后續(xù)要上生產(chǎn)日志必須接入集中采集平臺并把敏感字段在輸出前過濾掉。這里有很深的教訓(xùn)后面我專門講。4. 接入真實支付通道連接器配置與沙盒支付驗證4.1 連接器適配器是什么為什么要為每個通道寫一層適配連接器適配器是 Hyperswitch 對外部通道的統(tǒng)一接入層。每接入一個通道本質(zhì)上是實現(xiàn)一套適配邏輯接收編排層下發(fā)的標(biāo)準(zhǔn)化支付指令轉(zhuǎn)換成通道接口要求的參數(shù)結(jié)構(gòu)再封裝返回結(jié)果。為什么必須寫這層適配而不是直接調(diào)通道接口因為通道之間的差異無處不在。有些通道要求金額以分為單位有些要求以分為單位再補兩位小數(shù)有些返回錯誤碼是數(shù)字有些是字符串有些對回調(diào)地址有域名白名單限制有些要求回調(diào)地址必須攜帶固定的加密參數(shù)。適配層的價值就是把所有“不確定性”集中在一個地方處理。業(yè)務(wù)側(cè)永遠(yuǎn)只看見統(tǒng)一結(jié)構(gòu)編排層永遠(yuǎn)只向適配層下發(fā)標(biāo)準(zhǔn)指令。即使某平臺突然調(diào)整了接口版本也只需要修改對應(yīng)的適配實現(xiàn)不需要碰上層業(yè)務(wù)邏輯。4.2 配置通道憑據(jù)與商戶身份通道配置主要涉及兩類數(shù)據(jù)一類是通道對接信息包括網(wǎng)絡(luò)環(huán)境中的商戶號、API 密鑰、回調(diào)驗簽公鑰另一類是渠道能力參數(shù)例如是否支持預(yù)授權(quán)、是否支持部分退款、結(jié)算幣種范圍等。配置通道憑據(jù)時有三個容易踩坑的點密鑰加密通道密鑰進入配置前必須用應(yīng)用密鑰加密存儲不能以明文形式出現(xiàn)在配置文件中環(huán)境隔離沙盒環(huán)境和生產(chǎn)環(huán)境的憑據(jù)絕不能混用。我們有次在驗證環(huán)境誤把一條生產(chǎn)憑據(jù)復(fù)制到沙盒配置里導(dǎo)致沙盒支付被真實結(jié)算排查了很久才定位到權(quán)限隔離不同商戶主體應(yīng)該使用不同的憑據(jù)組防止跨商戶越權(quán)操作。建議先把通道配置為沙盒模式在沙盒里跑通完整支付流程后再在維護窗口切換到生產(chǎn)模式。通道切換前還要檢查回調(diào)地址是否在白名單中很多通道的回調(diào)地址變更需要提前一天報備。4.3 在支付沙盒里走第一筆失敗單如何看日志定位問題沙盒驗證的第一步是用一個測試商戶身份創(chuàng)建一個支付請求。請求通常包含訂單號、金額、幣種、支付方式和用戶標(biāo)識。如果創(chuàng)建請求返回成功說明參數(shù)映射和認(rèn)證鏈路是通的如果返回認(rèn)證失敗優(yōu)先檢查簽名算法是否實現(xiàn)正確。第一筆請求大概率是不能直接成功的這不代表部署出了問題而是需要觀察日志里路由決策的日志輸出。路由日志會顯示請求命中了哪條規(guī)則、選擇了哪個通道、通道返回的原始錯誤信息。常見的問題包括參數(shù)不匹配金額字段單位錯誤導(dǎo)致創(chuàng)建支付會話失敗來源限制通道對發(fā)起支付的環(huán)境有檢測測試環(huán)境容易被風(fēng)控拒絕回調(diào)地址不合法沙盒要求回調(diào)地址必須在預(yù)設(shè)名單中測試卡受限特定測試卡號只能在特定金額范圍內(nèi)使用。我們在模擬項目X中處理一個典型問題就是“錯誤碼映射鏈不完整”。適配層收到一條通道的錯誤碼但錯誤碼表里沒有對應(yīng)翻譯導(dǎo)致上層看到的是一串原始錯誤信息而不是標(biāo)準(zhǔn)化錯誤碼。后來補全適配層錯誤碼表后業(yè)務(wù)側(cè)才真正能用統(tǒng)一的錯誤碼做邏輯分支。5. 路由與降級策略把編排層變成風(fēng)控和體驗的避震器5.1 路由規(guī)則到底怎么設(shè)成本優(yōu)先、成功率優(yōu)先還是按通道比例路由規(guī)則是整個編排能力的核心它的價值不在技術(shù)實現(xiàn)而在策略設(shè)計的合理性。常見的路由策略有幾種策略核心邏輯適用場景成本優(yōu)先選擇單筆成本最低的通道對毛利敏感的電商場景成功率優(yōu)先根據(jù)近期成功率選擇通道高客單價場景優(yōu)先保障支付成功按比例分發(fā)按比例把流量分配到多個通道灰度新通道逐步觀察表現(xiàn)按地域分流根據(jù)用戶地域選擇本地優(yōu)勢通道跨境支付、區(qū)域差異化運營按金額帶分流大額走穩(wěn)定性通道小額走低成本通道綜合成本與體驗實踐中我建議不要做單一策略而是組合使用。例如默認(rèn)按成本優(yōu)先分塊但當(dāng)某通道成功率在最近五分鐘內(nèi)低于閾值時把它的權(quán)重臨時降為零流量自動切換到備用通道。這就是后面要說的自動降級。路由規(guī)則最好支持熱加載。也就是說路由配置修改后不需要重啟服務(wù)而是通過配置中心或文件變更觸發(fā)重載。否則每次調(diào)整策略都變成一次運維發(fā)布效率太低。5.2 支付失敗后的自動換切別把重試做成定時炸彈支付失敗后的重試和換切看起來簡單做不好卻會變成事故。最典型的問題是重試風(fēng)暴一批請求全部失敗后如果沒有熔斷機制調(diào)度器會把所有失敗請求都集中到另一條通道結(jié)果備用通道也被壓垮。合理的設(shè)計需要三層控制第一層是單筆重試限制。一筆支付最多嘗試兩個通道超過限制后直接返回失敗避免無限換切。第二層是基于狀態(tài)的重試間隔。失敗后退避式重試如果用戶在支付等待界面重試要控制在幾秒內(nèi)完成如果是異步任務(wù)可以設(shè)置更長的退避間隔。第三層是通道熔斷某通道連續(xù)失敗超過閾值后主動將其移出候選池一段時間。我們曾模擬過這樣一類場景主通道因為網(wǎng)絡(luò)波動導(dǎo)致大部分請求超時由于沒有熔斷所有請求直接切向備用通道備用通道出現(xiàn)連鎖失敗。加上熔斷后主通道進入冷卻期備用通道的流量有自控均值整體支付成功率反而比沒有熔斷時更穩(wěn)定。5.3 Webhook 回調(diào)的可靠投遞與對賬回調(diào)是支付鏈路中最為關(guān)鍵的一環(huán)。通道完成支付后通過回調(diào)通知編排層更新訂單狀態(tài)。如果回調(diào)丟失就會造成“用戶已經(jīng)付款但訂單沒有推進”的問題。因此回調(diào)處理至少要做三件事驗簽、冪等、兜底查詢。驗簽保證回調(diào)來源可信冪等保證同一回調(diào)重復(fù)到達時不重復(fù)處理兜底查詢則是定時向通道側(cè)查詢支付狀態(tài)主動修正不一致的數(shù)據(jù)。對賬是所有支付系統(tǒng)的最后一道防線。通常以通道側(cè)提供的對賬單為準(zhǔn)逐筆比對內(nèi)部支付單狀態(tài)。對賬發(fā)現(xiàn)差異時先以對賬單為準(zhǔn)更新內(nèi)部狀態(tài)再人工判斷是否補單退款。這個過程代碼上看起來簡單但真正執(zhí)行時最消耗人的是異常分類規(guī)則和人工復(fù)核流程。6. 生產(chǎn)化之前必須補的功課安全、運維與兼容性6.1 憑據(jù)加密與日志脫敏進入生產(chǎn)前安全加固必須優(yōu)先處理不能等上線后再補。第一位就是憑據(jù)管理。通道商戶號、API 密鑰、回調(diào)驗簽公鑰都不能放明文環(huán)境變量更不能進日志。配置密鑰時優(yōu)先選擇外部憑證管理服務(wù)讓應(yīng)用在啟動時動態(tài)拉取而不是打包進容器鏡像。日志脫敏同樣重要。支付系統(tǒng)日志中容易出現(xiàn)卡號、有效期、用戶手機號等敏感字段。即便日志只在內(nèi)部系統(tǒng)查看也必須保證敏感信息經(jīng)過掩碼處理。之前我們排查一個線上問題時發(fā)現(xiàn)日志里連著打印了完整卡號那之后就把所有涉及卡號的日志字段強制做了過濾。日志脫敏不能靠一時興起要沉淀成可復(fù)用的過濾器集中處理所有輸出字段。規(guī)則包括但不限于只保留卡號后四位手機號保留前三位和后兩位商戶密鑰永遠(yuǎn)不打印。6.2 監(jiān)控指標(biāo)、告警閾值和人工降級預(yù)案生產(chǎn)環(huán)境不能只靠日志排查問題必須有完整的監(jiān)控指標(biāo)和告警。支付編排層最需要盯的指標(biāo)是這幾項支付成功率整體成功率出現(xiàn)明顯下降優(yōu)先懷疑路由策略或者某個通道發(fā)生故障通道失敗率各通道單獨統(tǒng)計實時發(fā)現(xiàn)異常通道平均支付耗時與長尾耗時p95、p99 耗時暴露性能瓶頸回調(diào)延遲從支付完成到收到回調(diào)的時間間隔延遲偏高可能影響訂單履約重試次數(shù)分布重試過多的請求說明主通道質(zhì)量下降。告警閾值沒有統(tǒng)一標(biāo)準(zhǔn)需要根據(jù)業(yè)務(wù)波動調(diào)整。一個相對安全的起點可以這樣設(shè)置支付成功率五分鐘均值低于 95%觸發(fā)提醒某通道失敗率高于 10%觸發(fā)熔斷評估回調(diào)延遲超過五分鐘的請求占比高于 1%觸發(fā)鏈路排查。除了自動熔斷還需要準(zhǔn)備人工降級預(yù)案。當(dāng)系統(tǒng)出現(xiàn)自動遷移解決不了的問題時運維可以直接修改路由配置將流量切到備用通道或按比例灰度切換。這個操作必須在文檔里記錄步驟并定期演練。6.3 非功能需求清單時區(qū)、幣種、小數(shù)精度與測試卡生產(chǎn)化不只是功能層面的問題還有一堆非功能細(xì)節(jié)要考慮。這里列一個我們踩過的坑清單時區(qū)與時間戳。支付單據(jù)的時間戳建議統(tǒng)一使用 UTC 存儲業(yè)務(wù)展示時再轉(zhuǎn)換到本地時區(qū)。不要用服務(wù)器本地時間直接參與對賬不同物理機的時區(qū)偏移會導(dǎo)致對賬平不了。幣種與金額精度。金額在數(shù)據(jù)庫里使用最小貨幣單位存儲例如“分”或“厘”避免浮點數(shù)計算誤差。不同幣種之間的小數(shù)位數(shù)不一致涉及幣種轉(zhuǎn)換時尤其要小心。測試卡與沙盒數(shù)據(jù)隔離。沙盒環(huán)境里保留的測試卡、測試用戶在切換生產(chǎn)前要全部清理或標(biāo)記。否則一旦測試單進入生產(chǎn)統(tǒng)計對賬和報表都會亂。參數(shù)校驗。支付請求的金額、幣種、訂單號長度等參數(shù)必須在入口校驗避免異常數(shù)據(jù)流入通道。簡化的校驗邏輯會在通道側(cè)暴露無法從編排層兜底。最后以我的實操經(jīng)驗收個尾如果說拆解這套開源支付方案的部署過程有什么讓我印象最深的那一定是不要在第一天上線時就上全部通道。第一次接入只要把一個主通道和備用通道跑通把路由、回調(diào)、對賬、熔斷全鏈路驗證一邊再逐步增加通道。通道越多運維復(fù)雜度和故障面就越大前期把基礎(chǔ)邏輯做扎實后面才能扛得住流量。另外建議在正式切換前做一次故障演練強制把主通道不可用看看自動換切是否迅速生效、備用通道能否承接全部流量、失敗率是否觸發(fā)告警。這個演練比看十遍文檔都有效。支付系統(tǒng)本質(zhì)上是最不能接受“上線后慢慢修”的系統(tǒng)投入時間做預(yù)案永遠(yuǎn)不會虧。這套方案后續(xù)還有很多可以擴展的方向比如把路由策略接入智能風(fēng)控、引入更多渠道適配、將失敗重試機制做成可視化配置面板。而所有擴展的前提都是先把基礎(chǔ)部署、通道接入和運維監(jiān)控打磨到位。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
偷拍91九色| 丁香社区婷婷五月| 国产亚洲精品AAAAAAA片| 丁香五月婷婷六月婷| 成人片在线播放| 六月婷婷色五月| 人妻六月天| 久草狼人| 夜夜撸天天日| 亚洲性受XXXX五月丁香| 玖玖九九9999在线观看视频精品| 亚洲综合激情五月久久| 久久这里只有精品99| 97干免费视频| Www.Av网9| 九九性爱网| 丁香五月天在线视频| 婷婷玉月丁香五月在线视频| 色婷亚洲五月丁香| 国产肥白大熟妇BBBB视频| 国产VA亚洲VA96| 伊人五月天97| 精品九九九久| 激情又色又爽又黄的A片| 五月婷俺去也| 久久久jd| 欧在线一区| 激情AV在线| 26uuu美女三级视频| 成人久碰| 日韩在线看AV| 熟女人妻一区二区三区免费看| 色欲五月婷婷| 九九这里精品| 色天天久婷婷| 婷婷,五月天,丁香,第一| 婷婷五月激情四射手| 大香蕉伊人爱在线| 婷婷成人视频| 天天日天天爽夜夜爽| 天天色情站| 狠狠se| 色色操| 先锋资源91| 狠狠操.COM| 丁香五月激情啪| 久9综合| 色综合五月在线| 人人性久久| 91大操| 色情五月婷婷| 激情六月天| 大香网伊人久久综合| www...com黄在线观看| 99色在线| 99热手机在线精品| 久久综合九九| 99热这里只有精品9| 91婷婷色 | www,26uuu,c0m,色情| 五月天婷婷久久视频| 激情网 五月天| 9精品在线| 精品视频网| 六九色综合婷婷五月天| 色五月婷婷九月| 九九九九国产| 九九激情网| 婷婷亚洲久久| 日本久久性| 六月激情网| 久久婷婷青青| 玖玖爱导航| 丁香六月婷婷一区二区三区| 99久在线精品99re8热| 丁香五月六月激情| 天天天天天日| 91成人视频| 99亚洲精品| 无码99| 五月婷婷六月天| 久久这里只有精品5| 亚洲性爱AV在线| 亚洲无AV在线中文字幕| 爆乳熟女-区二区三区| 综合色七七| 日本精品人妻无码77777| 婷婷爱五月天| 最新无码专区| 97日在线视频| 天天噜天天爱| 婷婷无码五月天| 激情五月综合| 99爱视频| 伊人在线婷婷草| 激情网 五月天| 最新精品视频99| 久久久99精品| 五月婷婷丁香| 999热在线观看视频| 丁香花五月天社区| 免费视频舔| 中文在线成人| 亚洲五月婷婷在线| 五月天成人在线视频网站| 九九青草热| 五月丁了香蕉综合| 99热在线中文字幕| 思思热国产在线| 99热66| 精品久热| 99se丁香| 亚洲欧洲色色| 色噜噜五月天| 婷婷五月综合国产精品| 五月婷婷啪啪啪| 26uuu美女三级视频| 色五月激情问网站| 99欧州偷拍视频| 99网| 精品欧美一区二区三区久久久| 五月丁香色欲| 欧美噜噜噜草| 日韩欧美一级大黄网站| 久久ab| 日本综合久久| 色五月丁香总合网| 91超碰在线观看| 国产又黄又爽又色的免费| 九热网站| www.minyis.com【JT】实力收量可预付TG@LXSPSW8| 激情五月天伊人av| 亚洲精品无人区| 色婷成人狠干| 婷婷激情五月天7| 99免费视频网| 激情五月四色| 五月丁香六月婷婷久久肏| 另类天堂| 五月五婷婷网| 五月玖玖| 超碰人人干| 五月婷婷六月丁香综合| 日本色色影片| 婷婷丁香五月激情综合站_久久五月丁香激情综合_开心五月综合激情综合五月_婷 | 久久久无码精品成人A片小说| 四色99久久| 亚洲色图五月丁香五月婷婷| 成人五月天在线视频在线观看| 26uuu亚洲欧美| 超碰人人射| 99亚洲视频| 久久久久久久久人妻| 成人做爰黄A片免费看直播室男男| 色色综合成人网| 亚洲愉拍99热成人精品| 婷婷大香蕉| 六月婷婷综合| 99热国产这里只有| 婷婷六月激情综合| 五月天婷婷在线观看| av电影在线播放| 婷婷丁香五月天中文字幕| 香蕉AV福利精品导航| 丁香五月在线视频| 中文AV网站| 亚洲综合色棒| 99精品视频偷拍| 另类专区在线| 五月丁香婷婷久久| 人妻五月天激情开心网| www.狠狠| 久草xx性爱视频| 色护士综合| 天天干天天日天天操| 91色吧网| 五月激情在线| 丁香久久| 99惹在线精品免费观看| 婷婷大香焦| 丁香五月婷婷色| 伊人网啪啪| 激情综合网址| 色5月婷婷| 热996精品在线观看| 欧美影院| 欧美97p| www.cao.com久久| www.minyis.com【JT】实力收量可预付QQ2101460746 | 五月婷婷久久综合| 99精品国产在热久久| 天天狠狠色噜噜| 91九色成人原创视频| 日韩综合久| 色99在线| 五月婷天堂视频| 色婷婷久久综合| 日日干日日s| 狠狠 久久| 综合大香蕉| 婷婷欧美激情综合| 婷婷色操| 婷婷五月天天| 日本99视频| 色婷婷五月网| 午夜丁香| 综合玖玖偷拍| 五月丁香婷婷五月色| 五月天婷婷丁香导航| 国产色色在线| 丁香五月人妻| 久久久婷婷色五月资源网| 开心五月激情网| 日韩十国产极品久久| 丁香五月婷婷激情网| 久久黄色片| 欧美综合五月丁香六月婷| 丁香五月天婷婷久久综合| 久9热视频在线观看| 99riav 亚洲| 五月婷婷av| www.av骚货| 婷婷激情五月天天天开心| 七七色综合| 六月婷婷色综合| 五月六月婷| 六月丁香婷婷尤物| 亚洲色婷婷婷婷人人爽| 激情深爱综合| 久久婷婷五月天激情新地址| 久久婷婷五月丁香网| 影音先锋男人站,影音先锋男人色资源网,影音先锋AV最新资源站,影音先锋AV资源 | 五月婷婷深爱六月| 五月人妻婷婷| 五月丁香综合网色欲| 99资源在线视频| 我淫我色婷婷五月天激情四射| 超碰成人电影| 日韩中文欧美| 色综合色色色| 性爱综合网| 几激情五月婷婷色五月色天堂| 五月丁香天天| 插少妇综合网| 丁香婷婷六月激情综合| 五月花亭亭| 蜜臀av无码久久久久久久久| 精品国产va久久久久| 亚洲久久日| 91亚洲视频| 色五月综合激情网| 熟妇国产| 色色影院黄大片| 操草草草| 男人天堂AV在线一区二区| 五月婷婷 婷婷五月 一区二区 久久久| 色婷婷基地| 99视频| 99热这里是精品| 五月丁香六月婷婷久久肏| 久久思思精品| 欧美日韩成人在线网| 五月丁香婷婷综合视频| 五月婷婷色| 六月婷婷八月丁香| 亚洲激情婷婷| 丁香五月天成人| 综合天堂AV久久久久久久| 亚洲精品一区中文字幕乱码| 成人五月丁香花| 中文AV网站| 狠狠色狠狠操| 狼人久草| 大伊香蕉精品视频在线| 久久婷五月影院| 99日本视频在线观看专区| 色播激情| 国产免费一区二区三州老师F1F1| 丁香五月天色| 久热这里只有精品99re| 啪啪激情综合| 9色91视频| 九九丁香社区欧美激情| 操日视频| 五月激情六月综合| 久久五月婷综合| 99久久婷婷综合| 亚洲无码yw| 丁香六月婷婷激情综合| 玖玖资源站视频| 婷婷五月综合啪| 天天色播| 人操91在线| 99自拍视频网站| 国产日韩欧美性生活| 色射婷婷五月天| 伊人五月天| 超碰人人操人人干| 91聚色综合网| 九九99在线观看视频| 久99久热只有精品国产99| 久久色五月天综合网| 天天搞天天色综合| 亚洲视频在线网站| 婷婷精品| 久久五月婷婷丁香| 开心婷婷五月综合| xxxx五月| 97碰免费视频在线| 激情综合另类| 97色色色色色色色色色色色色色| 99九九在线精品热动漫| 99在线资源视频| 午夜成人天堂久久无码日韩久久| 懂色AⅤ| 性爱网五月天| Caoub青青超碰| 九九日本视频| 色婷婷69| 四季AV综合网| 日日夜夜狠狠干| 五月天播播| 五月深情久久| 丁香五月激情性色郤| www.久久久久久久| 久久婷中文字幕| 中文字幕簧片| 五月天大香蕉| 99热最新网址| 日本久热| 九九色之九九色之88| 99视频这里只有久久精品 | 欧美噜一噜| 五月丁香婷婷综合| 欧洲不卡视频| 99亚洲视频| 亚洲天堂青草| 99re热免费观看视频精品| 超碰在线成人| 色五月激情问网站| 欧美交换配乱吟粗大25P| 婷婷综合五月天| 九九久热| 婷婷五月天AV在| 五月丁香婷婷六月天| 日本99热| 亚洲一色色色色色色色色| 久久9精品| 色九月国产| 欧美日韩AAAA| 黄色99热| 99热99极品观看| 狠狠综合久久综合| 美女五月狠狠| 久久婷婷丁香视频网| 婷婷五月亚洲一本在线丁香| 东京热人妻一区二区三区在线| 亚洲色婷婷网站| 五月丁香婷婷综合| 激情婷婷狠狠干| 欧美内射AAAAAAXXXXX| wuyuedingxiang99| 欧美性生交XXXXX无码小说| 天天日天天干天天爱| 九九热视频这里只有精品| 日韩另类| 国产又黄又爽又色的免费| 国产乱码久久| 欧美大片免费观看| www,26uuu,c0m,色情| 色婷婷AV久久| 激情久久久久久| 另类图片色五月| 丁香六月激情综合| 热热久久精品视频| www婷婷色| 玖玖资源站视频| 狠狠干狠狠操狠狠爱| 五月天狠狠网| caop在线视频| 久久小视频| 六月伊人婷婷| 99九九热视频免费| 色五月婷婷综合| 六月丁香五月激情亚洲AV| 国产一级片| 99re26视频| 青青久久91| 大香蕉久久婷婷| 激情五月天婷婷| 爱射综合| 99久久极情精品一区| 99.N在线视频| 99re热视频这里只精品| 无码色| 久久综合婷婷| 91久久国产自产拍夜夜91久久精品文字>91麻豆精品国产 | 国产AV一区二区三区最新精品| 亚洲情a| 黑人无码一区| 久久婷婷七月丁香| 97碰在线视频| 五月丁香黄色视频| 人妻久久久久久久久妻久久久久久久久 | 国产精品天天狠天天看| 天天插天天干| 亚洲五月天伊人| 丁香狠狠操| 亚洲综合激情五月久久| 五月丁香综合激情网| 五月婷婷色色| 69精品人妻不卡视频| 夜夜干夜夜操| 色99在线| 中文字幕成人日韩| 久久九色| 久草视频一,二三四| 丁香花五月天| 五月婷婷在线短视频| 9热成人在线视频| 久久综合影院| 婷婷五月激情天| 五月天婷婷基地| av五月天婷婷丁香| 91五月天| 日本久久99| 婷婷十月激情综合网| 玖玖国产视频一区| 五月婷婷丁香大陆免费| 精品九九久久| 无码免费人妻A片AAA毛片西瓜| 天天在线XXX| 狠狠色狠狠鲁| 激情播丁香| 狼友视频在线观看18| site:esunnet.com| 色五月综合| 综合99在线| 国产在线aaa片一区二区99| 五月天社区婷婷丁香社区| 五月丁香六月情婷婷久久| 玖玖色综合网| 久久五月天视频| 丁香五月色激情| 精品人妻伦九区久久AAA片| 久久婷婷激情| 91操片| 很很干夜夜干| 日婷婷| 色久一| 亚洲成人无码专区| 国产精品成人AV在线观看春天| 1024人妻| 99re思思热久久| 99精品久久久久| 思思热精品在线观看| 玖玖九九99| 免费AV黄在线播放| 九九热只有精品6| 综合五月婷婷| 婷婷丁香视频在线观看免费| 激情五婷精品网在线观看网址| 99色干| www色中色综合| 久久伊人日日夜夜| 天堂AV在线看| 亚洲美女网Va| 九九综合伊人| 天天色天天日| 国产成人精品亚洲线观看| 久久精品性爱| 国产精品人人做人人爽人人添| 久热伊人| 日韩人妻白浆视频系列| 丁香五月天日韩无码| 亚洲区1| 99天堂网最新| 殴美日比视频| 夜夜人妻五月天| 狠狠88综合久久久久噜噜噜| 天天狠狠色| www.五月天激情| 99热色精品| 91欧美日韩综合| www.婷婷五月天.com| 丁香五月欧美| 色综合99无码| 人人操女人| 婷婷五月情| 99激| 五月六月婷| 色五月五月婷婷| 激情五月天社区| 91人妻视频| 亚洲成人在线五月天| 超碰99热精品| 色婷婷在线视频| Aaa久久| 黑人熟妇一区二区三区| 婷婷5月色| 天天日天天日天天搞| 五月丁香啪啪啪| 开心五月深爱五月| 色停停影院五月天| 美女天天久久| 色五月婷婷小说亚洲中文字幕组| 99热精品在线播放| 丁香五月婷婷总啪啪| 九九大香蕉黄色影院| 天天舔天天插天天爱| 久热这里只有精品66| 人人色婷婷| www.maotanji.com| 99热在线中文字幕| 超碰色色综合| 九九色婷婷Av| 激情小说五月丁香在线视频观看视频| 色色色成人网| 国产成人一区二区三区在线观看| 玖玖婷婷视频| 欧美熟女乱又伦| 色爱综合网| 99在线精品免费视频| 午夜丁香六月婷| 五月丁香啪啪激情| 婷婷在线视频| 激情综合色婷婷啪啪六月天| 天天舔天天| 激情综合在线观看| 99久高清视频| 六月丁香婷婷在线波多| 婷婷91| 香蕉大综综综合久久| 激情综合色| 香蕉综合在线| 五月丁香激情综合久久| 偷偷狠狠久久婷婷五月天| 七七九色| 亚洲五月丁香综合网| 色综合久网| 人人色性网| 国产精品日日躁夜夜躁| www.99视频| 国产毛多水多女人A片| 五月久久婷婷天堂视频| 欧美婷婷成人| 日韩AC在线免费观看| 伊人网欧美在线男人天堂五月丁香| 婷婷五月天堂| 欧美婷婷色五月网| 亚艹艹| 五月综合激情婷婷六月色窝| 97操碰| 久久92| 97五月天婷婷综合激情网| 婷婷五月天a| 日产精品一线二线三线芒果| 婷婷五月天美女| 久久综合丁香| 日韩精品999| 婷婷五月在线观看| 五月天婷婷社区久久综合| 夜夜爽天操| www.99精品日操伊人乱碰在线| 夜夜人妻五月天| 99免费在线| 99国产视频网| 第四色色色色色丁香五月天| 丁香久久久| 潘金莲AAAAAAAAAA| 99免费视频网| 色色色色色五月| 99热.com| 丁香六月婷婷综合啪啪| 久久性爱视频| 中文字幕在线不卡| 小视频久久久aaa| 另类图片天天影视在线观看| 成人在线99| 激情五月图| 最近中文字幕在线中文视频| 天天操,天天插| 婷婷.com| 日本丁香五月| 91Chinese在线| 91在线日| 亚洲久久视频| 91日在线视频| 狠狠综合网| 9久久婷婷国产综合精品性色| 91久久综合亚洲鲁鲁五月天| 超碰在线91| 五月婷婷五月天| 五月婷婷激情69| 伊人激情网| 久热 91| 婷婷午夜天| 天天看片日日夜夜| 亚洲精品九九| 婷婷久久网| 五月丁香啪啪激情| 色婷婷另类| 99热天堂| 天天操天天爽天天爱| 97成人操| 久久五月丁香婷婷| 色婷婷香蕉丁丁网| 99碰| 女人高潮内射99精品| 人人视频色| 国产操B视频| 婷婷啪啪| 综合色影院| 日日干日日色| 久久日韩婷婷五月| 亚洲精品99| 婷婷精品性视频| 六月丁香五月婷婷| 欧美激情综合色丁香婷婷五月天| 无码人妻激情| 婷婷五月综合中文字幕| 亚洲操人| 亚洲va在线∨a天堂va欧美va| 狠狠爱综合网| 2021日韩无码| 欧美搡BBBBB摔BBBBB| rr天天操| 婷婷五月天深爱| 日本久久视频| 丁香五月 性爱| 精品久久久人妻| 五月婷婷开心丁香| 天天舔夜夜操www com| 色综合av超碰| 96自拍视频九色在线观看| 99干日本| 怡红院AV亚洲一区二区三区H| 五月天婷婷激情| 激情五月天啪啪| 亚洲av免费在线| 天天综合色99| 无码视频国内精品久久久| 另类 在线| www,婷婷| 蜜臀av在线成人电影| 亚洲婷婷视频| 色综合中文色综合网| 一级片无码| www.狠狠| 人人草人人爱| 狠狠操狠狠爱| 丁香五月激情网| 婷婷色激情五月天| 米奇激情婷婷| 婷婷色无码| 五月开心婷婷网| 五月激情网站| 六月久久婷婷| 久9视频免费播放| 99精品丰满| www,奇米影视| 国产SUV精品一区二区883| 伊人久久婷婷| 99操逼视频| 天天肏高清在线| 综合激情视频| 五月丁香六月情| 日韩十国产极品久久| hd五月婷婷在线| 丁香婷婷综合五月天| 久久综合99| 超碰精品在线| 丁香五月天无码AV| 色五月丁香总合网| 人妻乱码久久久| 婷婷97色| 日韩国产AV播放| #NAME?| 天天操天天国产三级片处女学生妹| 天天色综网| 99re欧美精品| 五月婷婷亚洲综合在线| 天堂亚洲 在线| 丁香久月| www久久99| 国产欧美日韩性爱| 小视频aaa久久久| 天天色综合色| 四月婷婷丁香| 天天干天天拍| 天天日夜夜拍| 免费视频WWW在线观看网站| 丰满少妇猛烈A片免费看观看| 操操操97| a色婷婷| 7超碰自拍| www,8050,午夜三级| 天天色伊人| 。久久久久久久久久久久久久人妻| A网在线欧洲| 青草五月天| 色五月91| 熟女少妇内射日韩亚洲| 超碰97色| 九九色中文| 亚洲 在线 性爱 | 久色欧美| 91色久| 国产又粗又大又爽又黄| 婷婷五月天六月综合| 校园激情 亚洲| 五月婷婷色五月| 亚洲综合激情五月久久| 九八Av| 久碰综合| 欧美色骚婷婷五月天| 婷婷五月天香蕉| 在线中文av| 日本强伦片中文字幕免费看 | WWW五月天| 五月婷婷六月丁香在线视频免费在线观看| 婷婷综合久久| 婷婷五月天大香蕉在线视频观看| 婷婷综合五月| 久久性爱视频久久性爱视频| 91色久| 久久久久久久久久久久久久久久一道本| 久xxxx| 狠狠va| 夜色综合网| 日韩无码AV电影网站| 天天狠天天叉| 99精品网址| 五月综合婷婷开心网| 综合XX网| 丁香婷婷天堂| 综合激情五月四射婷婷| 久久久久人妻| 久久五月天激情| 婷婷色亚洲| 丁香婷婷九月| 日韩小视频在线99| 婷婷激情综合色五月久久,色婷婷丁香花,丁香婷婷五月情天,久久婷婷五月综合色 | 精品综合久久久久久五月天| 色婷婷六月天| 激情五月瑟瑟| 婷婷五月天激情综合深爱| 色色色999| 伊人综合婷婷| 丁香六月无码播放| 国产精品久久久久久久久久免费| 生活片五区| 99热这里只有精品22| 亚洲中文字幕在线观看| 九九热av| 婷婷在线视频| 五月丁香婷婷老司机| hd五月婷婷在线| 日本色五月| 五月丁香婷婷三级| 欧美精品XXXXBBBB| 色~性~乱~伦~噜| 久久丁香综合| 婷香狠狠爱五月| 一本伊人色婷| 亚洲综合五月天婷婷| 丁香激情合作五月| 99国产精品久久久久久久久久久 | 色99在线观看| 五月婷婷色色| 日本五月婷| 另类A片| 欧日韩成人| 2017人人操| 狠狠色大香蕉| 99色色| 99热主页日本| 91狠狠综合久久| 99久久婷婷国产综合| 91人人操.COM| 九月色婷婷| 99色色热| 欧美黑人巨大性生话| www.狠狠操.con| 色婷婷丁香五月天| www.色欲丁香婷婷| 国产午夜一区二区三区| 欧美性爱日韩性爱| 伊人五月婷婷| 99色综合网| EEUSS鲁片一区二区三区| 色婷婷丁香五月在线| 成人国产欧美大片一区| 青青草原福利在线| 色婷婷丁香社综合| 色婷婷97| 色99视| 色欧美色色色| 天天久综合| 亚洲情色一区| 99久久网站| 久热这里只有精品66| 9久9久9久女女女九九九一九| 老司机日日夜夜青草| 视频一二区| 丁香五月手机在线| 99黄色| 九九性爱网| 五月婷婷丁香在线| 婷婷五月丁香婷婷| 久久综合网桃花| 久久XX| xxx综合在线| 91九色在线观看免费| 久久激情五月婷婷| 色丁香综合影院| 偷拍91九色| 五月激情丁香五月| 蜜臀av 粉嫩av 懂色av | 久久丁香五月婷婷| 男男野外做爰全过程69| 婷婷射丁香| 五月婷婷免费在线| 黄色网址五月婷婷| 大香蕉五月婷婷| 丁香婷婷五月天色播| 伊人久热91| 久操大香蕉| www色婷婷com| 婷婷的激情五月| 97碰碰人人视频| 五月婷婷六月色| 79精品视频| 婷婷丁香色五月亚洲| 久热A片| 久久一品区| 五月丁香六月婷婷网| 九九热精品6| 人妻爽爽爽久久久久久久久| 嫩草视频。| 九九99久久| 第五色色色婷婷| 99久久国产宗和精品1上映| 五月婷婷黄| 国产伦亲子伦亲子视频观看| 91色逼| 99er6热在线观看精品6| 久99久在线| 玖玖爱伊人网| 99激情| 丁香五月综合网亚洲综合欧美狠狠| 亚洲婷婷91丁香| 97伦色婷婷| 九九热在线视频| 67194中文字幕| 五月亭亭激情综合| 99热9| 99色免费观看全部| 99热网站| 亚洲精品午夜国产va久久成人| 欧美激情-区二区三区| 噜综合| 六月激情婷婷综合| 超碰成人在线免费观看| 91精品激情9| 色色操| 五月丁香激情婷婷| 丁香六月亭亭久久综合| 色婷婷丁香五月丁香| 99热国内精品| 色九月国产| 在线成人国产| 国产精品天天狠天天看| 五月丁香婷婷啪啪| 色综合网址| 综合性爱网| 99热九九热| 狠狠色噜噜狠狠| 2w在线视频| 五月综合激情久久| site:xiongshengzz.com| 色色五月天com| 亚洲久艹| 99视频日韩| 天天操婷婷| 丁香五月色欲| 天天爽天天透天天爱| 六月婷婷七月丁香| www.激情在线| 99精品视频在线6| 日韩三级片一区二区| 欧美性爱五月天| 五月丁香婷婷啪啪| 亚洲av日韩无码| 91AV婷婷| 五月 成人 婷婷| 久久人人九九| 日本三级大片| 久久久精品视频79| 五月激情四射婷婷丁香| 婷婷丁香五月天哟啪| 亚洲小视频免费播放| 五月丁香成人| 91婷色| 9.1综合网| 九九精品在线视频观看| 无码一区二区三区四区五区| 五月天丁香六月综合| 日韩 欧美 国产 一区 二区| 精品国产va久久久久久久| 99热99极品观看| 色婷婷免费观看| 亚洲操精品| 在线观看中文字幕| 天天射影院| 成人免费黄色短视频| 亚洲成人日韩无码精品| 久久精99| 99riAv1国产在线观看| 色色色99| 秋霞午夜理论| 午夜国产精品AV在线播放| 婷婷五月天美女视频| 99re6久热只有精品6在线直播| 性爱视频99| 99九九久久| 欧美性色A片免费免费观看的| 国产精品久久久久久久久久免费 | 婷婷五月天电影区小说区| 橾逼网| 免费看成人747474九号视频在线观看| 激情深爱综合| 天天舔日日肏夜夜爽| 玖玖热视频| 综合激情站| 99热这里有精品| 色99无码| 丁香婷婷五月天校园春色| 开心五激情网| 色5月丁香婷婷| 思思热在线播放| 五月伊人91| 丁香色六月婷婷| 日日天天操| 99热资源在线| 丁香花五月天激情| 激情五月婷婷| www.久久久久久久| 综合色五月天| 任你爽精品免费视频6| 婷婷亚洲天堂| 免费看欧美成人A片无码| 亚洲一区二区无遮挡A片| 亚洲va欧美| 日日夜夜婷婷| 99精品偷自拍| 亚洲成Av人片乱码色第1集| 久热视频A.| 天天天天天日| 精品一二三区久久AAA片| www.久久婷婷| 五月丁香猫咪久久婷婷综合视频激情四射网入口 | 大香av| 激情五月婷婷综合视频| 精品99在线观看| 久久caop| 永久的网站AAAA| 99热这里只有精品免费观看| 丁香五月婷婷啪啪| 超碰三级片| A A色色| 丁香五月综合| 色色色色色五月| 丁香网五月网| 色婷五月| 91丨九色丨熟女丰满| 天天天天天久久久久久| 伊人久久婷婷| 九九热婷婷| 久久色五月天综合网| 色婷婷婷婷| 97精品在线| 精a品a| 桃色成人网| 噜噜色五月| 97自拍视频在线| 亚洲天堂无码| 天天干天天干天天操| 婷婷综合五月| 好好干Av| 婷婷操逼| 五月婷婷|欧美| 亚洲男女激情| 9 9热这里有精品| 婷婷五月婷婷五月天| 公的粗大挺进了我的密道| 午夜成人综合| 色吧五月婷婷| 亚洲视频在线网| 婷婷夜夜夜夜| 久久久婷婷五月天| 甈你aaaaa| 中文字幕欧美日韩VA免费视频| 五月丁香六月在线欧美| 九热视频| 亚洲成人AV在线播放| 色欲影香| se婷97| 26UUU欧美| 激情婷婷综合网| 婷婷精品性性性性性性性| 久久久久9久无码视频| 五月天婷婷深深爱| 中文字幕日本最新乱码视频 | 国产精品色色| 狠狠操狠狠色| 狠狠五月天婷婷激情网。| 日本人妻伦在线中文字幕| 五月天婷婷在看| www.超碰97| 天天综合图片| 百度一下国产精品A| 五月婷婷色激情| 黄色短视频在线观看| 成年人丁香五月| 婷婷五月天激情电影| 久久五月天网| 丁香五月天啪啪| 国产精产国品一二三在观看| 五月丁香综合网色欲| 狠狠精品干练久久久无码中文字幕 | 色婷婷五月天中文字幕| 99综合| 亚洲丁香五月天在线视频| 日本精品人妻无码77777| 色丁香久久久| 色丁香五月婷婷综合久久| 丁香五月婷婷五月| 天天久久狠狠色综合| 久热综合| 热的国产,热的综合,热的有码 | 欧美色片中文字幕久久久久| 99热99热不卡| 在线看av| 人人播| 亚州欧美国产久精国产99综合视频| 深爱五月婷婷| 岛国AV网| 亚洲天堂啪啪| 熟妇人妻中文字幕无码老熟妇| 色丁香久久久| 亚洲有码在线视频| 97人人干人人操| 色播婷婷五月天| 久久久五月天网站| 久久婷婷亚洲| 99精品小视频| 超碰成人在线观看| 午夜无码熟熟妇丰满人妻| 色5月丁香婷婷| 99re热精品在线视频| 丁香五月之久操视频| 久9热视频| 天天日夜夜高潮| 日本少妇AA一级特黄大片| 五月天婷婷在线播放| 婷婷五月激情图片| 五月天色婷婷基地| 大香蕉五月丁香| 国产精品日本一区二区在线播放 | 桃色激情网| 99热只有精品在线播放| 国产色色色色色| www狠狠| 婷婷六月情| 五月天伊人av| 亚洲无码免费看| 综合激情五月天| 无码色| 精品一区二区三区四区五区六区介绍 | 亚洲欧洲中文日韩久久AV乱码| 天天操电影院色狼性av| 久久丁香五月综合六月激情红杏视频| 婷婷五月综合社区在线| WWW.99热| 婷婷伊人网| 色情五月天se| 亚洲综合一区二区| www.99精品日操伊人乱碰在线| 伊人久久婷婷| 开心婷婷五月中文字幕组| 激情五月天噢美| 色噜噜五月天| 爱爱网址9| 99精品视频网| 五月丁香操婷逼| 亚州激情在线视频| 99热爱爱干干日| 熟美女麻豆| 超碰色热| 狠狠色婷婷777| 欧美六月| 99热这里只有精品9| 国产五月婷| 五月天婷亚洲综合在线嫩草网| 啪啪婷婷五月天激情| 五月婷婷影视| 日日干日日| 色婷婷www| 天天舔天天摸| 综合色五月| 五月丁香狠狠| 九色视频这里只有精品| 五月天社区| 在线观看的av| 天天操天天曰天天射| 蜜臀av 粉嫩av 懂色av| 国产黄色在线| 午夜不卡久久精品无码免费| 色五月激情| www.99热| 亚洲五月天天| 九九热精品| 久久五月婷| 色五月综合网| 成人av免费观看| 91视频久久久| 操人精品| 久久玖玖综合| 69人人操人人爽| 五月丁香色色色| 九九色中文| 涩涩激情五月婷婷| 久久五月天激情| 99热在线极品极品| 欧美日韩色色| 九九热9| 亚洲狠狠终合停停终合| 激情五月婷婷视频| 国产精品第一国产精品| 色欧美色色色| 99热在线中出| 91丨人妻丨国产丨丝袜| www色哟哟| 久久中国毛毛片爱久久| 五月丁香婷婷激情四射迷人| 海外网站专业操老外| www.玖玖婷婷在线| 五月丁香色婷基地综合久久| 9久热在线视频精品| 99精品自拍| 91天天操天天干天天射| 丁香五月天欧美成人| 综合激情五月综合激情五月激情1| 丁香五月天信号| 99热精品网| WWW.99热| 天天拍天天操| 26uuu丁香婷婷五月| 99热啪啪| 蜜臀AV在线观看| 婷婷五月天丁香综合网| 六月婷婷日| 亚洲有码在线视频| 中美月韩免费A片| 99热亚洲综合| 人人操人人干AV| 丁香五月婷婷啪啪啪| 色五月婷婷天天干| 乱轮A片| 色婷婷超碰| 六月丁香网| 国产精品久久久久久久久久| 丝雨一区二区| 五月婷婷丁香大陆免费| 婷婷五月亚洲激情| 六月婷婷影院| 日韩 中文 欧美| 天天干天天爽| 色婷婷无吗| AA久久| 婷婷五月AA五月在线| 亚洲精品V天堂中文字幕| 午夜色丁香| 97视频久久| 99在线精品免费视频| 九月婷婷人人操人人舔人人爱| 亚洲婷婷五月| 97人人看| 色五月婷婷久久| 色五月婷婷天天干| 大香蕉婷婷五月| 天天综合天天做天天综合| 日本五月天婷婷丁香| 色丁香五月婷婷| 蜜桃婷婷丁香综合久久开心亚洲| 婷婷色五月大香蕉在线观看| 99这里只有免费的小视频在线观看| 五月婷婷基地| 97人人干| 18久久| 干婷婷五月天| 亚洲另类婷婷综合| 久久精品熟女亚洲AV麻豆| 婷婷五月激情的图片| 五月天激情国产综合AV| 在线成人网址| 99视频综合网| 丁香婷婷六月婷婷六月婷婷六月婷婷| 色色综合视频| 午夜一区| 国产性爱一级| 五月婷婷综合色啪首页| 亚洲成人免费在线| 亚洲国产网站| 五月天成人在线| 久久xxxx| 久久九⑨| 丁香五月 六月婷婷首页| 夜夜干夜夜操| 婷婷六月天| 亚洲人妻一区二区 | 伊人www22综合色| 国产真实乱了老女人视频| 久久99婷婷| 国产精品色婷婷AV综合色色| 福利视频在线播放| 五月天色色婷婷| 激情综合色婷婷六月天| 成人αV视频免费观看| 丁香六月AV| 婷婷五月丁香91| 在线伦子99热| 欧美丁香婷婷五月天| 色色五月婷婷网| 激情五月婷黄版| 色啪影院| 另类激情五月| 激情五月天婷婷| 久久艹 五月天| 丁香五月大片| 北京熟妇搡BBBB搡BBBB| 久久草人妻| 99啪| 91丨九色丨熟女丰满| 人妻久久久久久久 | 天天干天干| 伊人网啪啪| 精品人妻伦一二三区久| 丁香伊人五月色婷婷五十路| 久久综合天天综合| 中文字幕无码人妻少妇免费视频| 久热这里只精品| 99亚州综合精品成人网| 色色五月丁香婷婷| 婷婷五月情天| 激情婷婷22月间| 色欲一区二区三区精品A片| 国产操逼网站| 色综合天天综合成人网| 色激情网| 五月丁香六月欧美综合网站| www.五月婷| 五月天久久综合婷婷| 丁香五月婷婷亚洲天堂| 99精品网|