免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Spring事務(wù)失效的7個坑與底層原理:從JDBC到分布式事務(wù)

Spring事務(wù)失效的7個坑與底層原理:從JDBC到分布式事務(wù) 1. 事務(wù)失效的七宗罪我踩過的坑你大概率也會踩先講個真實事故。幾年前我維護過一個電商訂單系統(tǒng)線上出了一個詭異的bug用戶支付成功后訂單狀態(tài)正常更新但庫存卻莫名其妙多扣了一次。代碼看起來完全沒問題——service方法上明明白白標著Transactional數(shù)據(jù)庫也確認是InnoDB。查了兩天才定位到根因同一個類里方法A調(diào)用方法BB的事務(wù)注解根本沒生效。這就是Spring事務(wù)最經(jīng)典的坑之一自調(diào)用繞過代理。Transactional依賴AOP代理生效而Spring的代理機制決定了一個類內(nèi)部的方法調(diào)用是不會經(jīng)過代理對象的。this.orderService.update()拿到的這個this根本不是Spring容器里那個被代理過的bean而是原始對象。原始對象上的注解Spring根本看不見。結(jié)果就是你以為開啟了事務(wù)實際上沒有。庫存扣減在無事務(wù)狀態(tài)下執(zhí)行訂單那邊一旦報錯回滾庫存早就提交了。1.1 自調(diào)用問題最隱蔽的事務(wù)殺手自調(diào)用這個坑的隱蔽之處在于它不會報錯不會警告日志里什么都看不出來只有數(shù)據(jù)對不上賬的時候才會暴露。Service public class OrderService { Transactional public void createOrder(OrderDTO dto) { // 扣庫存 stockService.deduct(dto.getSkuId(), dto.getQuantity()); // 插入訂單 orderMapper.insert(buildOrder(dto)); // 這里調(diào)用了自身方法事務(wù)注解失效 this.sendNotification(dto); } Transactional(propagation Propagation.REQUIRES_NEW) public void sendNotification(OrderDTO dto) { // 通知邏輯 } }上面這段代碼里sendNotification的REQUIRES_NEW完全無效。因為this.sendNotification()走的是原始對象不是代理。解決辦法有三個把需要事務(wù)的方法挪到另一個Service類——最推薦職責也最清晰。注入自身代理Autowired private OrderService self;然后調(diào)用self.sendNotification()。使用AopContext.currentProxy()需要開啟EnableAspectJAutoProxy(exposeProxy true)然后((OrderService) AopContext.currentProxy()).sendNotification()。方案2最實用但要注意循環(huán)依賴問題——Spring 4.3之后字段注入的循環(huán)依賴是允許的但構(gòu)造器注入就不行。方案3代碼看著別扭但確實有效。1.2 非public方法注解白寫了Transactional用在private或者protected方法上Spring容器啟動時根本不報錯但方法執(zhí)行時事務(wù)就是沒開。原理不復(fù)雜Spring AOP生成代理的時候JDK動態(tài)代理基于接口只代理public方法CGLIB雖然能代理非public方法但Spring官方明確說了Transactional只支持public方法。最騷的是如果你把Transactional放在public方法上、但里面調(diào)用了private方法private方法里的事務(wù)注解同樣無效——因為事務(wù)邊界已經(jīng)在public方法的代理上確定了內(nèi)層調(diào)用不會再開啟新事務(wù)除非傳播行為是REQUIRES_NEW。我見過不少項目把Transactional加到private方法上然后一臉疑惑地說為什么回滾了沒生效。排查方法很簡單看日志里有沒有TransactionInterceptor的getTransaction記錄沒有就是代理沒走。1.3 異常被吞回滾了個寂寞這是最常見也最無語的一種。Java的檢查型異常checked exception默認不會觸發(fā)Spring事務(wù)回滾但很多人不知道這一點隨手寫了個throws Exception然后事務(wù)就失效了。Transactional public void transfer(Account from, Account to, BigDecimal amount) throws Exception { accountMapper.decrease(from.getId(), amount); accountMapper.increase(to.getId(), amount); // 業(yè)務(wù)校驗不通過拋了個業(yè)務(wù)異常 throw new BizException(余額不足); }BizException如果是繼承Exception而不是RuntimeException上面這個事務(wù)不會回滾錢就憑空消失了。Spring的默認回滾策略是只回滾RuntimeException和Error。檢查型異常如IOException不會觸發(fā)回滾因為Spring認為你既然顯式聲明了這個異常說明你可以處理它事務(wù)繼續(xù)提交是合理的。解決方案兩個方向業(yè)務(wù)異常統(tǒng)一繼承RuntimeException——大多數(shù)項目的做法最簡單。在Transactional上顯式指定Transactional(rollbackFor Exception.class)——最穩(wěn)一勞永逸。我個人的習(xí)慣是兩者都做自定義業(yè)務(wù)異常繼承RuntimeException同時在Transactional上寫rollbackFor Exception.class。雖然看起來冗余但團隊里總有人會寫檢查型異常。1.4 多線程子線程異常主線程事務(wù)照樣提交Transactional的事務(wù)上下文存在ThreadLocal里子線程拿不到父線程的事務(wù)上下文。Transactional public void batchProcess(ListOrder orders) { orders.parallelStream().forEach(order - { // 這里拋異常父線程事務(wù)不會感知 processOne(order); }); }如果一定要在多線程里用事務(wù)只能每個線程自己開事務(wù)用TransactionTemplate包住子線程的任務(wù)代碼然后在線程池層面做異常聚合——子線程里有任何失敗主線程如何決定是否整體回滾需要自己實現(xiàn)協(xié)調(diào)邏輯。這個問題在批量導(dǎo)入、報表生成、定時任務(wù)場景里非常常見。我的建議是批量任務(wù)盡量不用Transactional包整段而是每條或每批用TransactionTemplate單獨開事務(wù)配合失敗記錄表做補償。這樣既能保證數(shù)據(jù)一致又不會因為一個線程失敗導(dǎo)致大批量回滾。1.5 數(shù)據(jù)庫引擎不支持事務(wù)這個坑現(xiàn)在少了但老項目中還能見到。MySQL的MyISAM引擎根本不支持事務(wù)你注解標得再多也沒用。確認方法很簡單SHOW TABLE STATUS WHERE Name your_table;看Engine字段InnoDB支持事務(wù)MyISAM不支持。另外如果表是MyISAMSpring事務(wù)管理器初始化時也不報錯執(zhí)行時DataSourceTransactionManager還是會調(diào)setAutoCommit(false)但引擎層面不認等于白忙。1.6 final類或final方法CGLIB也救不了Spring事務(wù)默認用AOP代理。如果目標類配置了JDK動態(tài)代理基于接口那沒問題如果走CGLIB基于類繼承生成子類那么final類無法被繼承final方法無法被重寫代理自然失效。Spring Boot 2.x之后默認proxyTargetClasstrue走CGLIBfinal問題就浮出水面了。很多人把service類寫成final為了防繼承結(jié)果事務(wù)全失效。排查方法啟動時看日志里是JdkDynamicAopProxy還是CglibAopProxy再看你的類和方法有沒有final修飾符。1.7 事務(wù)管理器沒配置或配置錯了Spring Boot的DataSourceAutoConfiguration會自動配置DataSourceTransactionManager但你如果引入了多數(shù)據(jù)源或者自定義了DataSource而沒有配套注冊PlatformTransactionManager那Transactional就會失效。另外EnableTransactionManagement注解在Spring Boot里默認開啟不需要你重復(fù)添加。但如果你用了Spring MVC非Boot項目忘了加EnableTransactionManagement事務(wù)也會靜默失效。排查清單很簡單Transactional方法執(zhí)行的線程棧里有沒有TransactionInterceptor有就是代理生效了沒有就是代理沒生效。2. Spring事務(wù)的底層運作機制從JDBC到動態(tài)代理很多人用Transactional用了好幾年但完全不知道它背后發(fā)生了什么。面試被問Spring事務(wù)是怎么實現(xiàn)的只會答AOP兩個字就再也說不出更多了。其實底層鏈路沒那么玄拆開看就三層JDBC的事務(wù)能力、Spring的事務(wù)抽象、AOP的代理包裝。2.1 第一層JDBC的事務(wù)基石萬事萬物都離不開JDBC。Spring事務(wù)再花哨落到底層就是這三行代碼Connection conn dataSource.getConnection(); conn.setAutoCommit(false); // 關(guān)閉自動提交 conn.commit(); // 提交 conn.rollback(); // 回滾setAutoCommit(false)的意思是之后的SQL不會立即生效必須等commit()才真正寫入數(shù)據(jù)庫MySQL的binlog和redolog層面是另一套機制。如果中途異常調(diào)用rollback()之前的所有操作全部撤銷。所以Spring事務(wù)的本質(zhì)就是幫你管理Connection在合適的時機調(diào)用commit或rollback。就這么簡單。2.2 第二層PlatformTransactionManager抽象Spring抽象了一個接口——PlatformTransactionManager核心方法就三個public interface PlatformTransactionManager { TransactionStatus getTransaction(TransactionDefinition definition); void commit(TransactionStatus status); void rollback(TransactionStatus status); }getTransaction獲取或創(chuàng)建事務(wù)。注意這里的措辭——如果你已經(jīng)在事務(wù)里根據(jù)傳播行為決定是復(fù)用當前事務(wù)還是掛起后新建。commit提交事務(wù)。但提交前會檢查TransactionStatus里的rollbackOnly標記如果之前有人標記了只回滾這里會拋UnexpectedRollbackException。rollback回滾事務(wù)。常用的實現(xiàn)是DataSourceTransactionManager針對Hibernate有HibernateTransactionManager針對JPA有JpaTransactionManager。DataSourceTransactionManager的doBegin方法做了幾件事從DataSource拿一個Connection。如果當前Connection是自動提交模式關(guān)閉它并記下來方便事務(wù)結(jié)束恢復(fù)。設(shè)置隔離級別如果TransactionDefinition指定了。設(shè)置只讀標志readOnlytrue會走Connection.setReadOnly對MySQL的InnoDB來說這能優(yōu)化一些查詢路徑。把這個Connection綁定到TransactionSynchronizationManager的ThreadLocal里。后面的DAO操作拿到的Connection就是從TransactionSynchronizationManager里取的。這就是同一個事務(wù)里所有SQL共用同一個數(shù)據(jù)庫連接的原理——ThreadLocal綁定。2.3 第三層AOP代理的切入點Spring事務(wù)的AOP基于TransactionInterceptor它實現(xiàn)了MethodInterceptor攔截所有被Transactional標記的方法。調(diào)用鏈是這樣的外部調(diào)用orderService.createOrder()實際調(diào)用的是代理對象的方法。TransactionInterceptor.invoke()被觸發(fā)先調(diào)用TransactionAspectSupport的createTransactionIfNecessary。根據(jù)Transactional上的配置傳播行為、隔離級別、超時等調(diào)用PlatformTransactionManager.getTransaction()。執(zhí)行業(yè)務(wù)方法。方法正常返回提交事務(wù)方法拋異常根據(jù)rollbackFor配置決定是否回滾。清理ThreadLocal中的連接恢復(fù)自動提交狀態(tài)。所以Transactional加在哪個方法上代理就攔哪個方法——事務(wù)邊界就是方法邊界。方法跑多久事務(wù)就開多久。2.4 只讀事務(wù)與UnexpectedRollbackException的真相熱詞里有一條UnexpectedRollbackException: transaction rolled back because it has been marked as rollback-only這是個非常經(jīng)典的問題。場景是這樣的方法A開啟事務(wù)調(diào)用方法BB標記了rollback-onlytrue比如B捕獲了異常但內(nèi)部回滾邏輯已運行。然后A繼續(xù)執(zhí)行正常返回時調(diào)用commit()此時Spring發(fā)現(xiàn)事務(wù)被標記為rollback-only直接拋UnexpectedRollbackException事務(wù)回滾。換句話說你代碼里沒拋異常但事務(wù)已經(jīng)注定要回滾了。這經(jīng)常出現(xiàn)在try-catch吃了異常但沒重新拋出的情況下。排查時看日志里有沒有Transaction rolled back because it has been marked as rollback-only的WARN告警跟著調(diào)用棧就能找到是哪個方法把事務(wù)標記了。3. 事務(wù)傳播行為與隔離級別什么時候用哪個別背口訣網(wǎng)上關(guān)于傳播行為的口訣一大堆什么REQUIRED默認用REQUIRES_NEW記日志NESTED做嵌套背下來容易用對難。我把這幾個傳播行為逐個講透配上真實場景你就能理解了。3.1 傳播行為詳解Spring定義了7種傳播行為大部分項目用到的不超過4種但理解每一種的原理仍然重要。傳播行為含義典型場景REQUIRED有事務(wù)就復(fù)用沒有就新建默認值99%的場景用它SUPPORTS有事務(wù)就加入沒有就無事務(wù)執(zhí)行查詢方法可選MANDATORY必須在事務(wù)中執(zhí)行否則拋異常強制事務(wù)的方法REQUIRES_NEW掛起當前事務(wù)永遠新建一個寫日志、異步通知NOT_SUPPORTED掛起當前事務(wù)以無事務(wù)方式執(zhí)行導(dǎo)出大數(shù)據(jù)量文件NEVER如果有事務(wù)就拋異常強制無事務(wù)的執(zhí)行NESTED嵌套事務(wù)基于保存點Savepoint大批量循環(huán)處理單條失敗不影響整體REQUIRED是默認值理解起來很簡單Spring檢查當前ThreadLocal里有沒有綁定事務(wù)有就加入沒有就新建一個。注意加入意味著共用一個事務(wù)、一個Connection、一套commit/rollback。內(nèi)層方法拋異?;貪L外層也一起回滾。REQUIRES_NEW的核心是掛起。邏輯是從TransactionSynchronizationManager里把當前事務(wù)的Connection解綁、掛起然后新建一個完全獨立的事務(wù)持有獨立的Connection。內(nèi)層事務(wù)提交/回滾不影響外層事務(wù)。外層事務(wù)回滾內(nèi)層已經(jīng)提交的數(shù)據(jù)不會跟著回滾。典型場景就是操作日志業(yè)務(wù)方法開啟事務(wù)日志記錄要獨立提交——不管業(yè)務(wù)成功還是失敗日志都要寫進去。如果你用REQUIRED業(yè)務(wù)回滾時日志也跟著回滾那排查問題的時候就看不到錯誤日志了。NESTED跟REQUIRES_NEW的區(qū)別要講清楚。REQUIRES_NEW是物理事務(wù)獨立的Connection、獨立的commit/rollbackNESTED是邏輯事務(wù)基于Savepoint保存點。內(nèi)層方法失敗回滾到保存點外層可以繼續(xù)執(zhí)行外層最終提交時一起提交所有保存點之前的操作。但注意NESTED需要底層數(shù)據(jù)庫支持保存點。MySQL的InnoDB支持但有些數(shù)據(jù)庫不支持且JpaTransactionManager對NESTED的支持有限。實際項目中能用REQUIRES_NEW解決的就別用NESTED少踩坑。3.2 隔離級別臟讀、不可重復(fù)讀、幻讀Spring事務(wù)隔離級別有五種對應(yīng)JDBC的隔離級別隔離級別臟讀不可重復(fù)讀幻讀說明DEFAULT---使用數(shù)據(jù)庫默認MySQL默認REPEATABLE_READREAD_UNCOMMITTED會會會讀未提交不推薦READ_COMMITTED不會會會Oracle默認REPEATABLE_READ不會不會會MySQL InnoDB下不會MySQL默認SERIALIZABLE不會不會不會串行化性能最差臟讀讀到別的事務(wù)未提交的數(shù)據(jù)。不可重復(fù)讀同一事務(wù)內(nèi)兩次讀取同一數(shù)據(jù)結(jié)果不一樣因為別的事務(wù)提交了更新。幻讀同一事務(wù)內(nèi)兩次查詢返回的記錄數(shù)不一樣因為別的事務(wù)插入了新記錄。MySQL的InnoDB在REPEATABLE_READ級別下通過MVCC多版本并發(fā)控制 Gap Lock間隙鎖實際上消除了幻讀問題。所以MySQL默認的REPEATABLE_READ比Oracle的READ_COMMITTED在某些場景下更嚴格。實際項目中我見過很多團隊把隔離級別統(tǒng)一設(shè)成READ_COMMITTED理由是MySQL的RR有間隙鎖并發(fā)插入容易死鎖。這個說法有一定道理但不是絕對的。如果你的系統(tǒng)沒有復(fù)雜的范圍查詢并發(fā)插入場景RR不會成為瓶頸如果你確實遇到死鎖頻繁再降級也不遲。3.3 事務(wù)超時與回滾策略Transactional(timeout 5)表示事務(wù)最多執(zhí)行5秒超時則強制回滾。底層實現(xiàn)是JDBC的Connection.setNetworkTimeout或者由Spring在每次SQL執(zhí)行前檢查時間不同實現(xiàn)有差異。但要注意timeout是從事務(wù)開始到最后一次SQL執(zhí)行的時間不是方法總耗時。如果你的方法在事務(wù)前做了一堆耗時操作比如遠程調(diào)用這部分不計入事務(wù)超時。所以不要指望timeout能保護整體方法執(zhí)行時間。關(guān)于回滾策略我再強調(diào)一次// 推薦寫法 Transactional(rollbackFor Exception.class) // 或者只回滾特定異常 Transactional(rollbackFor BizException.class, noRollbackFor IllegalStateException.class)noRollbackFor用的場景不多但有一種情況很實用某些非關(guān)鍵數(shù)據(jù)比如統(tǒng)計緩存的更新失敗不應(yīng)該讓主事務(wù)回滾可以列在noRollbackFor里。4. 編程式事務(wù)當Transactional真的不合適時Transactional是聲明式事務(wù)用起來方便但有三個致命弱點事務(wù)粒度太大整個方法一個事務(wù)如果方法里有網(wǎng)絡(luò)調(diào)用或批量循環(huán)事務(wù)會長時間占用數(shù)據(jù)庫連接。自調(diào)用失效前面已經(jīng)講過了。無法精確控制提交時機想先做幾步提交再繼續(xù)做Transactional實現(xiàn)不了。這時候就該上手編程式事務(wù)了。Spring提供了TransactionTemplate。4.1 TransactionTemplate的用法Service public class OrderService { private final TransactionTemplate transactionTemplate; public OrderService(PlatformTransactionManager transactionManager) { this.transactionTemplate new TransactionTemplate(transactionManager); // 可以設(shè)置默認配置 this.transactionTemplate.setPropagationBehavior(TransactionDefinition.PROPAGATION_REQUIRED); this.transactionTemplate.setIsolationLevel(TransactionDefinition.ISOLATION_READ_COMMITTED); } public void createOrder(OrderDTO dto) { transactionTemplate.executeWithoutResult(status - { stockMapper.deduct(dto.getSkuId(), dto.getQuantity()); orderMapper.insert(buildOrder(dto)); }); } }TransactionTemplate.execute回調(diào)里你可以在任何地方開啟事務(wù)塊粒度完全由自己控制。更重要的是它徹底繞開了自調(diào)用問題——因為你是直接調(diào)用事務(wù)管理器不走代理。還有一個場景強烈推薦用TransactionTemplate大批量循環(huán)插入。如果用Transactional包住整個for循環(huán)幾萬條數(shù)據(jù)一個事務(wù)提交時數(shù)據(jù)庫壓力巨大一旦失敗全部回滾代價太高。改成循環(huán)內(nèi)用TransactionTemplate每100條一個事務(wù)失敗了只回滾這一批配合日志記錄失敗批次整體效率和可靠性都高很多。4.2 手動控制TransactionStatus如果execute回調(diào)不適合你比如需要事務(wù)中間做分支判斷、需要中途提交可以用更底層的PlatformTransactionManagerAutowired private PlatformTransactionManager transactionManager; public void complexBiz() { DefaultTransactionDefinition def new DefaultTransactionDefinition(); def.setPropagationBehavior(TransactionDefinition.PROPAGATION_REQUIRED); TransactionStatus status transactionManager.getTransaction(def); try { // 業(yè)務(wù)邏輯1 dao.update(...); // 到這里先提交一次 transactionManager.commit(status); // 開啟新事務(wù) TransactionStatus status2 transactionManager.getTransaction(def); try { // 業(yè)務(wù)邏輯2 dao.insert(...); transactionManager.commit(status2); } catch (Exception e) { transactionManager.rollback(status2); throw e; } } catch (Exception e) { transactionManager.rollback(status); throw e; } }這段代碼展示了如何手動控制多段事務(wù)但我強烈不建議在業(yè)務(wù)代碼里寫這種底層代碼——容易出錯而且代碼很難讀。99%的場景TransactionTemplate夠用了。4.3 編程式事務(wù)的注意點TransactionTemplate是線程安全的可以做成Bean注入不要每次new一個。executeWithoutResult和execute的區(qū)別后者可以返回業(yè)務(wù)結(jié)果前者只能執(zhí)行不能返回。需要返回值就用execute。事務(wù)回調(diào)里拋出的異常RuntimeException會觸發(fā)回滾檢查型異常默認不會。要回滾檢查型異常需要手動status.setRollbackOnly()或者包裝成RuntimeException。5. 多數(shù)據(jù)源與分布式事務(wù)跳出單庫思維的邊界單庫單事務(wù)的好日子總有到頭的時候。微服務(wù)一拆、分庫一搞Transactional就管不住跨庫的數(shù)據(jù)一致性了。我先講清楚Spring事務(wù)在多數(shù)據(jù)源下的表現(xiàn)再展開分布式事務(wù)。5.1 多數(shù)據(jù)源下的事務(wù)各管各的如果你配置了兩個DataSource比如一個主庫一個從庫Spring里注冊了對應(yīng)的兩個PlatformTransactionManager同一個Transactional方法里操作了兩個庫——那這兩個庫的事務(wù)是互相獨立的。主庫提交成功、從庫提交失敗你沒有任何辦法通過單機事務(wù)解決。Spring Boot里處理多數(shù)據(jù)源的常規(guī)姿勢是Transactional(transactionManager xxxTransactionManager)指定用哪個事務(wù)管理器。方法里操作另一個庫那份數(shù)據(jù)不在事務(wù)保護范圍內(nèi)。所以多數(shù)據(jù)源場景下的策略是一個事務(wù)只操作一種數(shù)據(jù)源。跨數(shù)據(jù)源的業(yè)務(wù)要么拆分方法要么引入分布式事務(wù)方案不要指望Transactional救你。5.2 分布式事務(wù)的主流方案對比分布式事務(wù)是個大話題我只挑主流方案講給個選型思路。XA協(xié)議兩階段提交2PCXA是最正統(tǒng)的分布式事務(wù)協(xié)議分兩步準備階段所有參與者執(zhí)行SQL但不提交各自保留Undo/Redo log和提交階段協(xié)調(diào)者發(fā)提交指令各參與者提交。問題在于準備階段會一直持有數(shù)據(jù)庫鎖高并發(fā)場景下鎖沖突嚴重性能非常差。Java里典型的實現(xiàn)是Atomikos、Bitronix。說實話互聯(lián)網(wǎng)高并發(fā)場景用XA的很少了更多出現(xiàn)在金融等強一致性要求的內(nèi)部系統(tǒng)。TCCTry-Confirm-CancelTCC把每個操作拆成三個階段Try預(yù)留資源、Confirm確認執(zhí)行、Cancel取消釋放。優(yōu)點是業(yè)務(wù)層面控制粒度性能比XA好很多缺點是侵入性極強每個業(yè)務(wù)都要寫三套邏輯。典型場景賬戶轉(zhuǎn)賬。Try階段凍結(jié)轉(zhuǎn)出金額Confirm階段扣款Cancel階段解凍。這個方案需要深入理解業(yè)務(wù)才能寫得對如果你只是想快速實現(xiàn)一個分布式事務(wù)TCC的學(xué)習(xí)成本挺高的。消息事務(wù) 最終一致性這是目前最常用、成本最低的方案。思路很簡單利用本地事務(wù)把業(yè)務(wù)操作和發(fā)消息綁定在同一次數(shù)據(jù)庫事務(wù)里通過消息中間件RocketMQ/RabbitMQ最終把數(shù)據(jù)變更同步給其他服務(wù)。舉個訂單和積分的例子開啟本地事務(wù)插入訂單表同時插入積分消息表。本地事務(wù)提交后后臺任務(wù)或MQ的事務(wù)消息機制把積分消息表里未發(fā)送的記錄發(fā)到MQ。積分服務(wù)從MQ消費消息給用戶加積分。如果積分服務(wù)失敗消息進入重試隊列直到成功。這種方案做不到強一致中間會有一段數(shù)據(jù)不一致的時間窗口但絕大多數(shù)業(yè)務(wù)都能接受。核心機制是本地消息表實現(xiàn)成本低、不用引入重量級中間件是目前國內(nèi)互聯(lián)網(wǎng)公司的首選方案。Seata的AT模式Seata是阿里開源的分布式事務(wù)框架AT模式的思路是代理你的SQL記錄Before Image和After Image數(shù)據(jù)快照在全局提交時自動執(zhí)行補償SQL。對業(yè)務(wù)代碼侵入性很小但性能有一定損耗每行數(shù)據(jù)要記錄前后快照。如果你的系統(tǒng)需要跨服務(wù)事務(wù)、又不想太動代碼Seata AT是可以考慮的。5.3 選擇建議場景推薦方案單體應(yīng)用單數(shù)據(jù)庫什么都不用本地事務(wù)夠用微服務(wù)對一致性要求不高本地消息表 MQ最終一致微服務(wù)強一致要求高Seata AT 或 TCC金融級強一致低并發(fā)XA/2PC非核心數(shù)據(jù)可以容忍短暫不一致MQ異步 對賬補償分布式事務(wù)沒有銀彈。選型的核心不是哪個方案高級而是你的業(yè)務(wù)能容忍多大程度的不一致。6. 事務(wù)排查工具箱從日志到監(jiān)控的一整套姿勢事務(wù)的問題一旦出現(xiàn)往往都是線上的、隱性的、難復(fù)現(xiàn)的。所以一定要有一套預(yù)防和排查的手段而不是等出了問題再手忙腳亂。6.1 日志配置把事務(wù)邊界打印出來Spring的事務(wù)日志默認是DEBUG級別不打開根本看不到。在application.yml里配置logging: level: org.springframework.transaction: DEBUG org.springframework.jdbc.datasource.DataSourceTransactionManager: DEBUG org.springframework.jdbc.datasource.JdbcTransactionManager: DEBUG打開后你會看到類似這樣的日志Obtained JDBC transaction from DataSource [HikariDataSource (HikariPool-1)] Participating in existing transaction Initiating transaction commit Initiating transaction rollback這些日志的排列能幫你快速判斷事務(wù)有沒有開啟、是新建還是復(fù)用、提交還是回滾、有沒有因為rollback-only被強制回滾。6.2 ThreadLocal狀態(tài)的運行時監(jiān)控如果你懷疑某個方法執(zhí)行時事務(wù)狀態(tài)不對可以在代碼里手動檢測import org.springframework.transaction.support.TransactionSynchronizationManager; boolean isInTransaction TransactionSynchronizationManager.isActualTransactionActive(); System.out.println(當前是否在事務(wù)中: isInTransaction);isActualTransactionActive()返回true說明當前線程確實有數(shù)據(jù)庫事務(wù)處于活動狀態(tài)。如果外面標了Transactional但這里返回false說明代理沒生效——自調(diào)用、final方法、私有方法逐個排查。還可以查看當前事務(wù)名Object name TransactionSynchronizationManager.getCurrentTransactionName();這能幫你快速定位當前事務(wù)是哪個方法開啟的。6.3 監(jiān)控事務(wù)耗時與連接占用事務(wù)另一個容易忽略的問題是連接泄漏和長事務(wù)。一個事務(wù)如果執(zhí)行了幾十秒連接就占用了幾十秒連接池很快被打滿。建議做法在DataSource層加慢SQL日志HikariCP有connectionTimeout、validationTimeout配置同時開啟leakDetectionThreshold檢測連接泄漏。用TransactionSynchronizationManager.registerSynchronization注冊事務(wù)同步回調(diào)統(tǒng)計每個事務(wù)的耗時。Transactional public void bizMethod() { long start System.currentTimeMillis(); TransactionSynchronizationManager.registerSynchronization(new TransactionSynchronization() { Override public void afterCompletion(int status) { long cost System.currentTimeMillis() - start; if (cost 1000) { log.warn(事務(wù)耗時過長: {}ms, status{}, cost, status); } } }); }這個方法能精確定位哪個事務(wù)方法最耗時但它需要每一個業(yè)務(wù)方法都加一遍侵入性強。更好的方案是寫一個AOP切面統(tǒng)一攔截Transactional方法做耗時統(tǒng)計。6.4 事務(wù)失效排查的標準操作流程如果線上出現(xiàn)了疑似事務(wù)失效的問題我的排查順序是這樣的看日志打開事務(wù)DEBUG日志確認方法執(zhí)行時有沒有Obtained JDBC Transaction記錄。沒有就是代理沒生效走第2步有就繼續(xù)看提交/回滾記錄走第5步??捶椒ê灻遣皇莗ublic類或方法有沒有final看調(diào)用方是不是同一個類內(nèi)部調(diào)用是不是沒有被Spring管理的對象比如new出來的看注解Transactional有沒有寫對rollbackFor有沒有配多數(shù)據(jù)源下transactionManager指對了沒有看異常異常有沒有被try-catch吞掉異常類型是不是RuntimeException看數(shù)據(jù)庫表引擎支不支持事務(wù)連接是不是走到了正確的DataSource這套流程走一遍90%的事務(wù)問題都能定位。7. 最后的實戰(zhàn)建議事務(wù)規(guī)范從我做起寫到這里我把這些年跟事務(wù)打交道沉淀下來的幾條規(guī)矩放在最后算是個人的實戰(zhàn)總結(jié)也是新項目啟動時的檢查清單。事務(wù)方法要短小精悍。事務(wù)范圍之內(nèi)不要做遠程調(diào)用、不要做復(fù)雜的文件IO、不要進行大批量循環(huán)。否則連接池遲早被打死。把非數(shù)據(jù)庫操作移到事務(wù)外或者拆成多個事務(wù)塊。事務(wù)邊界要盡可能晚開啟盡可能早提交。前置校驗、參數(shù)組裝這些放事務(wù)外真正需要數(shù)據(jù)庫原子性的操作才放進事務(wù)塊。很多人習(xí)慣方法一進來就開事務(wù)其實很多操作根本不需要事務(wù)保護?;貪L配置要顯式寫。Transactional(rollbackFor Exception.class)這行字雖然啰嗦但它能擋住95%的回滾失效問題。自定義的業(yè)務(wù)異常統(tǒng)一繼承RuntimeException省得每個方法都要考慮這個異常會不會回滾。批量處理用TransactionTemplate而不是Transactional。循環(huán)里的事務(wù)一定要用編程式事務(wù)精確控制粒度Transactional包整個循環(huán)就是把數(shù)據(jù)庫往死里逼。分布式事務(wù)不要貪多求全。能靠業(yè)務(wù)流程設(shè)計規(guī)避的就盡量規(guī)避比如通過本地消息表做最終一致性比引入一套重量級分布式事務(wù)框架劃算得多。選型之前先想清楚你的數(shù)據(jù)不一致容忍度。事務(wù)這個東西說到底是數(shù)據(jù)庫連接和錯誤處理時機的管理藝術(shù)。理解底層機制比背多少面試題都管用。希望這篇文章里踩過的坑、總結(jié)的思路能讓你少走幾條彎路。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
久9久9久9久9久9久9| 啊v视频在线观看| 人人人舔人人人操人人人摸人人人97| www.91操| 91在线观看www| 久久视频婷婷视频| 亚洲色色香蕉| 婷婷综合成人五月天| 丁香天堂夜| 久操婷婷| 激情五月天社区| 一区二区三区四区无码| 2020久久婷婷五月| 成人五月天综合网| 激情视频91| 日本二级毛片二级毛片| EEUSS鲁片一区二区三区| 丁香五月影院| 亚洲婷婷五月天激情| 婷婷中文在线| 色五月婷婷亚洲最大| 丁香五月亭亭六月综合激情网| 9热在线观看| 日日做A爰片久久毛片A片英语| 激情綜合網址| 激情五月色婷婷| WWW.99热| 五月丁香在线婷婷美女| 婷婷丁香亚洲五月天| 成人网址在线观看| 色~性~乱~伦~噜| www.91AV.COM| 色五月婷婷AV| 啪啪操超碰| 91日在线视频| 狠狠色丁香婷婷| 久久小说网| 99re思思热久久| 伊人久久大香线蕉综合网站| 丁香五月婷婷操逼| 任我肏视频精品| 午夜伊人大香蕉| 青青青在线视频国产| 99这里只有精品|v| 色色婷婷五月| 丁香婷婷成年| 人人操人人看97干| 色综合久久综合中文综合网| 久久欧洲久久| 综合五月天天天天天五月| 人妻自慰在线| 天天成人综合视频| 激情综合五| 人人草开心五月天| 99热大香蕉| 91视频一起草| 色噜噜狠狠色综合日日| 蜜臀av 粉嫩av 懂色av| 五月天狠狠色| 丁香色六月| 永久无码色| 色综合99| 深爱激情69热| 另类图片激情五月| 国外亚洲成AV人片在线观看| 91精品91久久久久77777| 激情都市另类| www99在线观看视频| 超碰在线成人| 亚洲精品性色| 婷婷99中文字幕| 五月婷婷天| 色5月婷婷| 99无码视频| 少妇熟女视频一区二区三区| 久久婷婷六月综合综合| 青青操avbb| 欧洲激情五月天| 婷婷成人丁香色情基地30 | 天天射影视综合网| 婷婷五月天成人网| 99精品偷自拍| 丁香综合网| 天天拍夜夜撸| 天天干天天爽| 影音 五月 婷婷 久久| 欧美超碰亚洲| 五月色婷婷在线观看| 国产探花AV在线| 五月丁香青草综合啪啪| 中文无码婷婷| 91人人人人人人人| 日本色婷婷久久99精品91| 综合五月天天天天天五月| 1024成人免费看| 亚洲第一成人无码A片| 精品9久| 丁香六月欧美| 插少妇综合网| 久9视频| 六月丁香成人| 五月综合影院| 无码少妇高潮喷水A片免费| 99超碰人人| 婷婷五月天无码熟女| 99热色精品| 激情五月天婷婷五月天| www.久久久久久久| 色五月婷婷操逼| 99色| 五月丁香久久网| 激情五月婷婷丁香| 久久综合五月情| 天天日天天舔天天摸| 第四色26uuu| 亚洲网站999| 男女啪啪做爰高潮无遮挡| 丁香五月婷婷亚洲激情四射| 色丁香五月综合网| 成人无码髙潮喷水A片| 99热免费精品| 99福利导航| 五月天婷婷色综合| 色综合综合色| 五月丁香六月激情| 五月天婷婷深深爱| 9精品久久999| 爱的综合网| 中文av网站| 日本久草福利| 97性视频| 色婷婷偷拍| 五月天社区狠狠| 色婷婷基地| 99视频久久| 五月婷激情| 欧美日韩精品人妻狠狠躁免费视频| 大香蕉五月天婷婷丁香91| 五月天四色房丁香亭亭| 色婷婷色| 五月婷婷色播| 五夜婷婷| 激情婷婷五月天| 久草 天堂| 人妻aV在线| 成人在线免费网址| 在线观看av网站| 夜夜爽天天日| 牛牛色av| 色色五月丁香婷婷| 九九热只有这里精品| 91大屁股精品| 超碰chaompinm| 天天综合五月天| 狠狠爱婷婷色| 99色精品| 狠狠干在线视频| 亚洲精品白浆高清久久久久久| 开心婷婷五月激情网小说| 色墦五月丁香| 色综合五月在线| 人与禽A片啪啪| 五月婷伊人| 亚洲精品一区无码A片| 久久综合网免费视频| 九九激情网| 亚洲亚洲激情| 99啪视频在线观看| 五月丁香婷婷基地| 开心五月婷婷在线视频免费观看| 五月婷婷9| 成人免费在线电影| 蜜乳.comcom| 变态 另类 在线| 丁香五月乱中文字幕| 色99xx| 五月的色婷婷高潮| 五月天色导航婷婷资源婷婷| 色青青电影色五月| 色婷婷免费观看| 人妻性操逼中文字幕 国产| 色五月激情综合网| 丁香婷婷五月| 77799热| 懂色av粉嫩av蜜臀av| 狠狠色噜噜狠狠狠888了| 校园春色亚洲色| 五月婷婷六月丁香在线视频| 婷婷丁香五月麻豆| 九九婷婷五月天影视| 婷婷六月天| 91精品丝袜久久久久久| 亚洲综合狠狠艹| 综合色色综合| 亚洲成人无码专区| 中文激情网| 丁香狠狠| 9 1超碰九色| 色婷婷综合网| 九九99九九99九九99视频网| 色区域网站视频| 亚洲婷婷丁香| 热久久这里只有三级视频| 五月 激情视频| 五月丁香在线婷婷蜜桃| 婷婷五月天最新综合你懂的 | 一区二区传媒视频| 六月婷婷激情| 亚州色色色| 丁香五月激情无码视频| 开心五月激情| 玖玖婷婷综合| 日韩有码一区| 久操香蕉| 大香蕉久久综合网| 五月天综合网| 99爱精品| 9久精品视频| 婷婷丁香五月欧美人| 六月婷婷久久| 玖玖99精品视频| 97五月天| 九九Av| 中文字幕 中文字幕明步| 丁香五月香蕉在线| 五月激情六月综合| www.婷婷,com| 99久在线精品99re8| 婷婷色色狠狠| 丁香婷婷六月激情文学| 一逼色综合| 久久日本wwww色| 亚洲va综合va国产va中文| 色播播五月天| 丁香五月欧美午夜视频| 色情婷婷五月天| 深爱五月亚洲| 综合性视频99| 久久99热精品a片在线观看| ww亚洲ww在线观看| 五月停停直播| 3p日韩网站视频| 天天天天天天天干| 色欲五月天| 五月网激情| 天天情天天狠天天透| 丁香五月777| 色青五月天| 色开心五月丁香| 超碰人人妻| 黄急一级视频| 啪啪啪丁香五月| 思思久久99热只有频精品66| 五月婷婷色欲| 欧美超碰亚洲| 91ncm视频| 九九 激情 网| 色五月大香蕉| 五月天婷五月天综合网在线观| 99re66热这里只有精品| 五月天影院| 黄色短视频在线观看| www。五月,com| www.91五月| 无码少妇高潮喷水A片免费| 五月婷婷综合激情| 婷婷五月成人| 99爱在线| 97极品在线| 五月99久久| www.sebowuyue| 亚洲视频国产一区| 一起草无码视频| 97丁香花五月天激情小说| 看黄的网站18禁| 色五月天天在线观看资源站| 亚洲国产精品综合色区| 99色精品| 大地资源色婷婷视频在线| www.色五月| 亚洲日韩久久婷婷伊人| 综合一区二区三区| 色婷五月天亚洲| 狠狠干 狠狠操| 国产成人亚洲综合A∨婷婷| 欧洲一区二区| 99热综合| 日本人妻操| 色婷婷欧美| site:minyis.com| ss99热| 亚洲激情网站| 婷婷伊人五月天| 婷婷97狠狠成人网站| 玖玖婷婷色欲| 婷婷丁香五月麻豆| 亚洲色情网站| 99这里都是精品| 婷婷综合中文字幕| 99久久综合| 婷婷久久视频| 人妻综合网| av高清无码| 狠狠情色| 亚洲麻豆乱码国产2028| 综合久久99| 五月激情综合网婷婷| 第四色网婷婷| 视色综合| 婷婷五月天激情小说| 久操大屁股女人av| 婷婷五六日| 久久99热免费最新版| 日韩啪啪网| 久草五月婷| 国产伊人五月天| 天天操综合网| 五月天婷婷无码| 男人的天堂999| 丁香五月激情婷婷婷婷在线观看| 精品久久久久成人码免费动漫| 中文字幕五月久久婷| 日日色五月天| 丁香五月激情啪啪| 六月婷婷网| 婷婷亚洲五月丁香综合在线 | 九九九九这里只有精品| 久久天堂| 久久久免费精彩视频| 国自产拍偷拍精品啪啪一区二区| 91精品久久久久久77777| 逼里香不卡| 中文字幕永久在线| www。五月天激情| 五月成人天| 五月丁香大香蕉| www.久久久久久久| 狠狠色噜噜狠狠狠狠综合| 天天干天天av天天射| 九九热视频精品2| 日本欧美成人片AAAA| 大香蕉AV电影在线| 伊人日日干| 久久久久人妻精品| 五月婷婷在线视频免费观看| 九月丁香婷婷| 亚洲小视频免费观看| 色爱99| 色综合久久88色综合天天| 天天爽—爽| 99精品久久久| a在线观看| 丁香五月婷婷基地| 超碰a女人的天堂| 免费视频这里只有精品| WWW色色色COM| 婷婷综合精品视频97| 久久黄色片| 婷婷久久五月| 亚洲狠狠色丁香婷婷综合久久| 天天综合激情| 色综合久久之分久久| 蜜乳.comcom| 婷婷午夜| 青草激情在线| 五月天久久激情| 天天色宗合| 日韩AV成人电影| 性生活久久朋友人妻| 99热爆在线| 亚洲激情网站| 六月丁香停| 人人爱人人草| 久久久8| 超碰在线成人| 99热这里只有精品10| 伊人久久婷婷| 五月婷婷二月丁香| 涩九九九九| 丁香五月影视| 色五月激情五月丁香五月婷婷啪啪综合| 91超级碰碰碰| 亚洲五月天婷婷在线| 奇米色大香蕉| 婷婷成人综合| 久久五月天黄色五月天色网址| 爱99干99| 久久这里只有精品热在99| 中文AV在线观看| 人妻中文在线| 国产精品久久久久久五月天加勒比| 丰滿爆乳一区二区三区| 婷婷五月天激情电影| 日韩色色网| 日韩艹比| 久草A片| 激情开心五月婷婷| 桃色激情五月天| 亚洲九区| www.色婷婷| 色天天综合天天综合频道。| 九九精品碰| 岛国AV网| 久久精热| 天天爽天天爽天天爽天天爽天天爽| 国产性爱在线| 天天综合在线网| 亚洲久久婷婷丁香五月天| 亚洲另类AV| av九九| 人人看人人草人人摸| 婷婷久久影院| 久久9热好| 六九色综合婷婷五月天| 日日爽日日操| 色色色干| 五月丁香久久婷| 久久久婷婷婷| 色五月成人| 襙逼网| 99热丁香| 五月天婷婷色色首页| 婷婷激情综合| 五月久久婷婷| 亚洲丁香五月天视频| 亚洲 25P| 91狠狠色丁香婷婷综合久久精品| 大香人妻| 久久精品无码一区| 婷婷五月天影院| 丁香婷婷视频在线| 俺去也在线www色官网| 内射综合网| 婷婷五月综合丁香久久| 婷婷成人基地| 玖玖在线视频| 丁香色五月天| 日韩亚洲视频| 在线色色| 国产成人在线精品| 婷色五月天| 日逼免费视频 | 狠狠干综合网| 婷婷成人丁香色情基地30 | 日本精品人妻无码77777| 日本精品99网站| 婷婷狠狠干| 久久aaaa片一区二区| 亚洲五月婷婷在线| 就99这里只有精品| 九九家庭影院| 青青夜夜狠狠夜夜狠狠| 五月天伊人av| 五月婷庭丁香在线| 婷婷五月丁香伊人网| 中文字幕+乱码+中文字幕在线观看| 久久99免费视屏| 久热黄色| 五月婷成人| 97婷婷色| 国产伊人五月天| 日本女va| 26uuu亚洲欧美另类| 日本精品。999| wwxx日本| 激情婷婷另类| 亚洲 六月 综合| 日日操,夜夜爽| 色欲丁香久久| 亚洲欧美另类在线23p| 色爱终和网| 五月丁香狠狠| 婷婷色综合| 九九热大香蕉| 亚洲五月婷婷| 丁香六月天婷婷色| 狠狠色丁香久久婷婷综合五月| 色婷婷色五月综合| 伊人激情综合网| 九九久久精品| 天天在线天天综合网色| 香蕉AV777XXX色综合一区| 九九婷婷五月天| 玖玖五月| 噼里啪啦在线观看免费完整版视频 | 9l视频自拍9l视频自拍九色学生| 久热91| 五月丁香在线| 亚洲av成人一区二区电影在线| 99caobi| 91大神操美女| 南京搡BBBB搡BBBB| 99热成人精品网站| 天天干,夜夜爽| 国产婷婷婷| 日韩有码久久| 五月激情婷婷图片基地| 思思国产99| 无码啪啪| 久久综合五月天激情小说网站| 免费V片在线| 亚洲视频国产一区| 五月天小说激情| 夜夜夜夜夜操| 色啪网| 丁香五月天社区婷婷| 大香蕉五月天婷婷| 深夜A片| 97人人干| ...婷婷五月综合不卡,国产在线手机| 亚洲激情综合色站| www.五月丁香| 97在线99| 五月婷婷与六月丁香图片激情| 激情婷婷五月天在线观看| 综合狠狠干| 综合AV网| 爱之国产色情综合| 婷婷综合亚洲| 丁香五月婷婷www..com| 成人色五月天| 97 A I色色| 激情婷| 婷婷五月天日本国产| 激情网五月天| 九九99偷拍视频| 久久婷婷五月国产激情综合片| 丁香色婷婷五月天| www久久久久久久久久久| 婷婷五月天黄色网址| 5月婷婷激情6月| 婷婷五月丁香综合| 金品在线视频99| 国际国外精品欧洲南美洲专区无码不卡| 操日视频| 天天肏天天肏| 俺也高清无码高清视频| 最近中文字幕2019视频1| 操久久网| 五月婷婷色影院| 国产操逼视频网站| 五月丁香婷中文| 99性爱| 五月久熟女| 亚洲这里只有精品| 99艹精品在线观看| 激情五月www| 中文字幕 中文字幕明步| www.99热| 99视频| 久久资源网五月婷| 99久在线精品| 日本欧美国产| 久久久激情视频| 在线观看亚洲AV| WWW五月| 91碰免费视频| 天天干天天色天天干| 国产精品久久久久久久久久久久| 五月丁香激情片| 99黄色性生活| 久久久久婷婷| 97色色网| 综合色天天| 婷婷色婷婷| 亚洲色色图片| 99国产在线精品视频| 都市激情五月婷婷综合| 欧美精品在线观看| 99热这里只有精品搜| 色婷小说| www五月| 五月狠狠| 久操婷婷| 这里只有精品日韩精品| 超碰婷婷色| 色综合日日| 超碰在线资源| 涩综合网| 五月色亭丁香| 色五月综合网站| 婷婷久久色| 亚洲AV网址| 五月丁香激情综合| 婷婷AV丁香| 婷婷97色| 色五月亚洲| 丁香激情网| 久久女婷| 丁香五月中文字幕久色| 色九九九九| 久久五月婷| 欧美va视频不用播放器的va视频网| 亚洲爆乳无码精品AAA片蜜桃| 天天做天天要天天爽| 琪琪色五月婷婷老师| 久久偷拍综合五月天| 亚洲婷婷基地| 少妇水多A片太爽了| 在线可以看的av网址| 性生活视频98791| 五月丁香六月婷| 天天爽夜夜爽| 日良久久| 97久久综合网| 99操| 天天干狠狠| 激情小说五月天| 亚洲视频综合网| 在线视频99| 国产夫妻操逼内射视频| 精品亚洲国产成AV人片传媒 | 第九色区av天堂| 婷婷五月天激情五月天| 黄色三级日本| 99色在线观看视频者| 婷婷五月色色| 日日操人人操| 这里只有精品日韩| 影音先锋 一区| 婷婷99狠狠躁天天躁| 26uuu亚洲欧美日本| 99热超碰| 99热欧美偷拍| 无毒黄色网址| 性做久久久久久久免费看| 九九综合| 这里只有免费精品| 五月婷婷伊人网| 伊人网碰碰| 激情婷婷五月在线合集| 五月婷婷六月天| 欧美色婷婷| caopeng97日韩| 99人妻碰碰碰久久久久禁片| 99热色综合| 性爱综合网| 99热爱爱干干日| 国产精品香蕉| 天天射天天射一道本日本社区| 九九综合九九| 操逼六区| 五月亭久久无码视频| 婷婷在线网| 五月丁香婷婷色| 丁香色六月婷婷| 五月激情综| 99秘 在线| 久久XX| 97资源欧美日韩大香蕉超碰一区| 婷婷五月天毛片| 色婷婷狠狠禁久久| 97日本在线播放| 久久在线视频免费观看| 久久久五月天| 丁香五月婷婷五月| 色五月天在线观看| 人妻无码精品一区| 婷婷五月色| 午夜激情综合| 国产精品久久久久久白浆色欲| 婷婷五月天视频| 婷婷开心五月| 五月婷婷亚洲| 人人操AV| 秋霞A V毛片| 婷婷狠狠97| 激情五月婷婷视频一区二区三区| 丁香五月天激情视频| 婷婷五月天激情在线| 欧美va欧美va差| 欧美狠狠地| 99re这里只有精品视频了| 伍月婷丁香花全集| 婷婷丁香五月在线播放| 一级黄色尤物综合视频手机在线观看| 午夜五月天| www.99视频| 丁香成人五月天| 婷婷五月激情网| 超碰男人色| www99精品| 欧美激情综合| 99在线精品免费视频| 国产亚洲精品久久久久苍井松| 蜜桃成语时李时珍 免费| www.超碰97| 婷婷丁香五月社区亚洲| 91色在线 | 日韩| 8区视频在线| 另类的婷婷| 夜夜天天天天天干天天爽| www.色五月天.com| 激情深爱五月天| 九九激情网| 8090在线影视少妇| 五月婷av| 97精品欧美91久久久久久久| 五月网激情| 99热这里只是精品| 色色婷婷丁香五月天| 婷婷啪啪| 99视频综合| 久久久久网站| 丁香五月aV| 婷婷九月丁香| 天天草天天爽| 91在线观看www| 激情四射五月天| 黄色99网| 丁香五月天婷婷中文字幕| 五月天六月色| 性爱五月婷| 婷婷色导航| 99热66| 天天射夜夜骑| 五月婷精品| 色五月激情五月| 99碰| 色了色综合| 伊人久久99| 激情五月成年| 丁香五月香蕉| 婷婷欧美激情| 色色五月天激情| 久热精彩视频98| 激情久久久| 五月婷婷 激情五月| 六月丁香五月天| 婷婷五月丁香99| 久久精彩综合视频| 蜘蛛女侠2003满天星免费观看| www.天天日| 9超碰在线| 激情黄色五月天| 99视频自拍| 人操人| 高清激情av在线观看| 五月婷婷成人| H亚洲| 天天摸天天舔天天爽| 国产婷婷综合在线免费视频| 蒲京久久无码视频| 婷婷丁香五月天欧美| 欧美精产国品一二三区| YW无码| 激情二色月| 五月激情网站| 思思久热| 风流少妇A片一区二区蜜桃| 大香蕉婷婷五月天| www.99热精品| 91久草五月天婷婷| 丁香五月五月婷婷五月天激情四射| 国产精品色| 99九九在线观看免费| 99亚州综合精品成人网| 免费色婷婷| 精品色色网| 丁香六月婷婷久久综合| 久久久久久xxxxx| 另类图片天天影视在线观看| 激情五月天综合网| 日日夜夜干| 欧美久人人| 色五月丁香五月天| 人人操9| 天天综合五月| 中文字幕在线免费看线人| 婷婷激情伍月网| 精品久久久人妻| 色色激情五月天| 久久曰曰| 中海油常州环保涂料有限公司| 99激情网| 九月婷婷综合| 成人在线99| 久久机热这里只有精品免费视频 | 青草视频在线播放| 激情五月丁香色婷婷| 大香蕉婷婷| bbwcuckold精品熟妇| www.天天干| 人妻乱码久久久| 免费看成人AA片无码视频吃奶| 色五月激情五月丁香五月婷婷啪啪综合 | 六月婷基地| 五月天伊人久久久久| 成人电影在线免费试看| 久久久久9999| 人人色性网| 久久九九思思| 深爱五月婷婷| 九九久久精品| AA片在线观看视频在线播放| 可以免费看的av网站| 青青操成人福利| A1片久久久| 激情婷婷五月久久| 精品少妇人妻AV无码专区偷人| 婷婷激情五月天亚洲综合| 伊人喵咪a V| 亚洲精品大片| 99热国产精品| 成人国产欧美大片一区| 热99这就是精品视频| 91人人操.COM| 国产99久久久国产精品免费看| 激情开心五月亚洲| 啪色综合| 麻豆AV一区二区三区| 色噜噜婷婷| 99激情网| 成人超碰网| 色狠狠婷婷| 99操| 九一娱乐在线观看视频| 久艹大香蕉| ...婷婷国产成人亚洲日韩| 丁香婷婷五月天成人| 久热黄色| 超碰狠狠色| 国产1区2区3区| 99ER热精品视频| 婷婷五月婷婷| 天天爱天天做综合| 日韩aaaaa| 97色干| 超碰熟女农村在线69| 九九热视频99| 成 久久| 在线视频你懂得| 五月婷A V在线| 色婷丁香| 99视频这里有精品免费观看| 欧美日韩成人| 婷婷久久天堂网| 99综合视频一体| a久久| 五月天成人在线| 五月婷色色| 热99热久| 亚洲国产精品VA在线看黑人| 丁香五婷婷| 97五月天婷婷| xxxx五月| 久热黄色| 激情五月天.色网| 欧美日韩成人| 久99久在线| 色婷婷五月天视频网站| 久久五月激情网| 久久久久久综合88| 婷婷亚洲久久| 亚洲人操亚洲人| 亚洲精品成人| 99色热视频| 丁香五月天在线| 五月婷成人网| 99热九九这里只有精品| 亚洲性视频| 97男人天堂| 黄色视频网站在线播放| 久9热| 超碰狠狠操| 99热丁香| 五月丁香影视| 五月天综合在线观看| 深爱五月天天| 开心婷婷五月花| 五月色情婷婷| 激情九月婷婷| 97色片| 99ri在线播放| Caop在线| 99丁香五月婷婷在线| 日本色超碰| 超碰在线免费观看3 9| XX色综合| 操操操97| 伊人婷婷福利网| 五月天色小说| 久久婷婷五月天激情新地址| 久热无码| 婷婷香蕉| 内射人妻视频国内| 中文字幕人成乱码在线观看| 五月天激情网图片| 激情五月天网| 日日躁夜夜躁狠狠久久AV| 99亚洲综合| 精品国产va久久久久| 欧美在线视频99| av在线资源| 天天射综合网站| 热九九精品| 五月激情啪啪| 这里只精品| 九九热只有这里是精品| 丁香八月综合激情| 色五月成人在线| 色情综合网| 色五月婷婷综合| 日本99色| 久久五月天婷婷| 99热这里都是精品| 日韩精品视频中文字幕| 香蕉99网| 熟女网站久久| 大香蕉综合网| 色色影院aaaav| 五月丁香六月停停| 色婷婷五月天激情在线观看| 亚洲精品在线视频| www.婷婷五月| 极品人妻VIDEOSSS人妻| 一区=区操屄高清大全av| 久久人五月| 超碰免费99| 天天做天天爱天天爽在| 婷婷十月丁香| 丁香婷婷五月色成人网站| 日狠狠| 国产婷婷婷| 激情熟女网| 天天插天天插天天操| 很很干五月天| 国产精品国产| 99热在线观看| 日本一区二区三区精品视频| 大香蕉婷婷丁香视频在线| 九九视频这里是精品五月| 97五月天婷婷| 五月丁香免费视频| 久久精品无码一区| 久久婷婷丁香| 五月丁香 久久久| 亚洲另类视频| 久久激情网| 丁香五月婷婷影视先锋| 日本 欧美在线| sewuyue第四色| 激情五月天开心| 丁香网站| 午夜丁香六月婷| va中文资源在线观看| 狠狠人人婷婷| 亚洲中文字幕在线观看| 91 九色 入口| 九九九午夜影院成人| 丁香狠狠色婷婷| 色五月婷婷777| 97色在线视频| 思思国产99| 婷婷五月天激情四射| 色情五月| sewuyue第四色| 武则天精品久久| 亚洲综合视频八| 五月丁香| 99色在线| 五月天小说激情| 国庆精品久久| 六月久久婷婷| jiujiuxiangjiaowang| 激情五月天影院| 色色六月| 蜜乳.comcom| 99精品一二三四视频| 亚韩精品视频1区| a色色片| 大香蕉久久婷婷| 狠狠婷婷日韩| 噜噜色五月| 99在线资源| 综合九九日本| 综合五月天天天天天五月| 天天干天干| av激情在线| 激情VA视频| 丁香婷婷狠狠97| 久久亚洲网| 五月天另类视频| 另类伊人婷婷| 婷婷国产成人| 亚洲a片免费观看| 丁香五月丁香伊人| 色婷婷小说| 人妻射精AV| 成人AV在线电影| 另类亚洲视频| 99re6久热只有精品6在线直播| 97日本在线播放| 99久久综合网| 性av| 欧美性爱特黄一级aaaassss| 1024人妻| 人人操Av| 亚洲五月婷婷| 激情五月天啪啪视频| 亚洲免费婷婷| 99re66热这里只有精品| 亚洲欧美婷婷五月色综合| 综合色网站| 五月婷婷深深爱| 欧美色图天堂网色| 五月婷婷色| 久久九九国产| 99精品一二三四视频| 91网站黄| 99re在线精品视频| 大香蕉婷婷丁香天堂AV| 五月婷婷黄色| 久久狠狠欧美| 丁香五月婷婷啪啪| 欧美婷婷五月激情| 色情终和网| 五月丁香激情婷婷| 狠狠草网| 超碰9| 色综合色五月| 日本色色色| www.狠狠干| 日日操夜夜操不卡| 天天五月天综合网址| 色蜜婷婷| 五月婷婷婷婷| 六月丁香深深爱| 99色热综合| 激情综合色播| 98色花堂98t.R| 天天色宗合| 色的色综合| 99久久人人| 91成人看片| 婷婷色五月婷婷姐妹| 青青草国产亚洲精品久久| 久狠日av| 亚洲AV中文在线| 婷婷五月在线观看| 人妻操在线看| 久久9999| 日本三级大片| 天天操夜夜橾| 四虎成人精品永久免费AV九九| 五月婷在线| 五月婷婷影| 激情综合无码| 欧美午夜乱妇午夜福利| 丁香色五月婷婷| 免费黄色视频网址| 婷婷D区| 久久综合影院| site:wpjngj.com| 国产原创视频91九色| 久久九九爽| 色色亚卅| 激情亚洲婷婷| 超碰在线caop| www.henhenl| 婷婷丁香高潮了| 伊人九九热| 国产精品a无线| 99色视频| 人妻熟妇六区| 五月丁香六月婷婷成人| 欧美日韩精品人妻狠狠躁免费视频| 狠狠狠色激情综合适合| 99国产小视频免费观看| 九九精品re免费视频| 天天干,夜夜爽| 综合激情视频| 婷婷激情综合色五月久久,色婷婷丁香花,丁香婷婷五月情天,久久婷婷五月综合色 | 丁香五月性爱| 国产女人十八水真多1| 丁香五月天视频| 狠狠做深爱婷婷久久综合一区| 狠狠色婷婷在线| 六月激情丁香一道本7777| 精品一二三区久久AAA片| 4438激情网| 五月婷婷啪啪网| 99热 这里只有精品 国产 日韩| 20253AV| 狠狠色婷婷7777久| 久热免费视频| 这里只有精品在线看| 婷婷五月天久久| 97日日碰碰| 狠狠精品干练久久久无码中文字幕| 少妇搡BBBB搡BBB搡毛茸茸 | 色婷婷丁香中文在线播放| 色性综合| 操逼三区| 99热www| 久久综合五月天激情小说网站| 五月婷婷六月丁香在线| 91色吧网| 99爱视频在线| 婷婷夜夜夜夜| 日本的α片xxxwww| 超碰在线成人| 久婷婷婷| 婷婷丁香五月91| 丁香伊人五月色婷婷五十路| 91 欧美| 色婷婷成人做爰A片免费看网站| 91婷婷| 97碰在线| 成人在线不卡| AV操逼网| 五月天综合激情网| 五月天婷婷视频小说| 99精色| 亚洲AV色婷婷人禽五月天| 婷婷五月天激情亚洲小说| 五婷婷六月合| 伊人五月婷婷| 九九热这里精品| 人人色婷婷五月天| 久碰视频| 青青.com| 秋霞黄色一级久久| 天天日天天狠狠操| 色五月婷婷五月丁香五月激情五月视频| 香蕉婷婷色五月| 色婷天天| 色播婷婷五月天| 伊人碰碰碰| 日本色婷婷| www.久久| 第四色色六月色综合| 天天搞夜夜叫| 国产精品噜噜在线视频| 先锋男人99资源| 色婷婷五月综合在线| 狠狠五月激情婷婷直播片| 婷婷伊人久久综合| 六月丁AV| 色色亚洲| VA色婷婷| 大香蕉九九| 国产熟妇乱子伦hd| 色婷婷综合久久| 91seAV| 五月婷久久久| 九九热九九| 五月天五月色婷婷综合| 丁香五月综合图片在线观看| 成年人99热| 婷婷伊人网| 97在线视频人妻九色| 思思久久99| 三十熟女| 色婷婷久久7777| 久久婷婷五月综合啪| 五月丁香色色| 青青热久精品视频在线观看| 呦呦视频无码播放| 无套内射极品大美女| 亚洲不卡欧洲| 亚洲欧美婷婷五月色综合| 男女啪啪做爰高潮无遮挡| 久久38视频| 99热爱爱干干日| 热热久久精品视频| 五月天久久综合婷婷丁香| 性天堂久久| 五月婷婷五月天| 99久久婷婷综合| 人人综合久| 色婷婷色99国产综合精品| 丁香五月花影院| 婷婷色五月开心五月| 五月天色播网| 五月天色婷婷激情| 99在线精品观看99| 中字幕视频在线永久在线观看免费 | 六月婷婷久久| 色色婷五月天| 五月丁香六月天| 91操操| 婷婷性爱视频在线| aaaaaa片| 熟女激情五月天 | 狠狠干婷婷| 天天日天天插| www.五月天色色色| 婷婷在线操| 99操无码视频观看| 北条麻妃九九九国产精品视频| 色综合色色色色| 色国产五月| 91avse| 久久婷青青草原| www.yw尤物| 色综合色色色| 欧美黑人巨大性生话| 色欲久久久久久综合网综合网| 天天操天天操综合| 99热播放| 婷婷五月娱乐在线| 噜噜噜噜噜日本视频| 婷婷五月天亚洲综合| 午夜伊人大香蕉| 人人爱操| 天天爽天天爽| 五月丁香综合色婷婷| 超碰99在线观看| 亚洲综合99| 色色色九九九五月婷婷| 91操人| 综合99久久天天综合| 91干婷婷| 在线区区区| 激情文学久久| WWW久| 五月草影视| 中文字幕乱码亚洲精品一区| 成人在线网| 免费看欧美成人A片无码| 91操黄| 五月丁香综合精品| 亚洲欧美成人在线| 91婷婷在线| 婷婷激情人妻| 去色色五月天| 97韩国久久电影院| 人人操碰| 国产美女无遮挡裸体毛片A片| 99热这里| 五月丁香婷婷综合网| 九九热视频精品999| 少妇激情五月婷婷| 激情五月色婷婷| 中文字幕AV在线| 大香线蕉伊人| www.99热在线| 99久在线精品99re8| 婷婷五月另类网站| 久久五月婷天天干| 人与禽A片啪啪| 成人五月天在线视频在线观看 | 99精品在线| 丁香五月天在线观看视频| 大香蕉伊人99| 手机在线日韩视频中文字幕| 五月天激情网图片| 九色地址91视频| 色婷婷亚洲婷婷| 五月狠狠| 99综合自拍| 激情综合国产| 久久婷婷综合基地| 最新色色五月天| 午夜天堂啪啪| 香蕉综合在线| 婷婷五月天精品| 97碰碰视频| 欧美激情-区二区三区| 十月色综合| 欧美久人人| h亚洲| 九月婷婷久久久| 色婷婷小说网| 精品无码人妻一区|