免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Spring事務(wù)失效的7個坑與底層原理:從JDBC到分布式事務(wù)

Spring事務(wù)失效的7個坑與底層原理:從JDBC到分布式事務(wù) 1. 事務(wù)失效的七宗罪我踩過的坑你大概率也會踩先講個真實事故。幾年前我維護過一個電商訂單系統(tǒng)線上出了一個詭異的bug用戶支付成功后訂單狀態(tài)正常更新但庫存卻莫名其妙多扣了一次。代碼看起來完全沒問題——service方法上明明白白標著Transactional數(shù)據(jù)庫也確認是InnoDB。查了兩天才定位到根因同一個類里方法A調(diào)用方法BB的事務(wù)注解根本沒生效。這就是Spring事務(wù)最經(jīng)典的坑之一自調(diào)用繞過代理。Transactional依賴AOP代理生效而Spring的代理機制決定了一個類內(nèi)部的方法調(diào)用是不會經(jīng)過代理對象的。this.orderService.update()拿到的這個this根本不是Spring容器里那個被代理過的bean而是原始對象。原始對象上的注解Spring根本看不見。結(jié)果就是你以為開啟了事務(wù)實際上沒有。庫存扣減在無事務(wù)狀態(tài)下執(zhí)行訂單那邊一旦報錯回滾庫存早就提交了。1.1 自調(diào)用問題最隱蔽的事務(wù)殺手自調(diào)用這個坑的隱蔽之處在于它不會報錯不會警告日志里什么都看不出來只有數(shù)據(jù)對不上賬的時候才會暴露。Service public class OrderService { Transactional public void createOrder(OrderDTO dto) { // 扣庫存 stockService.deduct(dto.getSkuId(), dto.getQuantity()); // 插入訂單 orderMapper.insert(buildOrder(dto)); // 這里調(diào)用了自身方法事務(wù)注解失效 this.sendNotification(dto); } Transactional(propagation Propagation.REQUIRES_NEW) public void sendNotification(OrderDTO dto) { // 通知邏輯 } }上面這段代碼里sendNotification的REQUIRES_NEW完全無效。因為this.sendNotification()走的是原始對象不是代理。解決辦法有三個把需要事務(wù)的方法挪到另一個Service類——最推薦職責也最清晰。注入自身代理Autowired private OrderService self;然后調(diào)用self.sendNotification()。使用AopContext.currentProxy()需要開啟EnableAspectJAutoProxy(exposeProxy true)然后((OrderService) AopContext.currentProxy()).sendNotification()。方案2最實用但要注意循環(huán)依賴問題——Spring 4.3之后字段注入的循環(huán)依賴是允許的但構(gòu)造器注入就不行。方案3代碼看著別扭但確實有效。1.2 非public方法注解白寫了Transactional用在private或者protected方法上Spring容器啟動時根本不報錯但方法執(zhí)行時事務(wù)就是沒開。原理不復(fù)雜Spring AOP生成代理的時候JDK動態(tài)代理基于接口只代理public方法CGLIB雖然能代理非public方法但Spring官方明確說了Transactional只支持public方法。最騷的是如果你把Transactional放在public方法上、但里面調(diào)用了private方法private方法里的事務(wù)注解同樣無效——因為事務(wù)邊界已經(jīng)在public方法的代理上確定了內(nèi)層調(diào)用不會再開啟新事務(wù)除非傳播行為是REQUIRES_NEW。我見過不少項目把Transactional加到private方法上然后一臉疑惑地說為什么回滾了沒生效。排查方法很簡單看日志里有沒有TransactionInterceptor的getTransaction記錄沒有就是代理沒走。1.3 異常被吞回滾了個寂寞這是最常見也最無語的一種。Java的檢查型異常checked exception默認不會觸發(fā)Spring事務(wù)回滾但很多人不知道這一點隨手寫了個throws Exception然后事務(wù)就失效了。Transactional public void transfer(Account from, Account to, BigDecimal amount) throws Exception { accountMapper.decrease(from.getId(), amount); accountMapper.increase(to.getId(), amount); // 業(yè)務(wù)校驗不通過拋了個業(yè)務(wù)異常 throw new BizException(余額不足); }BizException如果是繼承Exception而不是RuntimeException上面這個事務(wù)不會回滾錢就憑空消失了。Spring的默認回滾策略是只回滾RuntimeException和Error。檢查型異常如IOException不會觸發(fā)回滾因為Spring認為你既然顯式聲明了這個異常說明你可以處理它事務(wù)繼續(xù)提交是合理的。解決方案兩個方向業(yè)務(wù)異常統(tǒng)一繼承RuntimeException——大多數(shù)項目的做法最簡單。在Transactional上顯式指定Transactional(rollbackFor Exception.class)——最穩(wěn)一勞永逸。我個人的習(xí)慣是兩者都做自定義業(yè)務(wù)異常繼承RuntimeException同時在Transactional上寫rollbackFor Exception.class。雖然看起來冗余但團隊里總有人會寫檢查型異常。1.4 多線程子線程異常主線程事務(wù)照樣提交Transactional的事務(wù)上下文存在ThreadLocal里子線程拿不到父線程的事務(wù)上下文。Transactional public void batchProcess(ListOrder orders) { orders.parallelStream().forEach(order - { // 這里拋異常父線程事務(wù)不會感知 processOne(order); }); }如果一定要在多線程里用事務(wù)只能每個線程自己開事務(wù)用TransactionTemplate包住子線程的任務(wù)代碼然后在線程池層面做異常聚合——子線程里有任何失敗主線程如何決定是否整體回滾需要自己實現(xiàn)協(xié)調(diào)邏輯。這個問題在批量導(dǎo)入、報表生成、定時任務(wù)場景里非常常見。我的建議是批量任務(wù)盡量不用Transactional包整段而是每條或每批用TransactionTemplate單獨開事務(wù)配合失敗記錄表做補償。這樣既能保證數(shù)據(jù)一致又不會因為一個線程失敗導(dǎo)致大批量回滾。1.5 數(shù)據(jù)庫引擎不支持事務(wù)這個坑現(xiàn)在少了但老項目中還能見到。MySQL的MyISAM引擎根本不支持事務(wù)你注解標得再多也沒用。確認方法很簡單SHOW TABLE STATUS WHERE Name your_table;看Engine字段InnoDB支持事務(wù)MyISAM不支持。另外如果表是MyISAMSpring事務(wù)管理器初始化時也不報錯執(zhí)行時DataSourceTransactionManager還是會調(diào)setAutoCommit(false)但引擎層面不認等于白忙。1.6 final類或final方法CGLIB也救不了Spring事務(wù)默認用AOP代理。如果目標類配置了JDK動態(tài)代理基于接口那沒問題如果走CGLIB基于類繼承生成子類那么final類無法被繼承final方法無法被重寫代理自然失效。Spring Boot 2.x之后默認proxyTargetClasstrue走CGLIBfinal問題就浮出水面了。很多人把service類寫成final為了防繼承結(jié)果事務(wù)全失效。排查方法啟動時看日志里是JdkDynamicAopProxy還是CglibAopProxy再看你的類和方法有沒有final修飾符。1.7 事務(wù)管理器沒配置或配置錯了Spring Boot的DataSourceAutoConfiguration會自動配置DataSourceTransactionManager但你如果引入了多數(shù)據(jù)源或者自定義了DataSource而沒有配套注冊PlatformTransactionManager那Transactional就會失效。另外EnableTransactionManagement注解在Spring Boot里默認開啟不需要你重復(fù)添加。但如果你用了Spring MVC非Boot項目忘了加EnableTransactionManagement事務(wù)也會靜默失效。排查清單很簡單Transactional方法執(zhí)行的線程棧里有沒有TransactionInterceptor有就是代理生效了沒有就是代理沒生效。2. Spring事務(wù)的底層運作機制從JDBC到動態(tài)代理很多人用Transactional用了好幾年但完全不知道它背后發(fā)生了什么。面試被問Spring事務(wù)是怎么實現(xiàn)的只會答AOP兩個字就再也說不出更多了。其實底層鏈路沒那么玄拆開看就三層JDBC的事務(wù)能力、Spring的事務(wù)抽象、AOP的代理包裝。2.1 第一層JDBC的事務(wù)基石萬事萬物都離不開JDBC。Spring事務(wù)再花哨落到底層就是這三行代碼Connection conn dataSource.getConnection(); conn.setAutoCommit(false); // 關(guān)閉自動提交 conn.commit(); // 提交 conn.rollback(); // 回滾setAutoCommit(false)的意思是之后的SQL不會立即生效必須等commit()才真正寫入數(shù)據(jù)庫MySQL的binlog和redolog層面是另一套機制。如果中途異常調(diào)用rollback()之前的所有操作全部撤銷。所以Spring事務(wù)的本質(zhì)就是幫你管理Connection在合適的時機調(diào)用commit或rollback。就這么簡單。2.2 第二層PlatformTransactionManager抽象Spring抽象了一個接口——PlatformTransactionManager核心方法就三個public interface PlatformTransactionManager { TransactionStatus getTransaction(TransactionDefinition definition); void commit(TransactionStatus status); void rollback(TransactionStatus status); }getTransaction獲取或創(chuàng)建事務(wù)。注意這里的措辭——如果你已經(jīng)在事務(wù)里根據(jù)傳播行為決定是復(fù)用當前事務(wù)還是掛起后新建。commit提交事務(wù)。但提交前會檢查TransactionStatus里的rollbackOnly標記如果之前有人標記了只回滾這里會拋UnexpectedRollbackException。rollback回滾事務(wù)。常用的實現(xiàn)是DataSourceTransactionManager針對Hibernate有HibernateTransactionManager針對JPA有JpaTransactionManager。DataSourceTransactionManager的doBegin方法做了幾件事從DataSource拿一個Connection。如果當前Connection是自動提交模式關(guān)閉它并記下來方便事務(wù)結(jié)束恢復(fù)。設(shè)置隔離級別如果TransactionDefinition指定了。設(shè)置只讀標志readOnlytrue會走Connection.setReadOnly對MySQL的InnoDB來說這能優(yōu)化一些查詢路徑。把這個Connection綁定到TransactionSynchronizationManager的ThreadLocal里。后面的DAO操作拿到的Connection就是從TransactionSynchronizationManager里取的。這就是同一個事務(wù)里所有SQL共用同一個數(shù)據(jù)庫連接的原理——ThreadLocal綁定。2.3 第三層AOP代理的切入點Spring事務(wù)的AOP基于TransactionInterceptor它實現(xiàn)了MethodInterceptor攔截所有被Transactional標記的方法。調(diào)用鏈是這樣的外部調(diào)用orderService.createOrder()實際調(diào)用的是代理對象的方法。TransactionInterceptor.invoke()被觸發(fā)先調(diào)用TransactionAspectSupport的createTransactionIfNecessary。根據(jù)Transactional上的配置傳播行為、隔離級別、超時等調(diào)用PlatformTransactionManager.getTransaction()。執(zhí)行業(yè)務(wù)方法。方法正常返回提交事務(wù)方法拋異常根據(jù)rollbackFor配置決定是否回滾。清理ThreadLocal中的連接恢復(fù)自動提交狀態(tài)。所以Transactional加在哪個方法上代理就攔哪個方法——事務(wù)邊界就是方法邊界。方法跑多久事務(wù)就開多久。2.4 只讀事務(wù)與UnexpectedRollbackException的真相熱詞里有一條UnexpectedRollbackException: transaction rolled back because it has been marked as rollback-only這是個非常經(jīng)典的問題。場景是這樣的方法A開啟事務(wù)調(diào)用方法BB標記了rollback-onlytrue比如B捕獲了異常但內(nèi)部回滾邏輯已運行。然后A繼續(xù)執(zhí)行正常返回時調(diào)用commit()此時Spring發(fā)現(xiàn)事務(wù)被標記為rollback-only直接拋UnexpectedRollbackException事務(wù)回滾。換句話說你代碼里沒拋異常但事務(wù)已經(jīng)注定要回滾了。這經(jīng)常出現(xiàn)在try-catch吃了異常但沒重新拋出的情況下。排查時看日志里有沒有Transaction rolled back because it has been marked as rollback-only的WARN告警跟著調(diào)用棧就能找到是哪個方法把事務(wù)標記了。3. 事務(wù)傳播行為與隔離級別什么時候用哪個別背口訣網(wǎng)上關(guān)于傳播行為的口訣一大堆什么REQUIRED默認用REQUIRES_NEW記日志NESTED做嵌套背下來容易用對難。我把這幾個傳播行為逐個講透配上真實場景你就能理解了。3.1 傳播行為詳解Spring定義了7種傳播行為大部分項目用到的不超過4種但理解每一種的原理仍然重要。傳播行為含義典型場景REQUIRED有事務(wù)就復(fù)用沒有就新建默認值99%的場景用它SUPPORTS有事務(wù)就加入沒有就無事務(wù)執(zhí)行查詢方法可選MANDATORY必須在事務(wù)中執(zhí)行否則拋異常強制事務(wù)的方法REQUIRES_NEW掛起當前事務(wù)永遠新建一個寫日志、異步通知NOT_SUPPORTED掛起當前事務(wù)以無事務(wù)方式執(zhí)行導(dǎo)出大數(shù)據(jù)量文件NEVER如果有事務(wù)就拋異常強制無事務(wù)的執(zhí)行NESTED嵌套事務(wù)基于保存點Savepoint大批量循環(huán)處理單條失敗不影響整體REQUIRED是默認值理解起來很簡單Spring檢查當前ThreadLocal里有沒有綁定事務(wù)有就加入沒有就新建一個。注意加入意味著共用一個事務(wù)、一個Connection、一套commit/rollback。內(nèi)層方法拋異?;貪L外層也一起回滾。REQUIRES_NEW的核心是掛起。邏輯是從TransactionSynchronizationManager里把當前事務(wù)的Connection解綁、掛起然后新建一個完全獨立的事務(wù)持有獨立的Connection。內(nèi)層事務(wù)提交/回滾不影響外層事務(wù)。外層事務(wù)回滾內(nèi)層已經(jīng)提交的數(shù)據(jù)不會跟著回滾。典型場景就是操作日志業(yè)務(wù)方法開啟事務(wù)日志記錄要獨立提交——不管業(yè)務(wù)成功還是失敗日志都要寫進去。如果你用REQUIRED業(yè)務(wù)回滾時日志也跟著回滾那排查問題的時候就看不到錯誤日志了。NESTED跟REQUIRES_NEW的區(qū)別要講清楚。REQUIRES_NEW是物理事務(wù)獨立的Connection、獨立的commit/rollbackNESTED是邏輯事務(wù)基于Savepoint保存點。內(nèi)層方法失敗回滾到保存點外層可以繼續(xù)執(zhí)行外層最終提交時一起提交所有保存點之前的操作。但注意NESTED需要底層數(shù)據(jù)庫支持保存點。MySQL的InnoDB支持但有些數(shù)據(jù)庫不支持且JpaTransactionManager對NESTED的支持有限。實際項目中能用REQUIRES_NEW解決的就別用NESTED少踩坑。3.2 隔離級別臟讀、不可重復(fù)讀、幻讀Spring事務(wù)隔離級別有五種對應(yīng)JDBC的隔離級別隔離級別臟讀不可重復(fù)讀幻讀說明DEFAULT---使用數(shù)據(jù)庫默認MySQL默認REPEATABLE_READREAD_UNCOMMITTED會會會讀未提交不推薦READ_COMMITTED不會會會Oracle默認REPEATABLE_READ不會不會會MySQL InnoDB下不會MySQL默認SERIALIZABLE不會不會不會串行化性能最差臟讀讀到別的事務(wù)未提交的數(shù)據(jù)。不可重復(fù)讀同一事務(wù)內(nèi)兩次讀取同一數(shù)據(jù)結(jié)果不一樣因為別的事務(wù)提交了更新。幻讀同一事務(wù)內(nèi)兩次查詢返回的記錄數(shù)不一樣因為別的事務(wù)插入了新記錄。MySQL的InnoDB在REPEATABLE_READ級別下通過MVCC多版本并發(fā)控制 Gap Lock間隙鎖實際上消除了幻讀問題。所以MySQL默認的REPEATABLE_READ比Oracle的READ_COMMITTED在某些場景下更嚴格。實際項目中我見過很多團隊把隔離級別統(tǒng)一設(shè)成READ_COMMITTED理由是MySQL的RR有間隙鎖并發(fā)插入容易死鎖。這個說法有一定道理但不是絕對的。如果你的系統(tǒng)沒有復(fù)雜的范圍查詢并發(fā)插入場景RR不會成為瓶頸如果你確實遇到死鎖頻繁再降級也不遲。3.3 事務(wù)超時與回滾策略Transactional(timeout 5)表示事務(wù)最多執(zhí)行5秒超時則強制回滾。底層實現(xiàn)是JDBC的Connection.setNetworkTimeout或者由Spring在每次SQL執(zhí)行前檢查時間不同實現(xiàn)有差異。但要注意timeout是從事務(wù)開始到最后一次SQL執(zhí)行的時間不是方法總耗時。如果你的方法在事務(wù)前做了一堆耗時操作比如遠程調(diào)用這部分不計入事務(wù)超時。所以不要指望timeout能保護整體方法執(zhí)行時間。關(guān)于回滾策略我再強調(diào)一次// 推薦寫法 Transactional(rollbackFor Exception.class) // 或者只回滾特定異常 Transactional(rollbackFor BizException.class, noRollbackFor IllegalStateException.class)noRollbackFor用的場景不多但有一種情況很實用某些非關(guān)鍵數(shù)據(jù)比如統(tǒng)計緩存的更新失敗不應(yīng)該讓主事務(wù)回滾可以列在noRollbackFor里。4. 編程式事務(wù)當Transactional真的不合適時Transactional是聲明式事務(wù)用起來方便但有三個致命弱點事務(wù)粒度太大整個方法一個事務(wù)如果方法里有網(wǎng)絡(luò)調(diào)用或批量循環(huán)事務(wù)會長時間占用數(shù)據(jù)庫連接。自調(diào)用失效前面已經(jīng)講過了。無法精確控制提交時機想先做幾步提交再繼續(xù)做Transactional實現(xiàn)不了。這時候就該上手編程式事務(wù)了。Spring提供了TransactionTemplate。4.1 TransactionTemplate的用法Service public class OrderService { private final TransactionTemplate transactionTemplate; public OrderService(PlatformTransactionManager transactionManager) { this.transactionTemplate new TransactionTemplate(transactionManager); // 可以設(shè)置默認配置 this.transactionTemplate.setPropagationBehavior(TransactionDefinition.PROPAGATION_REQUIRED); this.transactionTemplate.setIsolationLevel(TransactionDefinition.ISOLATION_READ_COMMITTED); } public void createOrder(OrderDTO dto) { transactionTemplate.executeWithoutResult(status - { stockMapper.deduct(dto.getSkuId(), dto.getQuantity()); orderMapper.insert(buildOrder(dto)); }); } }TransactionTemplate.execute回調(diào)里你可以在任何地方開啟事務(wù)塊粒度完全由自己控制。更重要的是它徹底繞開了自調(diào)用問題——因為你是直接調(diào)用事務(wù)管理器不走代理。還有一個場景強烈推薦用TransactionTemplate大批量循環(huán)插入。如果用Transactional包住整個for循環(huán)幾萬條數(shù)據(jù)一個事務(wù)提交時數(shù)據(jù)庫壓力巨大一旦失敗全部回滾代價太高。改成循環(huán)內(nèi)用TransactionTemplate每100條一個事務(wù)失敗了只回滾這一批配合日志記錄失敗批次整體效率和可靠性都高很多。4.2 手動控制TransactionStatus如果execute回調(diào)不適合你比如需要事務(wù)中間做分支判斷、需要中途提交可以用更底層的PlatformTransactionManagerAutowired private PlatformTransactionManager transactionManager; public void complexBiz() { DefaultTransactionDefinition def new DefaultTransactionDefinition(); def.setPropagationBehavior(TransactionDefinition.PROPAGATION_REQUIRED); TransactionStatus status transactionManager.getTransaction(def); try { // 業(yè)務(wù)邏輯1 dao.update(...); // 到這里先提交一次 transactionManager.commit(status); // 開啟新事務(wù) TransactionStatus status2 transactionManager.getTransaction(def); try { // 業(yè)務(wù)邏輯2 dao.insert(...); transactionManager.commit(status2); } catch (Exception e) { transactionManager.rollback(status2); throw e; } } catch (Exception e) { transactionManager.rollback(status); throw e; } }這段代碼展示了如何手動控制多段事務(wù)但我強烈不建議在業(yè)務(wù)代碼里寫這種底層代碼——容易出錯而且代碼很難讀。99%的場景TransactionTemplate夠用了。4.3 編程式事務(wù)的注意點TransactionTemplate是線程安全的可以做成Bean注入不要每次new一個。executeWithoutResult和execute的區(qū)別后者可以返回業(yè)務(wù)結(jié)果前者只能執(zhí)行不能返回。需要返回值就用execute。事務(wù)回調(diào)里拋出的異常RuntimeException會觸發(fā)回滾檢查型異常默認不會。要回滾檢查型異常需要手動status.setRollbackOnly()或者包裝成RuntimeException。5. 多數(shù)據(jù)源與分布式事務(wù)跳出單庫思維的邊界單庫單事務(wù)的好日子總有到頭的時候。微服務(wù)一拆、分庫一搞Transactional就管不住跨庫的數(shù)據(jù)一致性了。我先講清楚Spring事務(wù)在多數(shù)據(jù)源下的表現(xiàn)再展開分布式事務(wù)。5.1 多數(shù)據(jù)源下的事務(wù)各管各的如果你配置了兩個DataSource比如一個主庫一個從庫Spring里注冊了對應(yīng)的兩個PlatformTransactionManager同一個Transactional方法里操作了兩個庫——那這兩個庫的事務(wù)是互相獨立的。主庫提交成功、從庫提交失敗你沒有任何辦法通過單機事務(wù)解決。Spring Boot里處理多數(shù)據(jù)源的常規(guī)姿勢是Transactional(transactionManager xxxTransactionManager)指定用哪個事務(wù)管理器。方法里操作另一個庫那份數(shù)據(jù)不在事務(wù)保護范圍內(nèi)。所以多數(shù)據(jù)源場景下的策略是一個事務(wù)只操作一種數(shù)據(jù)源。跨數(shù)據(jù)源的業(yè)務(wù)要么拆分方法要么引入分布式事務(wù)方案不要指望Transactional救你。5.2 分布式事務(wù)的主流方案對比分布式事務(wù)是個大話題我只挑主流方案講給個選型思路。XA協(xié)議兩階段提交2PCXA是最正統(tǒng)的分布式事務(wù)協(xié)議分兩步準備階段所有參與者執(zhí)行SQL但不提交各自保留Undo/Redo log和提交階段協(xié)調(diào)者發(fā)提交指令各參與者提交。問題在于準備階段會一直持有數(shù)據(jù)庫鎖高并發(fā)場景下鎖沖突嚴重性能非常差。Java里典型的實現(xiàn)是Atomikos、Bitronix。說實話互聯(lián)網(wǎng)高并發(fā)場景用XA的很少了更多出現(xiàn)在金融等強一致性要求的內(nèi)部系統(tǒng)。TCCTry-Confirm-CancelTCC把每個操作拆成三個階段Try預(yù)留資源、Confirm確認執(zhí)行、Cancel取消釋放。優(yōu)點是業(yè)務(wù)層面控制粒度性能比XA好很多缺點是侵入性極強每個業(yè)務(wù)都要寫三套邏輯。典型場景賬戶轉(zhuǎn)賬。Try階段凍結(jié)轉(zhuǎn)出金額Confirm階段扣款Cancel階段解凍。這個方案需要深入理解業(yè)務(wù)才能寫得對如果你只是想快速實現(xiàn)一個分布式事務(wù)TCC的學(xué)習(xí)成本挺高的。消息事務(wù) 最終一致性這是目前最常用、成本最低的方案。思路很簡單利用本地事務(wù)把業(yè)務(wù)操作和發(fā)消息綁定在同一次數(shù)據(jù)庫事務(wù)里通過消息中間件RocketMQ/RabbitMQ最終把數(shù)據(jù)變更同步給其他服務(wù)。舉個訂單和積分的例子開啟本地事務(wù)插入訂單表同時插入積分消息表。本地事務(wù)提交后后臺任務(wù)或MQ的事務(wù)消息機制把積分消息表里未發(fā)送的記錄發(fā)到MQ。積分服務(wù)從MQ消費消息給用戶加積分。如果積分服務(wù)失敗消息進入重試隊列直到成功。這種方案做不到強一致中間會有一段數(shù)據(jù)不一致的時間窗口但絕大多數(shù)業(yè)務(wù)都能接受。核心機制是本地消息表實現(xiàn)成本低、不用引入重量級中間件是目前國內(nèi)互聯(lián)網(wǎng)公司的首選方案。Seata的AT模式Seata是阿里開源的分布式事務(wù)框架AT模式的思路是代理你的SQL記錄Before Image和After Image數(shù)據(jù)快照在全局提交時自動執(zhí)行補償SQL。對業(yè)務(wù)代碼侵入性很小但性能有一定損耗每行數(shù)據(jù)要記錄前后快照。如果你的系統(tǒng)需要跨服務(wù)事務(wù)、又不想太動代碼Seata AT是可以考慮的。5.3 選擇建議場景推薦方案單體應(yīng)用單數(shù)據(jù)庫什么都不用本地事務(wù)夠用微服務(wù)對一致性要求不高本地消息表 MQ最終一致微服務(wù)強一致要求高Seata AT 或 TCC金融級強一致低并發(fā)XA/2PC非核心數(shù)據(jù)可以容忍短暫不一致MQ異步 對賬補償分布式事務(wù)沒有銀彈。選型的核心不是哪個方案高級而是你的業(yè)務(wù)能容忍多大程度的不一致。6. 事務(wù)排查工具箱從日志到監(jiān)控的一整套姿勢事務(wù)的問題一旦出現(xiàn)往往都是線上的、隱性的、難復(fù)現(xiàn)的。所以一定要有一套預(yù)防和排查的手段而不是等出了問題再手忙腳亂。6.1 日志配置把事務(wù)邊界打印出來Spring的事務(wù)日志默認是DEBUG級別不打開根本看不到。在application.yml里配置logging: level: org.springframework.transaction: DEBUG org.springframework.jdbc.datasource.DataSourceTransactionManager: DEBUG org.springframework.jdbc.datasource.JdbcTransactionManager: DEBUG打開后你會看到類似這樣的日志Obtained JDBC transaction from DataSource [HikariDataSource (HikariPool-1)] Participating in existing transaction Initiating transaction commit Initiating transaction rollback這些日志的排列能幫你快速判斷事務(wù)有沒有開啟、是新建還是復(fù)用、提交還是回滾、有沒有因為rollback-only被強制回滾。6.2 ThreadLocal狀態(tài)的運行時監(jiān)控如果你懷疑某個方法執(zhí)行時事務(wù)狀態(tài)不對可以在代碼里手動檢測import org.springframework.transaction.support.TransactionSynchronizationManager; boolean isInTransaction TransactionSynchronizationManager.isActualTransactionActive(); System.out.println(當前是否在事務(wù)中: isInTransaction);isActualTransactionActive()返回true說明當前線程確實有數(shù)據(jù)庫事務(wù)處于活動狀態(tài)。如果外面標了Transactional但這里返回false說明代理沒生效——自調(diào)用、final方法、私有方法逐個排查。還可以查看當前事務(wù)名Object name TransactionSynchronizationManager.getCurrentTransactionName();這能幫你快速定位當前事務(wù)是哪個方法開啟的。6.3 監(jiān)控事務(wù)耗時與連接占用事務(wù)另一個容易忽略的問題是連接泄漏和長事務(wù)。一個事務(wù)如果執(zhí)行了幾十秒連接就占用了幾十秒連接池很快被打滿。建議做法在DataSource層加慢SQL日志HikariCP有connectionTimeout、validationTimeout配置同時開啟leakDetectionThreshold檢測連接泄漏。用TransactionSynchronizationManager.registerSynchronization注冊事務(wù)同步回調(diào)統(tǒng)計每個事務(wù)的耗時。Transactional public void bizMethod() { long start System.currentTimeMillis(); TransactionSynchronizationManager.registerSynchronization(new TransactionSynchronization() { Override public void afterCompletion(int status) { long cost System.currentTimeMillis() - start; if (cost 1000) { log.warn(事務(wù)耗時過長: {}ms, status{}, cost, status); } } }); }這個方法能精確定位哪個事務(wù)方法最耗時但它需要每一個業(yè)務(wù)方法都加一遍侵入性強。更好的方案是寫一個AOP切面統(tǒng)一攔截Transactional方法做耗時統(tǒng)計。6.4 事務(wù)失效排查的標準操作流程如果線上出現(xiàn)了疑似事務(wù)失效的問題我的排查順序是這樣的看日志打開事務(wù)DEBUG日志確認方法執(zhí)行時有沒有Obtained JDBC Transaction記錄。沒有就是代理沒生效走第2步有就繼續(xù)看提交/回滾記錄走第5步??捶椒ê灻遣皇莗ublic類或方法有沒有final看調(diào)用方是不是同一個類內(nèi)部調(diào)用是不是沒有被Spring管理的對象比如new出來的看注解Transactional有沒有寫對rollbackFor有沒有配多數(shù)據(jù)源下transactionManager指對了沒有看異常異常有沒有被try-catch吞掉異常類型是不是RuntimeException看數(shù)據(jù)庫表引擎支不支持事務(wù)連接是不是走到了正確的DataSource這套流程走一遍90%的事務(wù)問題都能定位。7. 最后的實戰(zhàn)建議事務(wù)規(guī)范從我做起寫到這里我把這些年跟事務(wù)打交道沉淀下來的幾條規(guī)矩放在最后算是個人的實戰(zhàn)總結(jié)也是新項目啟動時的檢查清單。事務(wù)方法要短小精悍。事務(wù)范圍之內(nèi)不要做遠程調(diào)用、不要做復(fù)雜的文件IO、不要進行大批量循環(huán)。否則連接池遲早被打死。把非數(shù)據(jù)庫操作移到事務(wù)外或者拆成多個事務(wù)塊。事務(wù)邊界要盡可能晚開啟盡可能早提交。前置校驗、參數(shù)組裝這些放事務(wù)外真正需要數(shù)據(jù)庫原子性的操作才放進事務(wù)塊。很多人習(xí)慣方法一進來就開事務(wù)其實很多操作根本不需要事務(wù)保護?;貪L配置要顯式寫。Transactional(rollbackFor Exception.class)這行字雖然啰嗦但它能擋住95%的回滾失效問題。自定義的業(yè)務(wù)異常統(tǒng)一繼承RuntimeException省得每個方法都要考慮這個異常會不會回滾。批量處理用TransactionTemplate而不是Transactional。循環(huán)里的事務(wù)一定要用編程式事務(wù)精確控制粒度Transactional包整個循環(huán)就是把數(shù)據(jù)庫往死里逼。分布式事務(wù)不要貪多求全。能靠業(yè)務(wù)流程設(shè)計規(guī)避的就盡量規(guī)避比如通過本地消息表做最終一致性比引入一套重量級分布式事務(wù)框架劃算得多。選型之前先想清楚你的數(shù)據(jù)不一致容忍度。事務(wù)這個東西說到底是數(shù)據(jù)庫連接和錯誤處理時機的管理藝術(shù)。理解底層機制比背多少面試題都管用。希望這篇文章里踩過的坑、總結(jié)的思路能讓你少走幾條彎路。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
激情综合网色播五月| 九九热视频在线观看| 欧美大片免费播放器| 久热无码| 成人做爰A片免费看网站找不到了| 丁香五月网站| 日韩一级一片内射视频4K| 亚洲丁香五月美女| 麻豆AV一区二区三区| 丁香激惜男女| 91人人人人人人人| 97碰碰视频在线观看免费| 欧美99热| 超碰人人摸人人操| 激情婷婷丁香| 色欲Av五月天| 操碰99在线视频观看| 金品在线视频99| 狠狠干五月天| 日本怕怕视频| 色婷婷丁香AV综合| 精品激情| 天天射天天射一道本日本社区| chaopengdaxiangjiao| 久热这里只有精品视频6| 天堂二区| se99视频| 噜噜久| 婷婷五月无码| 91欧美| 天天干天天操天天爱| 欧美人人草草| 99热久| 这里只有国产精品在线| 久久精品五月天| 欧美日韩99| 国产激情综合五月| www.五月天色色色| 国产乱妇无乱码大黄AA片| 丁香激激情网| 国产精品国产| 五月激情小说| 五月丁香六月| 草AV9999| 做爰丰满少妇1313| 日本色视| 人人舔人人色人人高潮| 99热丁香| 超碰v| 亚洲成人五月天| 91色久| 蜜桃婷婷丁香综合久久开心亚洲| 丁香五月欧美成人| www.成人婷婷综合| ss五月天激情| 超碰色色综合| 精品国产a| 嫩草AV久久伊人妇女超级A| 日日鲁鲁鲁夜夜爽爽狠狠视频97| 99热这里只有精品在线| 久久婷婷五月激情网站| www.五月.com| 五月婷婷激情久久| 亚洲人妻电影| 成片免费播放| 色色亚洲99com| 久久婷婷丁香花综合网| 亚州激情九月| 中文字幕婷婷五月天| 五月天开心色情网| 色五月丁香激情视频| 久久九九国产| 激情婷婷内射| 思思热在线精品视频网站| 天堂婷婷五月色| 激情五月婷婷啪啪| 超碰在线超碰| 国产精品美女久久久久AV超清| 国产精品色色| 九97免费视频| 亚洲小视频免费播放| 五月六月丁香激情视频| 99热久久这里只有精品2010| 久热九九| 色五月丁香六月婷婷| 国产精品热搜丁香五月婷婷| 欧美人人操| 天天天天天天操| 大香蕉啪啪啪| 超碰免费99| 国产片天天爽夜夜爽| 丁香久久五月天视频在线观看| 国产精品久久久久久五月天加勒比| 五月婷婷无码专区| 久久这里都是精品| 殴美97色| 伊人婷婷激情| 亚洲午夜AV| 九九亚洲| 日韩狠狠色| 天天做天天爱天天爽在| 色婷婷9| 丁香六月婷| 99热99色| 影音先锋四区| 久久视频在线| 久久综合九色综合97婷婷| 91人人人人人人人| 久久这里只有精品07| 激情五月天色婷婷| 青青青在线视频国产| 丁香色色五月| 天天色播| 大香蕉久| 丁香五月a| 97精品综合久久| 丁香六月成人| 能看的av片| 色99色| 婷婷伊人綜合中文字幕| 欧美婷婷| 色综合久久99色| 欧美成人一区二区三区在线视频 | www.色99| 丁香九九九九| 五月婷丁香| 98国产精品综合一区二区三区| 伊人久久综合| 五月丁香啪啪综合| 免费V片在线| 色五月xxx| www.天天干| 99热在线观看| 五月色丁香婷婷中文字幕| 五月天婷婷基地综合网| 婷婷色吧| 欧美99视频| 大香久久伊人网| 激情五月六月婷婷综合啪啪| 五月丁香婷婷啪啪| 精品国产va久久久久久久| 久久婷五月综合| www,26uuu,c0m,色情| 丁香六月激情综合| 免费精品66| 久99在线视频| 99热综合色图| 殴美日比视频| 婷婷五月大| 色情五月婷婷| 精品无码色| 99久热这里只有精品| 99九九中文字幕视频| 日本操逼九九九九58日本操逼| WWW.桔色成人.COM| 激情五月色综合国产精品| 99热这里| 玖玖九九99| 欧美性生交XXXXX无码小说| 日本三级大片| 无码人妻AV久久久一区二区三区| 99色热综合| 狠狠干.com| 新激情五月天色播| 欧美啪啪网| 五月丁香婷婷综合网| 另类婷婷五月天啪帕帕| 99视频只有精品| 十二区无码| www.lingjunshare.com| 伊人玖玖网| 欧美中文五月天| 婷婷激情综合色五月久久91| 婷婷丁香五月天亚洲| 少妇人妻丰满做爰XXX| 亚洲 激情 中文| 日日夜夜天天| www.婷婷网| 少妇被躁爽到高潮无码文| 99热在线免费观看精品| 婷婷六月成人| 亚洲在线操| 91尤物九色在线| a在线观看| 久久激情五月| 182.t午在线观看| 天天爽,夜夜爽| 视频一二区| 中文字幕成人| 五月天综合婷婷| 成人网站av免费网站推荐| 色九亚洲| 日逼免费视频| 97色婷婷成人综合在线观看| 97超级碰| 色色网站在线| 欧美日韩AAAA| 色色亚洲无码| 久久久27操| AV操操操| 久久欧洲综合网| 久久婷视频| 99re热视频这里只精品| 婷婷婷婷色| 9999久久久久| 国产亚洲色婷婷久久99精品9j| 色伊人婷婷| 5月婷婷视频网站综合| 蜜臀久久99精品久久久久久酒店| 99热在线观看| 五月丁香六月激情综合欧美| 丁香花五月天激情| 亚洲国产色婷婷| 99久久综合| 亚洲性爱日韩无码| 人人人操Av| 婷婷94s| 日韩成人精品中文字幕| 天天五月天综合网址| 日本超碰在线| 久久久久久久久99精品| 大香蕉婷婷婷| 精品少妇人妻AV无码专区偷人| 婷婷五月天激情免费在线观看| 久久之人妻| 精品九九久久| 欧美成人猛片AAAAAAA| 婷婷五月六月丁香| 青草激情综合| 丁香五月婷婷激情蜜桃| 五月婷在线视频免费播放| 久久多色| 99视频九九热| 国产免费av在线| 校花娇喘呻吟校长陈若雪视频| 久久九精品| 密桃激情五月天综合网| 五月花亭亭| 开心亚洲久久开心| 精品一二三区视频立| 91热视频色网站| 秋霞九九无码| 91猫咪国产在线播放| 精品人妻伦一二三区久久| 久久九九国产精品怡红院| 五月丁香五月天现场视频| 五月天开心激情网色欲无码| 亚洲一个色| 伊人激情综合网| www.五月婷| 天堂在线伊久| 亚洲99一级无嗎特制在线| 精品一区二区三区免费毛片爱| 婷婷丁香97| 欧美色五月| 丁香婷婷成人在线播放| 色色网五月激情| 五月丁香成人版| 欧美日本综合网| 色色色国产| 亚洲人妻Av| 久碰综合| 情色五月天网站| 人人性久久| 99九九视频精彩在线| 亚洲av| 天天日天天操心| 天天狠天天叉| 极品人妻VIDEOSSS人妻| 五月丁香综合色婷婷| 天天揷综合网| 日本欧美999久久久三级片| 久久综合五月天激情小说网站| 玖玖婷婷五月天| 噜噜噜久久| 五月天天爽| 美女五月天婷婷| 亚洲愉拍99热成人精品| 99久久99视频只有精品| 丁香五月天无码| www开心激情网| www.99成人视频| 婷婷婷婷婷开心无码播放| 六月丁香五月天| 色色a| 亚洲色婷婷| 另类图片天天影视在线观看| 欧美性色A片免费免费观看的| 亚洲精品白浆高清久久久久久| 51精品国自产在线| 亚洲综合在线网站| 天天色天天爽| 日本社区五月天激情| 开心婷婷丁香五月| 夜夜骑夜夜撸| 久久精品无码一区| 射久久丁香五月| 久久伊人婷婷| 五月婷六月天| 婷婷精品视频| 182tv992tv人之初午夜免费观看| 99在线69| 狠狠色噜噜| 色婷婷免费观看| 伊人99热| 色婷婷777狠狠| 91免费在线视频6| 天天综合社区| 91久久久久久| 99精品97| 亚洲九九在线| 激情第四色| 日本三级日本黄色| 激情宗合哪里能看| 天天色天天日天天舔| 永久精品| 99色精品| 99热这里只有精品最新| 五月婷婷综合在线| www.99精品视频| 深爱五月综合网| 玖玖资源站中文| 丁香五月电影| 伊人五月天97| 丁香六月五月婷婷| 亚洲字幕AV一区二区三区四区| 婷婷五月天首页激情| 天天玩夜夜操天天爽| 天天婷婷色六月| 五月婷婷丁香| 狠狠色综合网| 免费AV在线| AAA级久久久精品| 日韩啪啪视频| 伊人五月婷婷| 国产免费av在线| 久久性爱网站| 亚洲乱码日产精品BD在线观看| 新激情综合| 亚洲天堂AAA| 丁香婷婷五月综合色情| 欧美三级黄色片久久| 狠狠999| 另类视频在线| 99九九久久| 婷婷久久丁香| 天天综合91入口| 婷婷五月精品中文字幕| 国产精产国品一二三在观看| 婷婷五月天激情网址| 性视频久久| 青青久久91| 嫩草综合网| 99亚州综合精品成人网| 成人片在线免费看| 夜夜躁爽日| 亚洲三A| 色9色| 99热这里是精品| 六月丁香激情| 九九热re99re6在线精品| 丁香五月婷婷综合激情哟哟哟| 怕怕av| 天天日天天摸| 综合色五月| 六月婷婷在线| 国产性爱大片久久| 九九亚洲视频| 亚洲AV久久久久久久久久久久久久久久 | 99久在线精品99re8热| 五月丁香六月激情| 丁香婷婷少妇| 色99在线| 这里只有精品视频在线看| 天天射天天插天天干| 丁香六月亚洲| 97色五月婷婷在线| 亚洲综合热| 超级碰碰碰久久网站| 激情五月激情综合网一级丸片| 久热伊人| 婷婷精品综合| 五月天婷婷网站888| AA久久| 香蕉综合在线| 97caop| 91精品国产综合久久密臀| 天天色中文字幕女优AV| 日狠狠| 狼友超碰| 久久久18| 色欲一区二区三区精品A片| 91人妻九色大屁股| 五月天婷网| 日韩成人综合| 99无码| 日韩按摩二区| 激情亚洲五月| 大香蕉五月丁香| 久久99免费视屏| 成人片黄网站色大片免费毛片| 九九视频精品在线免费| 在线99精品| 婷婷激情综合| 激情五月婷婷开心网| 九色91视频| 色99色| 久热a| 极品少妇XXXX精品少妇偷拍| 久久这里只有精品99| 99九九热视频| 96精品成人无码A片观看金桔| 国产另类综合| 综合在线网| www.久久99精品| 99热偷拍| 国产午夜精品久久久观看| 97婷婷丁香| 日韩免费视频| 九九久久五月天| 五月婷综合性中心| 丁香五月婷婷狠狠色| 国产探花一片区| 五月丁香六月婷婷玖玖| 壅壅儕家a| 超碰色色综合| 五月婷婷开心丁香| 五月天激情网图片| www.日本91| 久久资源综合| 26uuuavcom| 亚洲激情网| JAPANRCEP老熟妇乱子伦视频| 综合激情五月丁香| 99热狠狠操| 欧美丁香五月| 日韩人妻AV在线| 激情宗合 激情宗合| 爆乳熟妇一区二区三区爆乳| 五月丁香婷中文| 亚洲色色色| 乱色色色| 米奇影视资源婷婷狠狠色激情欧美五月丁香 | 亚洲爆乳无码精品AAA片蜜桃| 五月丁香婷婷免费视频| 99久久a线观| 99re在线精品视频| 97超碰欧美中文字幕| 人妻丰满精品一区二区A片| 成人版视频在线观看| 亚洲九九99精品视频在线播放| 熟女激情网| 国产67194| 99九九热在线观看| 男人的天堂五月丁香| 五月天伊人日日噜影片AV| 99综合网| 婷婷综合激情| 亚洲操逼网| 大伊香蕉玖玖爱| 热99.com婷婷| 99九九精品视频推荐| 亚洲精品视频在线播放| 久色激情| 中文字幕在线观看视频www| 久久婷婷国产| 婷婷的99视频网站| 人妻AV在线观看| 激情综合网五月| 5月丁香六月婷婷| 五月激激网w'w'w| 99色这里| 99久久66| 五月激情另类| 丁香五月婷婷丫| 99这里只有精品国产| 成人中文字幕在线| 久久综合中文| 俺也去婷婷五月天第五色| 伊人久久婷| 九色视频91| 操人无码| 日本在线视频手机播放五月婷| 这里只有精品视频视频在线观看| 五月丁香婷婷AV天堂| WWW.天天日| 丁香午月AV中文字幕| 丁香亭亭久久| 五月天激情网页| 五月婷婷综合久久| 五月婷婷综合久久| 任你艹| 9l视频自拍9l九色成人| 六月伊人婷婷| 五月亭亭激情综合| 免费不卡狠操美女视频网 | caop在线| 色五月琪琪| 99久在线精品99re8| 色色综合网站| 91在线资源| 九月丁香八月婷婷久久综合久97| 人妻精品在线| 2023天天日夜夜爽| 深爱五月激情| 色激情五月天| www.9色色色| 色婷婷久久综| 婷婷五月色影视先锋| 日日舔夜夜操| 99视频网址| 五月婷婷婷| 欧美三级巜人妻互换| www.婷婷五月.com| 亭亭五月丁香综合欧美| 精品皮股午夜AV| 99热| 91丁香综合| 欧美三级韩国三级日本三斤| 色色免费网站| 亚洲丁香五月| www.五月丁香| 91碰九色| 天天干天天日日| 五月丁香婷婷综合网| 一起草av| 激情淫乱男女| 亚洲激情电影五月天色婷婷丁香一起草| 婷婷五月色網站| 色婷婷综合网站| 极品人妻videosss人妻| 久久xxxx| 婷婷性爱综合| 五月天久久www| 欧美99热| 天天色综| 就爱射中文字幕资源网| 99精品免费| 热婷婷久| 国精产品久久| 免费做A爰片77777| 婷婷精品视频| 色婷婷狠狠| 97超碰人人操| 色婷婷四色| 日韩婷婷五月天| 超碰人人艹| 久9热在线免费观看| 噜综合| 亚洲网站999| 国产精品人成A片一区二区| 六月激情婷婷综合| 色吧五月婷婷| 国产婷婷色综合AV蜜臀AV| 激情爱爱网站超大免费| 日日肏天天操| 日本欧美成人片AAAA| 五月婷成人| 99热在线这里| 国产成人精品一区二区三区视频| 性爱网久久| 国产亚洲精品久久一区二区三区| 国产午夜精品AV一区二区麻豆| 欧日韩成人| 深爱激情AV| 色婷婷电影| 亚洲综合九九| 夜夜骑夜夜撸| 五月丁香自拍| 97久久精品| 国产AV不卡福利| 六月激情婷婷| 丁香婷婷婷五月综合色情| 五月婷婷开心丁香| 丁香五月婷婷激情蜜桃| 天天天天爽爽天干| ady狠狠入| 亚洲色婷婷视频| 色婷婷狠狠禁18久久| 六月天六月婷| 99九九99九九九视频精品| 思思精品久久艹| 99热都是精品| 色婷婷视频| 蜜桃人妻无码AV天堂三区 | 97色97干| 91碰碰视频| 婷婷欧美综合| 夜夜躁狠狠| 乱岳熟女50岁| 婷婷五点亚洲| 丁香婷婷影院| 色婷婷电影网| 丁香五月综合| 国产亚洲精品久久久久久郑州| 夜夜涩涩涩| 中国女人做爰A片| 五月激情网综合| 久草丁香婷婷1024| 天天日天天干天天操| 色九亚洲| 极品人妻VIDEOSSS人妻| 久久人妻www| 欧美超级视频97| 色婷五月| 热这里| 无码色综合| 精品色色网| www久久久久久久久久久| 日韩精品二三区| www.综合久久.com| 99精品偷自拍| 色色色图| 婷婷免费精品视频| 久超免费视频| 久热九九| 九九熱最新視頻| 亚洲三A| 激情五月婷婷综合| 婷婷五月亚洲激情| 91干在线视频| 啪啪啪大香蕉| 日本色爽| 伊人国产婷婷五月天 | 天天插,天天射| 超碰女人天堂| 91操黄| 精品激情| 99免费热视频| 欧美天天五月丁香免费观看| 黄桃AV无码免费一区二区三区| 人人视频色| 久久久18| 丁香激情五月天| 亚洲操操操| 日日噜狠狠色| 婷婷色香六月综合激情| 偷拍91九色| 荫道BBWBBB高潮潮喷| 男女免费视频999| 五月天婷婷伊人 | 亚洲欧美成人在线| 人与禽A片啪啪| 久久婷婷五月天蜜桃| 激情婷婷丁香五月天| 四川BBB搡BBB爽爽视频| 成久综合视频| 中文字幕人妻一区二区| 久久伊人婷婷| 操熟女成人网| 丁香五月婷婷天堂大香蕉| 天天色综网| 中文字幕丁香五月| 99热这里只有99| 亚洲色五月婷婷| 91精品国产综合久久久不卡电影| 99在线精品免费视频| 裸体美女丁香五月天。| 天天干天天色天天干| 99免费热在线精品| 99热偷拍| 五月丁香91| 久操人| 色五月激情五月| 九九视频在线| 色五月人妻| 久久婷婷色色| 亚洲欧美999| 激情婷婷丁香色情五月天| 九九热这里只有精品23| 日本熟妇精品99| 大香蕉九九热| 久久婷网| 亚洲视频国产一区| 婷婷激情五月天激情小说| 北条麻妃九九九国产精品视频| 狠狠爱综合网| 俺去也婷婷| 91热久久| 婷婷狠狠操| 六月天六月婷| 亚洲AV日韩无码| www色哟哟| 99久久婷婷国产综合亚洲| 久草婷婷网 | 色婷婷婷婷| 97ai婷婷| 99re免费在线视频| 婷婷五月天你懂的| 色天堂97| 噜噜噜狠狠色综| 欧美天天草人人草| 天天综合亚洲综合网天天αⅴ| 99热最新地址在线| 亚洲激情高潮| 亚洲成人乱码av网站| 五月天激情社区| 5月婷婷激情在线| 日韩在线观看亚洲| 午夜婷婷| 色婷婷AAA| 激情综合久久| 啪啪婷婷五月天激情| 99欧美| 欧美内射AA| 九九色婷婷| 日日干四虎| 丝袜大香蕉| 国产看真人毛片爱做A片| 九久久婷婷| 2021日韩无码| 亚洲六月色| 天堂爱啪啪| 丁香五月天天哦| 天天操天天谢| 六月丁香好婷婷| 婷婷八月丁香激情综合| 99精品在线观看| 日韩久久成人| 99久久99视频| 2023天天日夜夜爽| 五月婷婷丁香网| 国产激情视频在线观看| 女人被躁到高潮嗷嗷叫小| 丁香久久激情俄| 日本色道视频网站| 亚洲丁香网| 色综合久久88色综合天天看| 亚洲精品无码一区二区| 欧美啪啪五月天| 色五月xxx| 四月婷婷丁香| 情趣视频66| 六月激情网| 99视频内射三四| 激情色情五月天| 成人在线99| 丁香五月婷婷激情中文| 综合色久| 色色色色网站| 欧洲MV日韩MV国产| 99色中文| 五月天天爽| 九九激情网| 日本123区日韩欧美不卡在线看| 人人草成人视频| 五月婷婷五月| 五月综合激情啪啪啪啪啪| 国产在线黄色| 亚洲色网络| 婷婷伊人久久| 第1影院之五月婷婷| 天天天操天天天爰| 97人人看| 日本在线视频看se99| 插插插色综合网| 五月丁香成人| 五月婷色丁香| 久久草婷婷丁香网站| 91欧美| 九九九九九九热| 丁香亭亭久久| 美欧成人视频| 嫩草视频。| 五月情婷婷五月| 九九色图| 色综合天堂| 五月六月激情婷婷| 开心激情婷婷| 天天综合天综合久久网| 五月天婷婷黄色视频| 久9热视频| 99热久久日本| 五月天涩涩| 熟妇国产| 欧美va欧美va差| 久久视频在线视频| 深爱激情网五月| 国产无套精品一区二区| 99热国内精品| 日韩成人AV在线播放| 秋霞少妇毛片| 五月的色婷婷高潮| 久久九九一區| 成人精品亚洲性爱| 一区操| 久久A V无码视频| 啪啪日本欧美| 大香蕉娱乐| 激情五月天激情综合网| 91操女| 五月开心激情| 色色影院黄大片| 日本狠狠色| 婷婷婷久久久| 久久综合五月天| www色色com| 婷婷五月天电影网| 激情婷婷内射| 九九九激情综合| 五月天色在线| 久久38视频| 色99在线观看| 九九九色综合| 开心五月天激情网| 天天成人综合视频| 日笨久久网| 天天干天天爽| 婷婷五月天色色| 激情九月婷婷| 狠狠干伊人| 婷婷综合在线视频| 五月丁香亭亭操逼| 丁香五月六月久久综合 | 啪啪黄页网| 久久9久| 99激情视频热| 久9热视频在线| 国产成人99久久亚洲综合精品| 五月天偷拍| 色婷婷狠狠爱| 国产SUV精品一区二区883| 亚洲色综久久五月| 蜜桃婷婷狠狠久久综合| 91九色国产| 操逼福利视频| www.com色播五月天| 九九热黄色| 久久婷婷五月综合激情国产| 999精品久久久久久久| 中文字幕在线免费| 久久久久久草黄色片AV在线观看| 丁香色婷婷色手机免费在线| 色五月欧美| 亚洲综合网区| 综合九色| 99精品无码| 日韩精品二三区| 日本99视频精品免费播放| 婷婷色情网| 婷婷久久五月| 嫩草视频。| 99精品综合视频| 79色色色色| 大香蕉久久| 9 9热这里有精品| 五月丁香六月激情| 思思热AV| 久一这里有精品国产| 五月丁香中文婷婷中文| 日日操天天操| 99成人免费热视频| 人妻自慰在线| 五月婷婷|欧美| 成人AV在线中文版| 亚洲啪啪啪啪| 毛片毛片毛片毛片| 丁香五月天偷拍| 综合玖玖偷拍| 五月天丁香久久综合| 热九九精品| 国产午夜一区二区三区| 丁香婷婷偷拍| 99激情网| www久久久久| 亚洲视频一区| 91成人性爱视频| 五月婷在线| 天天情色五月天| 亚洲中文丁香| 成人版视频在线观看| 91精品刘玥| 婷婷色色五月| 久久婷婷影院| Www.狠狠| 天天日婷婷| 99丁香五月婷 | 丁香花色色网| www.五月丁香| 丁香五月婷婷少妇| 超碰在线观看三级片| 夜夜撸日日操| 久久这里只精品| 五月网在线| 99精品视频在线| 婷婷五月天成人娱乐| 日本高清久| 小泽玛利亚视频一区二区| 五月婷婷香蕉| 婷婷色影音天| 双性美人被调教到喷水A片| 玖玖精品视频| 色色网站在线| 亚洲第一第二网站| 九九Av| 久久婷婷五月天懂色| 婷婷激情九月| 五月婷成人网| 成人五月天丁香| 丁香五月激情棕合| 操逼毛片国语对白| 色玖玖导航| 另类A片| 久久久久久久97| 五月婷婷六月天| 婷婷六月激情| 开心五月婷婷激情| 五月天婷婷激情网| 久久精品63| 久久婷婷网| 粉嫩av懂色av蜜臀av熟妇| 久久性刺激| 97资源碰碰| 九九九这里只有精品| 日本一级黄色电影| 五月婷婷 欧美| 色色综合日韩| 六月婷婷狠狠色在线观看| 五月丁香六月婷婷综合免| 五月天婷婷在线啪啪视频| 内射丰满人妻| 另类综合婷婷五月天欧美视频| 五月天全国最大成人网| 色五月婷婷少妇人妻| 婷婷成人丁香色情基地30 | 婷婷丁香五月综合| 99亚洲天堂| 天久综合91综合首页| 精品久久久人妻| 大陆极品少妇内射AAAAAA| 2018夜夜草| 丁香综合久久| 久久久网站| 丁香五月天婷婷久久综合| www,五月天激情| pacopacomama 070722_670 素人奥様初撮りドキュメント 103 大久保純子 | 狠狠狠狠狠| 91操人视频| 国产乱妇乱子在线播视频播放网站| 婷婷五月丁香综合亚洲| 丁香五婷| 视频综合网| 激情婷婷丁香色五月| 色婷婷亚洲婷婷在线观看| av中文在线| 1024国产在线| 97热精品| 天天射射夜| 五月婷婷六月激情| 伊人久久婷婷| 婷婷六月激情综合| 老师把我爽高潮了免费A片| 中文字幕丰满人妻无码专区| 五月丁香婷婷综合久久| 亚洲五月天综合| 综合99视频| 五月丁香免费看| 97luluse| 久热婷婷| 日韩久热| 激情开心五月天| 97影院一级片| 久久九色| 在线看片av| 玩熟女五十AV一二三区| 91久久九久久九久久九久久九久久 | 182无码| 五月丁香综合激情| 丁香五月最新地址| 色婷婷六月天在线| 一本色道久久88综合日韩精品| 色婷五月天| 青青999| 91丁香五月| 日韩 中文 欧美| 亚洲日韩乱码一区二区三区四区 | 综合久久婷婷99| 五月丁香婷婷婷激情爱爱| 五月天激情小说| 4438亚洲欧美| 蜜乳中文字| 亚洲色综合| 久久婷婷五月天激情新地址| 99看片| 婷婷激情伍月网| 强壮的公次次弄得我高潮A片日本 | 蜜桃五月天| 伊人久久艹| 亚洲天堂色| 成片免费播放| 五月天激情美女久久| 综合另类视频| 久久久91精品| 97色碰| 天天日,天天射,天天舔| 五月色婷婷影院| 五月婷婷丁香| 99ri视频在线播放| 精品人妻久久久久久久| 啪啪婷婷五月天激情| 男人操女人高潮91视频| www999日韩精品| 亚洲精品乱码久久久久久按摩观| 色9999综合久久| 五月丁香六月激情综合| 五月丁香黄色| 亚洲国产精品成人免费一区久久久在线观看AAAA | 亚洲电影中文字幕| 9久热在线视频精品| 婷婷丁香五月天色区| www,色婷婷| 久久99草五月婷婷| 六月色婷婷| 久久99激情| 婷婷六月五月天综合| 色之综合网| 五月天伊人综合| 婷婷五月另类网站| 国产精自产拍久久久久久蜜| 九月婷婷色色| 九九成人电影婷婷| 精品人妻伦一二三区久久| 五月天婷婷丁香| 久久人妻高清中文| se色99| 在线成人网站| 金品在线视频99| 亚洲AV成人精品网站在线播放| 婷婷五月天av| 五月之婷婷| 亚洲激情高潮| 欧美色五月| 久久9热| 色五月婷婷天堂| 香蕉久操| 美国少妇性做爰| 激情小说五月天| 激情六月丁香| 日韩黄色电影| 精品久久久久久久人妻| 激情五月天色网站| 九九色大香蕉| 成人AV综合在线| 99色人| 韩国中文字幕91| 丁香婷婷综合激情五月色| 天天天天天天操| 99ri国产| 成人精品亚洲性爱| 97五月天婷婷| 丁香九月婷婷色| 激情五月六月丁香| 日日婷婷不卡| 久色姿源| 婷婷五月激情丁香激情| 丁香五月在线视频| 激情六月丁香综合| 欧美人人操| 天天色天天射天天日| 丁香久久综合| 九色七七| 五月婷婷偷拍| 五月婷婷天堂| 大香蕉婷婷五月| 丁香狠狠色婷婷| 色九月婷婷丁香| 五月婷婷深深爱| 全高清无码视頻| www.精品99| 99re免费精品视频| 色五月丁香五月| 26uuu欧美日韩| www.av视频xx999.com| 色色网站观看| 日韩精品99久久| 婷婷五月天毛片| 激情五月婷婷五月| 日韩综合久久| 久久人妻精品| 大香蕉99| av中文在线| 播播网色播播| 欧美性色A片免费免费观看的| 99热在线看| 五月婷婷综合在线| 熟女人妻视频| 精品亚洲国产成AV人片传媒| 日本eVa一区=区视频| 精品久9| 91精品国产色猫| 99色在线观看视频| 激情综合网五月婷婷| 狠狠做六月爱婷婷综合aⅴ| 亚洲婷婷开心五月| 天天爽天天爽夜夜爽| 狠狠狠狠狠狠狠狠狠狠狠色宗合图片| 五月婷综合性中心| 欧美五月丁香在线观看| 这里只有精品9| 欧美成人va| 精品人妻伦一二三区久| 色色99| 伊人超碰在线| 91狠狠色色丁香婷婷综合久久| 久久精彩综合视频| 天天爽夜夜爽夜夜爽精品| 五月天色五月天| 91婷婷五月天嫩女| 97干在线视频| 日韩无码专区| 丁香花成人区| 热99精品视频五月| 五月丁香色婷婷婷基地| 五月婷婷激情中心| 六月婷婷激情| 亚洲操操操| 日本三级第一页| 丁香五月婷婷婷桃花影院| 五月丁香六月婷| www.十八禁不禁AV.com| www.minyis.com【JT】实力收量可预付QQ2101460746 | A在线观看| 九九人妻福利| 色5月婷婷| 五月丁香六月在线| 天天玩夜夜操| 91呦呦呦| 99热老网站| 日逼免费视频| 亚洲黄色精品| 熟女人妻一区二区三区免费看| 婷婷丁香黄色| 亚洲婷婷丁香五月在线| 婷婷开心激情五月激情网| 五月天久久综合婷婷| 日韩成人电影AV| 99在线综合视频| 成人短视频在线| 国产日日操夜夜操的肉棒视频| 六月天婷婷| AV九九| 色婷综合| 99色最新在线视频| 婷婷五月色播| 免费无码毛片一区二区A片 | 99re在线免费视频| 天天看片日日夜夜| 激情丁香五月婷婷| 国产精品涩涩涩视频网站| 超碰色婷婷| 五月婷婷在线播放| 久久精品A片777777| 色婷婷伊人| 99精品性爱| 97人人干视频| 色很很96| 天堂色婷婷| 九九精品系列| 久久五月天激情视频| 天天干天天操天天爽| 久久婷网| 国产精品VA在线| 亚洲午夜成人av电影网| 天天日天天狠狠操| 五月婷婷丁香综合| 色色网91| 天天做天天爱天天玩夜夜爽| 亚洲欧洲中文日韩久久AV乱码| 97人人搞| 狠狠狠狠狠狠| bukadeavzaixian| 99热综合在线观看| 欧美性丁香色色五月天干干| AA片在线观看视频在线播放| 玖玖综合网| 深情五月天| 五月成人综合| 99久久五月丁香野外| 五月天丁香网站| 超级碰 久久9| 99久久a线观| 国自产拍偷拍精品啪啪一区二区| 午夜日韩久久久网站| 久8色色| 国产在线aaa片一区二区99| 成人亚洲精品| 激情婷婷丁香| 婷婷五月天性爱视频| 久噜久噜| 麻豆AV一区二区三区| 五月婷婷深深爱| 天天插天天干天天舔| 色99在线| 婷婷欧美偷拍综合| 99综合| 成人短视频在线免费观看| 久草婷婷网| 狠狠 婷婷| 亚洲色婷婷五月天| 久久综合激情| 国产67194| 亚洲日比视频| 天天做天天爱天天爽夜夜揉| 人人操日| 婷婷久热| 九九色综合九九色| 亚洲色色色色色色色色色| 9|无码久久久久久| 欧美VA视频| 人人人舔人人人操人人人摸人人人97| 艹B高清无码| 26uuu91| 婷婷五月天激情在线| 96自拍视频九色在线观看| 成人 九九九九| 亚洲看av的网站| 丰满少妇猛烈A片免费看观看| 五月天伊人日日噜影片AV| 五月婷婷碰碰| 丁香婷婷月| 操97免费超级视频| 俺去也五月天婷婷| 婷色人人狠| 丁香六月婷婷综合| 五月花婷婷在线精品视频| 午夜天堂一区人妻| 激情五月四色| 色色色天堂网| 狼人狠狠操| 婷婷五月综合婷婷| 国产激情久久| 这里只有精品视频看看| 另类图片五月天婷婷| 婷婷97碰碰| 婷婷和五月天| 免费无码毛片一区二区A片| 99热在线这里| 97碰| 大香蕉综合在线| 五月天激情无码高清| 超碰国产AV| 久久婷婷婷| 婷婷国产综合| 婷婷五月激情基地| 国产婷婷综合| 激情网第九色| 天天色2017| 欧美五月婷婷| 天天综合五月| 丁香婷婷综合色五月激情国产基地| 婷婷色在线视频| 欧日韩AV| 色久一| 日本三级日本三级99| 天天干,噜噜色,狠狠色| 密视AV综合在线| 色情婷婷五月天| 99re这里有精品手机在线| 综合激情肏逼网| 极品少妇XXXX精品少妇偷拍| 丁香五月婷婷色偷偷| 丁香久久五月婷综合| 中文字幕精品无码一区二区| 色色com| 丁香成人五月天| 91色欲综合|