免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

分布式會(huì)話共享方案:Redis+Spring Session實(shí)戰(zhàn)解析

分布式會(huì)話共享方案:Redis+Spring Session實(shí)戰(zhàn)解析 說實(shí)話寫這篇東西的起因很直接我接手過一個(gè)訪問量正在往上走的項(xiàng)目系統(tǒng)之前一直是單機(jī)部署內(nèi)網(wǎng)壓測(cè)、外網(wǎng)訪問都挺正??梢坏┌褢?yīng)用從1個(gè)實(shí)例擴(kuò)到3個(gè)實(shí)例線上立刻出問題。用戶前一個(gè)請(qǐng)求還在正常操作下一個(gè)請(qǐng)求回來就被引導(dǎo)去重新登錄客服那邊一天能收到幾十條“為什么老讓我重新登錄”的反饋。我排查了整整兩天中間試過調(diào)負(fù)載均衡策略、改Tomcat配置效果都不徹底最后拍板換成了標(biāo)題里這套組合Redis Spring Session。這不是網(wǎng)上常說的“臨時(shí)繞過”而是把Session的存儲(chǔ)位置從根本上搬到了應(yīng)用之外讓每一個(gè)實(shí)例都變成無狀態(tài)節(jié)點(diǎn)。如果你正在做微服務(wù)拆分、多實(shí)例部署或者只是單純想把單機(jī)應(yīng)用水平擴(kuò)容這套思路應(yīng)該能給你一個(gè)比較徹底、能直接落地的解決路徑。下面我把整個(gè)問題的來龍去脈、原理、實(shí)操步驟和上線后踩過的坑都梳理一遍內(nèi)容會(huì)偏“實(shí)戰(zhàn)記錄”風(fēng)格你可以邊看邊在本地復(fù)現(xiàn)。1. 單機(jī)Session的局限性多實(shí)例部署后為什么用戶被瘋狂踢下線1.1 一個(gè)真實(shí)故障輪詢策略導(dǎo)致用戶批量掉線先說當(dāng)時(shí)的現(xiàn)象。系統(tǒng)從單機(jī)擴(kuò)到3個(gè)實(shí)例前面掛了負(fù)載均衡策略是最常用的“輪詢”。邏輯上沒什么問題3臺(tái)機(jī)器平均分擔(dān)流量哪臺(tái)都能處理請(qǐng)求。結(jié)果用戶一登錄請(qǐng)求被分到實(shí)例A登錄成功JSESSIONID寫進(jìn)瀏覽器Cookie刷新頁(yè)面后下一個(gè)請(qǐng)求被輪詢到實(shí)例B實(shí)例B在自己的本地內(nèi)存里根本找不到這個(gè)Session于是判定用戶未登錄直接重定向到登錄頁(yè)。最迷惑人的是這個(gè)問題不是100%必現(xiàn)。同一個(gè)用戶點(diǎn)幾次有時(shí)能保持登錄有時(shí)被踢出來完全取決于當(dāng)前請(qǐng)求被分發(fā)到哪臺(tái)機(jī)器。我在本地復(fù)現(xiàn)的時(shí)候開著開發(fā)者工具看Network面板清一色的302跳轉(zhuǎn)Cookie明明沒丟服務(wù)器就是不認(rèn)。后來往日志里加了節(jié)點(diǎn)信息才發(fā)現(xiàn)所有“登錄無效”的請(qǐng)求都落在非登錄節(jié)點(diǎn)上。到這一步問題的定位已經(jīng)很明確HttpSession默認(rèn)只存在于單個(gè)JVM進(jìn)程內(nèi)實(shí)例之間互相不知道對(duì)方手里的Session。1.2 理解HttpSession的“本地宿命”狀態(tài)為什么只在單個(gè)實(shí)例里Java Web開發(fā)里HttpSession的默認(rèn)實(shí)現(xiàn)類是存在應(yīng)用服務(wù)器內(nèi)存里的也就是Tomcat、Jetty這類容器的JVM堆。當(dāng)你在代碼里執(zhí)行request.getSession().setAttribute(user, user)底層就是在當(dāng)前實(shí)例的堆內(nèi)存里維護(hù)一個(gè)Map結(jié)構(gòu)key是Session IDvalue是屬性集合。這個(gè)Map的生命周期被死死綁定在單個(gè)JVM上。單機(jī)部署時(shí)沒有問題因?yàn)樗姓?qǐng)求都打到同一個(gè)JVMSession數(shù)據(jù)天然可見。但一旦拆成多個(gè)實(shí)例每個(gè)實(shí)例都有自己獨(dú)立的內(nèi)存A實(shí)例保存的Session對(duì)B實(shí)例來說就是“不存在的數(shù)據(jù)”。負(fù)載均衡把請(qǐng)求撒到不同實(shí)例上時(shí)用戶會(huì)話自然就“丟”了。本質(zhì)是會(huì)話狀態(tài)Session State和計(jì)算節(jié)點(diǎn)Application Instance被綁死在一起橫向擴(kuò)容時(shí)狀態(tài)沒有跟著擴(kuò)容。1.3 ip_hash和Session復(fù)制為什么只是“緩解”而不是“修復(fù)”我第一反應(yīng)是改負(fù)載均衡策略把輪詢改成ip_hash讓同一IP的請(qǐng)求固定打到同一臺(tái)實(shí)例。這個(gè)方案在內(nèi)部辦公網(wǎng)絡(luò)環(huán)境下驗(yàn)證是有效的但放到公網(wǎng)環(huán)境就露餡了。移動(dòng)網(wǎng)絡(luò)下用戶經(jīng)常切換基站出口IP會(huì)變化公司、家庭、4G/5G網(wǎng)絡(luò)來回切換時(shí)IP也不固定還有一些代理和NAT場(chǎng)景同一個(gè)用戶每次請(qǐng)求的源IP根本不是同一個(gè)。IP一變化ip_hash就把請(qǐng)求分到另一臺(tái)實(shí)例用戶一樣被踢。更麻煩的是即使IP一直穩(wěn)定如果某臺(tái)實(shí)例要做滾動(dòng)發(fā)布或重啟固定在這臺(tái)實(shí)例上的所有在線用戶會(huì)在重啟期間集體掉線。ip_hash本質(zhì)上是在“請(qǐng)求入口”層面想辦法把用戶留在同一個(gè)節(jié)點(diǎn)上它沒有解決“Session狀態(tài)不共享”的根因只是降低了狀態(tài)串臺(tái)的概率。我也看過Session復(fù)制方案。Tomcat支持把Session變更廣播到集群中的其他節(jié)點(diǎn)這樣每個(gè)實(shí)例都復(fù)制一份全量Session。但復(fù)制帶來的問題同樣明顯隨著在線用戶增多集群內(nèi)需要同步的數(shù)據(jù)量成倍增長(zhǎng)廣播風(fēng)暴、網(wǎng)絡(luò)開銷、延遲抖動(dòng)很快會(huì)出現(xiàn)。而且這個(gè)方案強(qiáng)依賴具體應(yīng)用服務(wù)器廠商的實(shí)現(xiàn)換容器、換云平臺(tái)時(shí)兼容成本很高。Session復(fù)制把狀態(tài)從一個(gè)節(jié)點(diǎn)復(fù)制到所有節(jié)點(diǎn)本質(zhì)上還是在“單機(jī)Session”的框架里打轉(zhuǎn)治標(biāo)不治本。2. Redis Spring Session的組合原理這為什么算“最終方案”2.1 Spring Session接管了Session的生命周期而不是存?zhèn)€key那么簡(jiǎn)單要理解為什么這套組合能解決問題先搞清楚Spring Session干了什么。Spring Session不是一個(gè)簡(jiǎn)單的“Session工具類”它的核心是通過一個(gè)Servlet過濾器——SessionRepositoryFilter——把應(yīng)用原本使用的HttpSession實(shí)現(xiàn)整個(gè)替換掉。具體流程是這樣的請(qǐng)求進(jìn)入Servlet容器后SessionRepositoryFilter會(huì)先把原始的HttpServletRequest包裝成一個(gè)SessionRepositoryRequestWrapper。當(dāng)你調(diào)用request.getSession()時(shí)它不再?gòu)娜萜鞅镜氐腟essionManager里拿對(duì)象而是從Spring Session配置好的SessionRepository里去取。這個(gè)SessionRepository可以是基于Redis、JDBC、MongoDB等任意持久化存儲(chǔ)實(shí)現(xiàn)我們這里用的是RedisSessionRepository。整套機(jī)制對(duì)外暴露的接口仍然是標(biāo)準(zhǔn)的HttpSession所以業(yè)務(wù)代碼基本不用改動(dòng)以前怎么用session.setAttribute()現(xiàn)在還是怎么用。Spring Session在背后幫你完成了Session的創(chuàng)建、讀取、寫入、過期刪除并且把數(shù)據(jù)序列化后存到Redis。這里有一個(gè)關(guān)鍵點(diǎn)Session的狀態(tài)不再存放在應(yīng)用實(shí)例的本地內(nèi)存而是被抽離到一個(gè)獨(dú)立的、所有實(shí)例都能訪問的存儲(chǔ)層。2.2 Redis里到底存了哪些key一個(gè)登錄用戶的數(shù)據(jù)結(jié)構(gòu)長(zhǎng)什么樣光說“把Session存到Redis”有點(diǎn)抽象看完Redis里的實(shí)際數(shù)據(jù)結(jié)構(gòu)你會(huì)有更直觀的理解。Spring Session在Redis中主要維護(hù)以下幾類key。第一類是主數(shù)據(jù)key默認(rèn)前綴是spring:session:sessions:sessionId類型是Hash。這個(gè)Hash里存了Session的創(chuàng)建時(shí)間、最后訪問時(shí)間、最大不活躍間隔、以及你通過setAttribute寫入的每一個(gè)業(yè)務(wù)屬性。比如你用session.setAttribute(loginUser, userInfo)Redis里就會(huì)多出一個(gè)fieldfield名是sessionAttr:loginUservalue是序列化之后的用戶信息。第二類是過期索引key格式是spring:session:expirations:timestamp類型是Set。這里面保存了一批即將在指定時(shí)間點(diǎn)過期的Session ID供后臺(tái)任務(wù)定點(diǎn)掃描使用。Spring Session并不是完全依賴Redis的key過期機(jī)制來清理Session因?yàn)镽edis key過期事件并不可靠可能丟失、可能延遲。它的策略是每個(gè)被訪問的Session都會(huì)刷新自己的最后訪問時(shí)間同時(shí)由一個(gè)專門的維護(hù)任務(wù)在到達(dá)過期時(shí)間點(diǎn)時(shí)把還在集合里的Session ID找出來做顯式刪除。第三類是查詢索引key格式是spring:session:findByIndexName:索引名:索引值比如按用戶名建立索引之后可以快速查出某個(gè)用戶當(dāng)前對(duì)應(yīng)的Session列表。做強(qiáng)制下線、在線用戶列表這類功能時(shí)這個(gè)索引很有用。通過這幾種key的組合Spring Session把Session的讀寫、過期、查詢都安排得明明白白。Redis本身就是KV存儲(chǔ)Hash結(jié)構(gòu)天然適合存儲(chǔ)“屬性集合”這種數(shù)據(jù)形態(tài)TTL機(jī)制又和Session的過期時(shí)間能對(duì)應(yīng)上。選Redis的根本原因不是因?yàn)樗芫彺娑且驗(yàn)樗峁┝艘徽追植际江h(huán)境都能訪問的、帶超時(shí)能力的、結(jié)構(gòu)足夠靈活的數(shù)據(jù)存儲(chǔ)能力。2.3 這套組合帶來的三個(gè)直接收益收益是很直觀的。第一是實(shí)例徹底無狀態(tài)化。應(yīng)用節(jié)點(diǎn)不再持有用戶狀態(tài)新增機(jī)器、縮減機(jī)器、滾動(dòng)重啟對(duì)在線用戶沒有任何影響。用戶在某臺(tái)機(jī)器上登錄下一次請(qǐng)求被負(fù)載均衡分到另一臺(tái)機(jī)器依舊能從Redis里拿到同一個(gè)Session。擴(kuò)容從“有狀態(tài)擴(kuò)容”變成了“無狀態(tài)擴(kuò)容”技術(shù)上輕松了一個(gè)量級(jí)。第二是故障影響面大幅縮小。以前如果一臺(tái)實(shí)例宕機(jī)那臺(tái)機(jī)器上的所有在線用戶集體掉線?,F(xiàn)在實(shí)例宕機(jī)只要Redis集群還穩(wěn)著用戶根本感知不到后端少了一臺(tái)機(jī)器請(qǐng)求被自動(dòng)分發(fā)到其他健康實(shí)例Session照??捎?。第三是統(tǒng)一了會(huì)話管理能力。你可以通過Redis里的Session數(shù)據(jù)做全局的用戶登錄態(tài)清理比如后臺(tái)強(qiáng)制踢人下線、限制賬號(hào)同時(shí)在多端登錄、構(gòu)建實(shí)時(shí)在線用戶列表。這在單機(jī)Session時(shí)代幾乎不可想象但在多個(gè)微服務(wù)共享同一個(gè)Redis時(shí)這些功能實(shí)現(xiàn)起來非常順手。很多團(tuán)隊(duì)最后選這套方案不只是為了“解決掉線”而是為了把會(huì)話能力沉淀成一套基礎(chǔ)設(shè)施。3. 實(shí)操落地從依賴引入到雙實(shí)例驗(yàn)證3.1 依賴和版本選型Spring Boot 2.x/3.x別搞混直接給可用的依賴清單我用的是Maven。假設(shè)你的項(xiàng)目是標(biāo)準(zhǔn)的Spring Boot Web應(yīng)用需要引入三個(gè)starterdependency groupIdorg.springframework.boot/groupId artifactIdspring-boot-starter-web/artifactId /dependency dependency groupIdorg.springframework.boot/groupId artifactIdspring-boot-starter-data-redis/artifactId /dependency dependency groupIdorg.springframework.session/groupId artifactIdspring-session-data-redis/artifactId /dependency版本號(hào)我沒有手動(dòng)指定而是交給Spring Boot的依賴管理統(tǒng)一控制。這里要特別提醒spring-session-data-redis的版本必須和Spring Boot版本匹配最省心的做法就是讓Spring Boot BOM來管理它。自己?jiǎn)为?dú)指定版本很容易踩到API不兼容的坑尤其是Spring Boot 3.x和2.x之間包名、配置項(xiàng)差異很大。我這里本地驗(yàn)證用的是Spring Boot 2.7環(huán)境但下面的配置我會(huì)同時(shí)給出Spring Boot 3.x需要調(diào)整的地方。Spring Boot 3.x把Redis配置的前綴從spring.redis.*改成了spring.data.redis.*Session相關(guān)的配置不變。碰到3.x項(xiàng)目別慣性照著舊文檔抄否則配置項(xiàng)根本不會(huì)生效。3.2 關(guān)鍵配置Redis連接、Session存儲(chǔ)與命名空間配置文件是重頭戲。先說一個(gè)最容易出錯(cuò)的點(diǎn)Spring Boot 2.x和3.x的Redis連接配置前綴不一樣。Spring Boot 2.x的配置spring: redis: host: 127.0.0.1 port: 6379 password: abc123 database: 0 timeout: 3s lettuce: pool: max-active: 16 max-idle: 8 min-idle: 2 max-wait: 3sSpring Boot 3.x的配置spring: data: redis: host: 127.0.0.1 port: 6379 password: abc123 database: 0 timeout: 3s lettuce: pool: max-active: 16 max-idle: 8 min-idle: 2 max-wait: 3s兩段配置的內(nèi)容幾乎一樣唯獨(dú)嵌套層級(jí)從spring.redis變成了spring.data.redis。我用的是Lettuce客戶端“Lettuce連接池”需要單獨(dú)啟用spring.redis.lettuce.pool.*或3.x的spring.data.redis.lettuce.pool.*才會(huì)生效。如果不配連接池高并發(fā)下Lettuce很容易出現(xiàn)連接等待超時(shí)生產(chǎn)環(huán)境一定要配。Session本身的配置如下spring: session: store-type: redis timeout: 30m redis: namespace: demo-session flush-mode: on_save save-mode: on_set_attribute這里解釋幾個(gè)參數(shù)背后的含義。store-type: redis是明確告訴Spring Boot用Redis存儲(chǔ)Session不帶這個(gè)參數(shù)時(shí)Spring Boot可能會(huì)根據(jù)classpath自動(dòng)推斷但顯式寫出來更可控。timeout: 30m是Session最大不活躍間隔單位是m代表分鐘這個(gè)值最終會(huì)寫入Redis的TTL。生產(chǎn)環(huán)境要根據(jù)業(yè)務(wù)形態(tài)設(shè)置純管理后臺(tái)可以設(shè)短一點(diǎn)電商網(wǎng)站購(gòu)物車場(chǎng)景可能需要更長(zhǎng)。redis.namespace是給當(dāng)前應(yīng)用設(shè)置Redis key前綴如果多個(gè)應(yīng)用共用同一個(gè)Redis實(shí)例一定要設(shè)置不同的namespace否則不同應(yīng)用的Session數(shù)據(jù)會(huì)互相干擾。flush-mode: on_save表示Session每次請(qǐng)求處理結(jié)束時(shí)才把數(shù)據(jù)寫回Redis這是默認(rèn)模式。還有一個(gè)模式是immediate每次調(diào)用setAttribute時(shí)立刻寫Redis實(shí)時(shí)性高但性能差一般不建議生產(chǎn)環(huán)境使用。save-mode: on_set_attribute表示只要Session屬性發(fā)生變化就標(biāo)記為需要保存這是默認(rèn)行為通常不需要改動(dòng)。如果要通過Java配置類來開啟Redis Session存儲(chǔ)可以加上一個(gè)EnableRedisHttpSession注解Configuration EnableRedisHttpSession(maxInactiveIntervalInSeconds 1800) public class SessionConfig { }這個(gè)注解里可以配置最大不活躍間隔秒數(shù)和spring.session.timeout是等價(jià)的。我個(gè)人更推薦用配置文件來管理改參數(shù)時(shí)不用重新編譯打包。3.3 自定義Cookie序列化器Cookie名字、HttpOnly與SameSiteSpring Session默認(rèn)使用名為SESSION的Cookie來傳遞Session ID但很多老項(xiàng)目前端約定的是JSESSIONID。為了兼容業(yè)務(wù)系統(tǒng)通常要自定義一個(gè)CookieSerializerBean public CookieSerializer cookieSerializer() { DefaultCookieSerializer serializer new DefaultCookieSerializer(); serializer.setCookieName(JSESSIONID); serializer.setCookiePath(/); serializer.setUseHttpOnlyCookie(true); serializer.setSameSite(Lax); return serializer; }setCookiePath(/)要特別注意。如果項(xiàng)目部署在/api這類子路徑下Cookie path設(shè)置不對(duì)瀏覽器會(huì)在跨路徑請(qǐng)求時(shí)不再攜帶Cookie導(dǎo)致Session丟失。setUseHttpOnlyCookie(true)能防止JavaScript讀取Cookie降低XSS攻擊后的信息泄露風(fēng)險(xiǎn)。setSameSite(Lax)用于控制Cookie在跨站請(qǐng)求時(shí)的發(fā)送策略對(duì)前后端分離的部署方式影響很大。如果你的系統(tǒng)還有HTTPS環(huán)境可以開啟serializer.setUseSecureCookie(true)確保Cookie只通過HTTPS傳輸。3.4 雙實(shí)例聯(lián)調(diào)腳本證明Session真的共享了配置全部搞定后驗(yàn)證邏輯很簡(jiǎn)單本地起兩個(gè)應(yīng)用實(shí)例端口分別設(shè)為8081和8082然后在8081上登錄獲取Cookie再用這個(gè)Cookie去訪問8082的接口。如果8082能返回當(dāng)前登錄用戶的信息說明Session已經(jīng)成功共享。第一步先在一個(gè)終端啟動(dòng)第一個(gè)實(shí)例mvn spring-boot:run -Dspring-boot.run.arguments--server.port8081第二個(gè)終端啟動(dòng)第二個(gè)實(shí)例mvn spring-boot:run -Dspring-boot.run.arguments--server.port8082假設(shè)項(xiàng)目里有一個(gè)登錄接口/api/login和一個(gè)獲取當(dāng)前用戶的接口/api/user/info。用curl先登錄curl -i -X POST http://localhost:8081/api/login \ -H Content-Type: application/json \ -d {username:admin,password:123456}響應(yīng)頭里能看到Set-Cookie: JSESSIONIDxxxxx; Path/; HttpOnly。把這個(gè)Cookie值記下來再去請(qǐng)求8082的接口curl -i http://localhost:8082/api/user/info \ -H Cookie: JSESSIONIDxxxxx正常返回用戶信息就是驗(yàn)證通過。這時(shí)再去Redis里檢查一下redis-cli keys demo-session:* hgetall demo-session:sessions:xxxxx能看到Session屬性已經(jīng)落在Redis里而且8082實(shí)例讀取的底層數(shù)據(jù)源是同一個(gè)Redis。這套驗(yàn)證在本地大概10分鐘就能跑完比純看理論踏實(shí)得多。4. 生產(chǎn)環(huán)境下踩過的坑亂碼、覆蓋、網(wǎng)關(guān)和內(nèi)存4.1 序列化亂碼與JSON反序列化失敗看懂根因比替換配置更重要上線運(yùn)行不到一周我就發(fā)現(xiàn)一個(gè)隱蔽問題Redis里存的Session屬性值有一大堆看不懂的字節(jié)。直接用hgetall查看某個(gè)Session時(shí)field的值長(zhǎng)這樣\xac\xed\x00\x05t\x00\x03com...這種以\xac\xed開頭的亂碼是Java標(biāo)準(zhǔn)JDK序列化機(jī)制的產(chǎn)物。Spring Session默認(rèn)使用JDK自帶的序列化器把對(duì)象轉(zhuǎn)成二進(jìn)制字節(jié)后再塞進(jìn)Redis。它的問題有兩個(gè)一是不可讀排查問題時(shí)瞪大了眼也看不出里面存的是什么二是兼容性差如果對(duì)象類的結(jié)構(gòu)發(fā)生變化比如新增字段、刪除字段舊數(shù)據(jù)反序列化時(shí)直接拋InvalidClassException。解決辦法是替換Redis序列化器。Spring Session默認(rèn)從springSessionDefaultRedisSerializer這個(gè)Bean獲取序列化器所以我只需要覆蓋這個(gè)Bean即可Bean public RedisSerializerObject springSessionDefaultRedisSerializer() { return new GenericJackson2JsonRedisSerializer(); }注意這里必須叫springSessionDefaultRedisSerializer不是隨便定義個(gè)RedisTemplate的序列化器。很多人在這里踩坑配置了RedisTemplateString,Object的序列化方式結(jié)果Session數(shù)據(jù)還是JDK序列化因?yàn)镾pring Session內(nèi)部根本不走RedisTemplate的默認(rèn)序列化邏輯。換JSON序列化之后還有一個(gè)更深的坑要提醒JSON串里默認(rèn)會(huì)帶上類信息class字段用來反序列化時(shí)確定目標(biāo)類型。一旦你的用戶類從User改名為Account或者在包里移動(dòng)了位置Redis里舊數(shù)據(jù)的類路徑已經(jīng)不存在了反序列化直接失敗。我后來定的規(guī)矩是涉及Session里保存對(duì)象的字段變更時(shí)要么提前清空線上Redis的Session前綴要么在代碼里寫一個(gè)兼容的轉(zhuǎn)換處理器。老數(shù)據(jù)有時(shí)候舍不得清但Session本來就是“丟了就讓用戶重新登錄”的臨時(shí)數(shù)據(jù)優(yōu)先保證系統(tǒng)可用比死守?cái)?shù)據(jù)更實(shí)際。4.2 用戶的并發(fā)請(qǐng)求導(dǎo)致Session覆蓋一個(gè)被低估的丟失更新問題這個(gè)坑不是馬上暴露的而是上線后功能越加越多才慢慢顯現(xiàn)?,F(xiàn)象是用戶同時(shí)打開多個(gè)瀏覽器標(biāo)簽頁(yè)在一個(gè)標(biāo)簽頁(yè)里更新了Session中的用戶資料隨后在另一個(gè)標(biāo)簽頁(yè)里操作時(shí)第一次更新“消失”了。根因要從Redis的讀寫模式說起。Spring Session在請(qǐng)求結(jié)束后把整個(gè)Session對(duì)象寫回Redis這個(gè)操作不是原子更新局部字段而是讀出Session、反序列化、修改屬性、整體寫回的過程。當(dāng)兩個(gè)請(qǐng)求分別落在兩個(gè)不同的實(shí)例上兩邊幾乎同時(shí)從Redis讀出同一個(gè)Session的同一個(gè)字段各自在本地做修改然后先后寫回Redis。后寫的那個(gè)會(huì)把先寫的覆蓋掉其中一個(gè)請(qǐng)求的修改就丟了。這種問題場(chǎng)景和并發(fā)寫數(shù)據(jù)庫(kù)記錄時(shí)的“丟失更新”完全一致只是很多人沒意識(shí)到Session也會(huì)遇到。我當(dāng)時(shí)的排查思路是確認(rèn)哪些數(shù)據(jù)會(huì)被高頻并發(fā)寫。比如用戶每次訪問時(shí)更新“最近訪問時(shí)間”這個(gè)字段就在并發(fā)時(shí)頻繁觸發(fā)覆蓋。解決辦法分兩路走一是把并發(fā)寫頻率最高的數(shù)據(jù)從Session里挪出去比如“最近訪問時(shí)間”這種數(shù)據(jù)完全可以通過Redis單獨(dú)記錄一個(gè)user:online:userId的key來管理不必塞進(jìn)Session二是盡量減少Session里的可變屬性總量Session只保留登錄憑證、用戶主鍵這類低頻變化的標(biāo)識(shí)性數(shù)據(jù)其余高頻業(yè)務(wù)數(shù)據(jù)走專門設(shè)計(jì)的Redis key。如果確實(shí)需要保留并發(fā)寫場(chǎng)景可以考慮把Session的存儲(chǔ)粒度做細(xì)或者引入分布式鎖來控制同一Session的寫并發(fā)。但我的真實(shí)感受是最佳策略不是“控制并發(fā)”而是“減少寫入”——Session的屬性越少、越穩(wěn)定這套方案就越穩(wěn)。它本質(zhì)上是一個(gè)定位標(biāo)識(shí)不是內(nèi)容倉(cāng)庫(kù)。4.3 網(wǎng)關(guān)轉(zhuǎn)發(fā)與前后端分離下的Cookie透?jìng)黜?xiàng)目改造到一定階段前端從服務(wù)端渲染換成了前后端分離請(qǐng)求統(tǒng)一走API網(wǎng)關(guān)。網(wǎng)關(guān)部署完之后又冒出一個(gè)新問題用戶明明登錄成功了緊接著請(qǐng)求業(yè)務(wù)接口卻返回401。瀏覽器里Cookie明明還在后端Session也存在Redis里但請(qǐng)求就是帶不到后端。排查下來發(fā)現(xiàn)是網(wǎng)關(guān)這一層把Cookie信息丟掉了。網(wǎng)關(guān)在轉(zhuǎn)發(fā)HTTP請(qǐng)求時(shí)如果配置里沒有顯式轉(zhuǎn)發(fā)Cookie頭后端拿到的請(qǐng)求里就不會(huì)包含JSESSIONID。后端的SessionRepository完全不知道該查找哪個(gè)Session自然判定未登錄。解決方式是在網(wǎng)關(guān)的轉(zhuǎn)發(fā)配置里把Cookie頭原樣透?jìng)?。以常見的網(wǎng)關(guān)配置為例在路由規(guī)則里加一行轉(zhuǎn)發(fā)Headerfilters: - PreserveHostHeader - RewritePath/api/(?segment.*), /$\{segment} default-filters: - DedupeResponseHeaderAccess-Control-Allow-Credentials Access-Control-Allow-Origin核心是確保轉(zhuǎn)發(fā)請(qǐng)求時(shí)保留瀏覽器提交的Cookie頭同時(shí)響應(yīng)時(shí)不要重復(fù)添加互相沖突的CORS頭??缬蚺渲靡彩莻€(gè)關(guān)鍵點(diǎn)。前后端域名不一致時(shí)后端必須配置CORS允許攜帶憑證Bean public CorsWebFilter corsWebFilter() { CorsConfiguration config new CorsConfiguration(); config.setAllowCredentials(true); config.addAllowedOrigin(https://frontend.example.com); config.addAllowedHeader(*); config.addAllowedMethod(*); return new CorsWebFilter(source - config); }這里有一個(gè)安全限制必須要知道allowCredentials(true)時(shí)allowedOrigins不能寫成*必須指定具體域名。瀏覽器規(guī)范明確禁止攜帶憑證的跨域請(qǐng)求使用通配符來源。前端調(diào)用時(shí)也要設(shè)置withCredentials: true否則即使后端允許瀏覽器也不會(huì)主動(dòng)攜帶Cookie。這個(gè)跨域問題排查起來比較費(fèi)時(shí)我每次都會(huì)先看瀏覽器Network面板里請(qǐng)求是否帶上了Cookie再看響應(yīng)頭里Access-Control-Allow-Credentials是否為true兩步能定位90%的問題。4.4 Redis內(nèi)存持續(xù)增長(zhǎng)與session過期回收失效還有一個(gè)經(jīng)典問題系統(tǒng)跑了一段時(shí)間后Redis內(nèi)存占用越來越高明明設(shè)置了Session過期時(shí)間數(shù)據(jù)卻沒有按預(yù)期釋放。這通常不是Spring Session沒做清理而是清理機(jī)制依賴某些前提條件。Spring Session的過期清理依賴兩個(gè)關(guān)鍵機(jī)制一個(gè)是通過spring:session:expirations:timestamp集合定時(shí)掃描另一個(gè)是Redis的過期key事件通知。如果Redis實(shí)例關(guān)閉了notify-keyspace-events配置Spring Session就無法收到key過期事件來觸發(fā)后續(xù)的刪除操作。雖然掃描任務(wù)也能兜底但事件通知關(guān)閉時(shí)清理效率和實(shí)時(shí)性都會(huì)下降內(nèi)存里會(huì)殘留更多等待淘汰的Session數(shù)據(jù)。建議在Redis配置里打開必要的事件通知notify-keyspace-events Exgx這個(gè)配置項(xiàng)開啟了過期key事件和通用命令事件。生產(chǎn)環(huán)境調(diào)整Redis配置后要記得驗(yàn)證生效用config get notify-keyspace-events確認(rèn)。更需要注意的另一個(gè)坑是Redis內(nèi)存淘汰策略。如果Redis配置的maxmemory-policy是allkeys-lru那么當(dāng)內(nèi)存達(dá)到上限時(shí)Redis會(huì)從所有key里挑選最久未用的key來淘汰Session數(shù)據(jù)也會(huì)被當(dāng)成普通緩存清掉哪怕它還沒到過期時(shí)間。結(jié)果就是用戶明明還在活躍Session卻被Redis強(qiáng)制刪除用戶被莫名其妙踢下線。這種情況特別難排查因?yàn)槿罩纠锟床坏饺魏螆?bào)錯(cuò)就是偶發(fā)掉線。后來我把Redis的內(nèi)存淘汰策略改成了volatile-lru這個(gè)策略只淘汰設(shè)置了TTL的key。Session主key自帶TTL業(yè)務(wù)緩存如果不需要被淘汰可以不帶TTL。這樣既能保證Redis內(nèi)存可控又不會(huì)誤傷活躍Session。同時(shí)我還寫了一個(gè)定時(shí)巡檢腳本每天檢查一次Redis內(nèi)存增長(zhǎng)曲線和spring:session:*的key數(shù)量如果發(fā)現(xiàn)Session數(shù)量異常增多基本都是某個(gè)接口在瘋狂創(chuàng)建新Session這時(shí)會(huì)去檢查業(yè)務(wù)代碼里是不是有“一登錄就訪問request.getSession(false)并觸發(fā)創(chuàng)建新Session”的邏輯。結(jié)尾改動(dòng)之外我留下的一點(diǎn)心得整套方案落地后再回看技術(shù)層面的難度其實(shí)不算高真正的難點(diǎn)在于兩處一是意識(shí)到“Session狀態(tài)必須和實(shí)例解耦”這個(gè)根本前提二是上線后通過實(shí)際問題把方案打磨到符合業(yè)務(wù)特性。如果你還在單機(jī)架構(gòu)里提前把Session遷到Redis并不是過度設(shè)計(jì)而是一筆很劃算的“架構(gòu)保險(xiǎn)”因?yàn)榈鹊綌U(kuò)容當(dāng)天再處理緊迫感和故障壓力會(huì)讓你沒有充足時(shí)間考慮細(xì)節(jié)。我個(gè)人的體會(huì)是遷到Redis Spring Session之后最需要改變的其實(shí)是“往Session里亂塞東西”的習(xí)慣。單機(jī)時(shí)代往Session塞什么都能跑但分布式環(huán)境下Session變成了分布式共享存儲(chǔ)每一次寫入都對(duì)應(yīng)一次網(wǎng)絡(luò)請(qǐng)求加一次序列化濫用會(huì)直接把Redis拖成瓶頸。我現(xiàn)在定的原則很簡(jiǎn)單Session里只放穩(wěn)定且低頻使用的核心標(biāo)識(shí)數(shù)據(jù)比如用戶ID、登錄令牌、少量偏好設(shè)置所有需要業(yè)務(wù)計(jì)算和頻繁變化的數(shù)據(jù)單獨(dú)設(shè)計(jì)Redis緩存key或落庫(kù)。這套原則比任何技術(shù)選型都更影響長(zhǎng)期穩(wěn)定。最后分享一個(gè)實(shí)用小技巧本地開發(fā)環(huán)境可以保留內(nèi)存存儲(chǔ)只把生產(chǎn)環(huán)境切到Redis避免每個(gè)開發(fā)同學(xué)都依賴一個(gè)共享的Redis實(shí)例。具體做法是在application.yml里用多環(huán)境配置區(qū)分dev和proddev環(huán)境不配spring.session.store-type讓它走Spring Boot默認(rèn)的內(nèi)存Sessionprod環(huán)境顯式配置成redis。這樣開發(fā)調(diào)試不受Redis狀態(tài)影響線上又能享受無狀態(tài)擴(kuò)容的紅利。兩套環(huán)境隔離好開發(fā)效率和系統(tǒng)穩(wěn)定性都可以兼得。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
好好干av| 疯狂做受XXXX高潮A片| 久久婷婷影院| 色婷婷操逼网| 人人操超碰| 五月婷婷综合激情网| 丁香五月综合在线播放| 青青操avbb| 色99婷婷五月天| 天天射影院| 五月天婷婷操逼视频| 六月香五月婷| 亚州激情在线视频| 婷婷欧美偷拍综合| 久热超碰| 超碰在线99| 大胆伊人久久| 91精品国产色猫| 开心五月天激情网| 大香蕉婷婷| 日91高清无玛| 丁香五月色网| 亚洲性爱电影| 丁香五月色五月| 六月婷婷色宗合| 性日本激情| 99九九视频| 超碰cap| 在线另类| 538在线精品| 噜噜视频| 五月天激情四射| 综合色五月天| 亚洲中文乱字字幕在线永久| 日本三级日本三级99| 在线观看的av| 欧美久久婷婷| 人妻内射视频| 色综合色色| 久久五月丁香| 97五月天| 色婷婷丁香花五月天| 婷婷五月天综合网| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 色婷婷激情视频| 99视频只有精品| 亚洲操b| 超碰人人在线| 97色婷婷| 激情五月婷婷综合网| AV九九| 超碰在线人妻| 538在线精品| 丁香五月婷婷基地| 日本44久久在线| 久久久久久久久月丁| 五月天久久婷| 激情文学第四色婷婷丁香五月| 久久艹网| 九九综合| 亚洲射激情| 欧美综合激情五月丁香| 精品色色色| www开心激情网| 亚洲五月天婷婷综合| 97色色色色色色色色色色色色色| 热99热9| 五月天成人在线播放丁香| 狠狠久综合| 午夜电影网VA内射| 五月婷婷偷拍| 最新高清无码专区| 大伊香蕉玖玖爱| 中文AV在线观看| 久99视频在线观看| 狠狠狠狠狠狠狠狠草| 天天艹天天色| 亚洲性爱电影| 日本熟妇乱妇熟色A片蜜桃| 天堂成人A片永久免费网站| 蜜臀久久99精品久久久久久酒店| 九九视屏| 五月婷婷色男女| 国产另类综合| 玖玖在线视频| 日韩有码一区| 伊人青草成人| 九九精品热| 亚洲天堂啪啪| caop视频| 婷婷性爱网| 婷香五月网在线| 秋霞影音91人妻久久| 伊人AV五月婷| 九九伊人网| 五月婷婷很很色| AV免费在线网站| 婷婷天堂综合| 五月伊人婷婷| 丁香六月综合激情| 99超级碰碰| 五月激情婷婷开心五月| 精品99在线| 91一起操| 免费国产视频| 开心婷婷五月天激情网| 色99在线| 欧美va视频| 甈你aaaaa| 色播五月综合网| 99久久久| 婷婷丁香成人| 狠狠色综合精品视频在线| 五月天婷婷视频| aaa久久久| 色香蕉影院| 五月丁香亭亭天天舔| 五月丁香色综合| 开心婷婷五月| 五月丁香久人妻中文| 开心四月婷婷在线色播播| 婷婷五月天天天| 可以看的av| 精品国产a| 久久综合婷婷| 丁香激情久久| 婷婷综合在线播放| 激情综合色播| 婷婷丁香中文字幕| 成人视频九九| 一级黄色影片| 色哟哟精品| www国产亚洲色婷婷com| 亚洲无AV在线中文字幕| 欧韩性爱| 五月婷婷丁香| 婷婷五月天激情四射| 日韩无码色色| 婷婷久久婷婷| 欧美25p| 激情综合网,婷婷| 51国精产品自偷自偷综合| 久久视频在线视频| 人妻videos人妻高清| 97干网站| 97影院一级片| www久久久久久久97| 五月婷婷综合色啪首页| 婷婷五月天综合小说网| 亚洲黄网在线| 久久一热| 亚洲成人AV在线| 亚洲 五月 婷婷 成人| 1024日韩| 五月天色婷婷av| 99热6精品| 激情图片99| 色噜噜狠狠狠综合曰曰曰| 99久久99久久综合| 妻久久久久| 亚洲免费婷婷| 第四色五月激情网| 青草视频在线观看视频 | 性一交一乱一交A片久| 亚洲AV综合网| 久久ab| 丁香色成人| 五月天激情国产综合婷婷婷| 亚洲四色五月| 伊人网啪啪| 久久婷婷六月综合综合| 精品久久久999| 五月天婷婷爱| 99精在线| 久久婷婷亚洲五月天| 熟女人妻视频| 99久久激情视频| 91熟妇大香蕉| 狼人婷婷久久| 五月激情婷婷图片基地| 日韩免费视频| 日本五月天一页| 婷综合六月| 99九九精品| 婷婷激情97| 亚艹艹| 婷婷五月日本| 猫咪伊人久久| 秋霞午夜理论| 男女av免费看| www99精品| 超碰在线人妻| 午夜伊人大香蕉| 五月激情婷婷六月| 激情久久久久久| 九九热超碰| 可以免费看av网站| 九九久久偷拍| 久久综合九九| 色情免费视频播放| 99久久99久久| 最近免费中文字幕大全高清大全1| 操逼福利视频| 亚洲色激情| 91碰碰碰| 99久久大片| 色婷婷AⅤ| 婷婷九月激情| 九九婷婷五月天影视| 久久成人亚洲欧美电影| 成片免费播放| 久久婷婷五月综合伊人| 六月丁香婷婷视频综合在线观看 | 欧美va视频| 五月丁香婷婷AV天堂| 九九99九九精品免费| 另类小说激情五月天| 啪啪婷婷五月天激情| 婷婷在线播放| 五月天婷婷久久视频| 色播婷婷五月天| 国产亚洲成AV人片在线观黄桃| 超碰1999| 婷婷丁香成人在线视频| 五月综合激情| 免费观看日韩成人av| 九九热欧美| 五月婷婷影视| 丁香六月啪啪| 六月丁香停| 婷婷伊人| WWW免费视频碰碰碰碰| www.91热久久| 婷婷五月婷婷| 日韩黄色电影| 天天色综合综合| 亚洲精品亚洲人成人网| 99热精品超碰| 三级黄色大片视频| 五月婷婷激情| 国产avapp 网| 色色综合网络| 狠狠操天天操综合| 丁香五月色| 9色操| 久热91| 丁香六月婷| www.日韩艹| 婷婷91| 伊人久久大香| av五月天婷婷丁香| 亚洲九N| 综合久久97| 色综合久久久久久久久五月| www色婷婷久久综合久色 | 精品国产AV色一区二区深夜久久| 欧洲亚洲免费视频9| www.狠狠干com| 97色婷婷| 超碰91在线| 92久操视频| 激情五月www| 99在线观看精彩视频| 五月激情婷婷国产精品久久久久久| 俺去也五月| 九九激情网| 日本色狠狠| 99久久er| 国产精品视频久久99| 玖玖资源站国产| 日韩欧美老妇性视频91久久久| 97色精品视频| 中文字幕无码人妻少妇免费视频 | 久久98| 91色色色18| 色五月在线观看| 99视频精品全部免费观看| 五月色丁香综合| 丁香九月婷婷综合| 婷婷丁香六月五月天| 婷婷九月综合| 超碰人人色| 伊人婷婷大香蕉| 色综合网页| 日本婷色| 色噜噜狠狠色综合成人网| 色爱五月天| 亚洲色婷婷视频| 色综合久久天天综合网| 热成人网| 思思久久精品| 98色花堂98t.R| 狠狠爱五月婷婷| 亚洲免费观看高清完整版AV线| 99视频在线| 噜噜吧天天爱| 97在线碰| 激情久久久| 五月综合激情婷婷六月色窝| 影音先锋日本三级资源| 五月天激情久久| 天天做天天爱天天爽综合网| 超碰成人av| 91成人电影| 无码人妻激情| 五月婷婷综合网| BBWCUCKOLD精品熟妇| 图片区 小说区 区 亚洲五月 | 精品国产乱码久久久久久免费| 高清一区二区三区日本久| 亚洲亚洲人成综合网络| 97婷婷五月丁香| 五月天激情图片网| 婷婷色女| 激情综合色婷婷啪啪六月天| 免费视频无码| 国产成人综合网| www.99热国产| 激情AV在线| 婷婷五月av| 婷婷五月天av网| 日在线V视频在线播放| 亚洲色综久久五月| 91人操人人人操人| 无码AV免费精品一区二区三区 | 久久久97| 亚洲综合五月天婷婷| 婷婷五月欧美| 精品九九在线观看视频| 五月天婷婷丁香社区| 大香蕉久久婷婷精品综合| 91蜜桃婷婷狠狠久久综合9色| 激情www.98com| 日本操逼九九九九58日本操逼| 五月婷婷六月丁香在线视频免费在线观看| 婷婷在线视频| 九九热视频精品999| 77777亚洲午夜久久| 少妇高潮一区二区三区99欧美| 99热6这里只有精品6| 中文字幕色色色| 日韩黄色电影| 超喷97免费在线视频| 岛国操B不卡在线| 一区色色色色网| 99成人无码| 黄色成人网站在线播放| 五月天丁香婷婷久久九| 婷婷丁香五月麻豆| 超碰熟女拍拍| 无码激情AAAAA片-区区| 六月丁香色色| 久久九九大香蕉电院| 9热精品| 天天躁日日躁狠狠躁日日躁2022年5月9日| 性天堂久久| 美女100%露全身无挡网站| 久久这里只有精品99| 国自产拍偷拍精品啪啪一区二区| 色婷婷五月天成人网| 亚洲AAA| 人人干99| 久久五月天丁香| 激情q青青草在线婷婷| 亚洲热视频在线| 99在线免费视频| 成人午夜免费电影| 天天爱夜夜爽| 亚洲三A| 丁香伊人网| 婷婷色5月激情网| 久草热在线视频| 久久婷婷夜| 欧美英丁香开心快乐六月天网| 九九综合精品| 五月综合激情| 亚洲无码99| 五月天丁香久久综合| 欧美在线视频99| 婷婷六月丁| 黄色中文字目| 色97综合婷婷天天色| 丁香五月香蕉| 人伦30P| 亚洲丁香五月| 强壮的公次次弄得我高潮A片日本 | 91丨九色丨丰满人妖| 五月色天情| 91夫妻视频| 色播五月婷婷综合| 99久久婷婷国产综合| 精典久久| 色婷婷888| 色九九一二| 开心五月综合激情综合五月| 搡BBBB搡BBB搡五十| 五月天色色激情综合| 日本久久人| 伊人丁香五月婷婷潮吹| 婷婷五月激情六月| 日韩视频女神99| 亚洲欧美国产高清vA在线播放| 中文字幕无线久必| 天天插天天| 日本色色影片| 亚洲另类婷婷五月综合| 九色亚洲| 九九视频这里只有精彩| 久久一伦| 九九综合| 伦乱天堂| 五月婷婷激情网| 天搞天天天天天| 狠狠爱综合网| 六月婷婷五月丁香首页| 国产熟妇的荡欲午夜视频| 色网站99| 日本www免费九九| 五月综合影院| 国产色视频网站2| 亭亭玉月丁香| 97中文在线| 99久热这里只有精品| 婷婷99| 婷婷婷婷色| 玖玖在线视频福利| AA片在线观看视频在线播放 | 五月色丁香| 激情网五夜婷婷| 99∨VTV| 婷婷五月永远18免费久久久| 九 九九九AV| 99热久| 六月撸婷婷| 丁香五月久久| 欧美天天干五月丁香| 亚洲视频综合网| 激情婷婷五月基地| www.五月天色色.com| 大香蕉九九| 丁香五月AV综合| 婷婷五月在线影院| 五月丁香六月婷婷激情网| 日本色99| 无遮挡国产高潮视频免费观看| 久久成人天| 亚洲乱啪| 99爱在线视频| 激情综合亚洲色婷婷五月| 国产综合久久久777777| 五月丁香激情综合| 天天做天天爱天天综合网| 一级二级色大片| 99亚洲精品视频| www.金莲av| 久久久这里有精品| 26uuu色噜噜精品一区| 天天干在线播放| 天天舔天天爽| 亚洲舔观看| 人人操操97| 色色色五月婷婷| 99热精品一区| 成人 在线 日韩| 日逼AV影音先锋男人资源站| 久热 91| 色播丁香五月婷婷操:屄| 五月婷狠狠| 久草五月婷婷| 99久久免费精品| 婷婷丁香激情综合色情| 99久久欧美| 五月丁香激情啪啪| 蜜桃五月天| 91色五月| 99热在线观看99| 五月婷丁香| 五月天亚洲色| www.十八禁不禁AV.com| 婷香五月| 97婷婷狠狠久久综合9色| 亚洲色五月| 五月婷综合| 丁香久久AV| 91凹凸在线| 日逼影音先锋男人AV资源站| www.久久| 五月激情天| 婷婷婷五月天最新综合你懂的| 久久婷婷五月丁香网| 亚洲成人无码专区| 久久久网站| 综合性爱网| 26uuu亚洲欧美| 丁香五月天在线观看视频| 五月婷婷精品视频| 欧美综合激情| 久久久天堂国产精品女人| www.91在线观看| 99re热视频这里只精品| 夜夜夜叫天天天做| 五月天成人在线视频丁香| 激情五月天啪啪| 97在线日韩| 五月婷婷综合网| 另类视频综合| 97碰| www.henhenl| 天天骑天天操| 99色性爰网络| 日韩九九| 九九99精品视频在线观看| 色婷婷六月开心中文字| 色欲五月天| 26UUU| 国产操碰| 97啪啪| 成人五月天丁香婷| 97色在线观看视频| 婷婷网影院| 五月天怕怕| 国产精品A片在线| 五月丁香六月激情| 无码AV大香线蕉伊人| 综合aV在线| 双性美人被调教到喷水A片| www.婷婷五月天.com| 九九热黄色| 超碰色综合| 五月激情丁香六月狠狠干| 激情五月天婷婷图| 7月婷婷六月丁香| 九九色婷婷| 97在线刺激| 婷婷丁香激情综合色情| 啊V视频在线观看| 日韩高清成人| 色九九综合| 亚洲精品亚洲人成人网| 99色区| 丁香五月天色| 热99视频| 激情五月天伊人影院| 丁香五月电影| 婷婷娌伦网| 六月丁香中文字幕| 香蕉久久国产AV一区二区| 亚洲啪啪视频| 亚洲超碰在线| 日本熟妇乱妇熟色A片蜜桃| 久久黄色片| 日韩五月婷婷久久| 婷婷六月综合基地| 国产欧美日韩性爱| 五月丁香综合伦理片| 热久久精品视频网站| 99成人小视频| 九九色播五月丁香| 婷婷综合五月天| 最近免费中文字幕大全高清大全1| 国产成人AV不卡| 99在线看视频| 超碰在线免费| 久色视频首页| 五月丁香婷婷成人网| www999日韩精品| 天天干天天日天天操| 国产成人精品亚洲线观看| 一本色道久久综合狠狠躁一二三 | 天天日综合| 99国产精品白浆在线观看免费 | www.henhenl| 99思思在线视频| 狠狠操狠狠狠| 一级二级色大片| 六月婷婷色| 激情综合色婷婷啪啪五月天| 久久久久久久久99精品| 五月六月丁香婷婷在线观看| 五月天婷婷亚洲| 99久久婷婷国产综合| 另类视频在线| 久久人操-久草婷婷-成人AV| 深爱女色婷婷丁香五月亚洲图区| 激情五月天开心总和网| 亚洲无码色色| 操比激情五月| 日本女天天爽| 91精品久久久久、久五月天| 99热成人| 99人人操人人爱久久久| 五月天全国最大成人网| 九九九九国产| 熟妇国产| 五月激情丁香六月狠狠干| 九九热99热| 婷婷五月天激情四射| 婷婷之玖玖| 国内裸舞二区| 秋霞AV淫| 99久久天堂婷婷| 九九视频免费| 啪啪黄页网| 99精彩视频网站在线| 黄色片精品| 我要看激情五月天| 五月丁香六月激情| 色婷婷av在线| 丁香六月婷婷综合欧美| 中文字幕欧美日韩VA免费视频| 成人在线高清| 国精产品一区二区三区| 天天天天操| 丁香激情四射| 丁香五月天在线观看| 九九热精品视频在线观看| 日本婷婷在线| 色色色成人网| 五月天丁香婷婷久久九| 亚州欧美国产久精国产99综合视频| AV色婷婷| 激情淫乱男女| 国产色五月| 婷婷97狠狠成人网站| 99综合久久| 来吧亚洲综合网| 97日本在线播放| 男人天堂伊人五月丁香| 激情五月天丁香| 亚洲超级碰| 激情五月四色| 97人人操人人插| 97激情五月天| 五月综合视频| 人妻性爱| 婷婷色色五月天| 国产成人网站在线观看| 天天搡日日搡aaaaⅩ| 五月婷婷日本| 亚洲天堂色色| 99热九九在线| 26uuu国产| 超碰五月婷婷五月天| 天天影视色综合网| 狠狠色 综合色区| 先锋男人99资源| 99热这里只有精品13| 亚洲va综合va国产va中文| 五月婷婷AV| AV在线免费播放| 欧美99视频| 五月丁香激| 4399人妻无码久久久| 天天综合精品| 激情五月天综合网| 久久HD| 97操操操| 婷婷五月天综合网| 午夜理论片最新午夜理论剧| 免费无码毛片一区二区A片| 色久在| 天天爽天天爽| 婷婷五月天熟妇| 日韩青青| 婷婷天天婷婷天天澡| 久草丁香婷婷五月天婷| 五月丁香六月激情综合| 亚洲综合网 665566| 91狠狠综合久久久| 六月色日韩| 中文幕无线码中文字蜜桃| 九九热99精品在线| 91久久18| 激情无码网| 99热人人| 国产69久久久欧美黑人A片| 丁香婷婷久久老熟女综合网| 91精品久| 五月丁香色色| 天天操夜夜啊| 日本韩国视频在线观看社区免费的9| 色五狠狠| 五月婷婷色播| a在线观看| 亚洲性色XXXXX| 欧美久人人| www.99在线| 亚洲色情免费网| 久久九九Com| www.色五月| 天天爽在线视频| 97久久人人人干| 久久久这里有精品| 欧美色图45678| 99久久99综合| 激情丁香五月| 天天色综合色色色色色。| 久久五月天影院| 色欧美影院| 狠狠看狠狠| 丁香八月综合激情| 五月婷婷久久久| 四五月婷婷| 91性人人| www.狠狠操| AV人人操| www.minyis.com【JT】实力收量可预付TG@LXSPSW8 | 天天干一干| 激情五月视频在线婷婷| 色综合婷婷| 婷婷综合性爱网| 96精品久久久久久久久| 色婷婷五月网| 91男同| 久热re视频在线观看网站| 玖玖爱综合网| 久久九九99亚洲国产久精综合| www.91婷婷| A片试看50分钟做受视频| 夜夜操狠狠操| Va另类视频| 久久九区| 亚洲久艹| 嫩草AV久久伊人妇女超级A| 狠狠干在线| 五月天伊人日日噜影片AV| 五月天婷婷綜合院| 色九四色| 中字幕视频在线永久在线观看免费| 爱婷婷都市激情| 日本成人噜噜噜噜噜| 黄网免费看| 色综合久久88色综合天天| 丁香六月婷婷久久综合| 秋霞A V毛片| 五月丁香淫淫婷婷婷| 五月丁香婷婷在线综合蜜桃| 久久3p| 久久婷婷免费| 中文幕无线码中文字蜜桃| 97狠狠色| 99热这里只有精品8| 婷婷激情欧美| 99热热九九| 日本熟妇精品99| 超级97碰碰| 熟女人妻视频| 俺也去色| 丁香五月成人网| 91色噜噜狠狠狠狠色综合| 欧美成人性爱网| 99视频精品全部免费 在线| 九九热这里只有精品首页| 日韩99视频| 欧美日本高清视频99| 九九婷婷激情综合网| 欧洲色色| 丁香五月欧美| 亚洲精品午夜国产va久久成人| 丁香婷五月天开心六月| 色色色成人网| 色五月激情五月天| 激情六月婷| 国产色五月婷婷| 亚州视频九九99| 婷婷五月天激情在线观看 | 99久久九九| 久久婷婷五月天激情| 激情婷婷五月天伊人在线观看| 色色热99| 开心婷婷五月激情网小说| 色婷婷狠狠爱| 97精品综合久久| 五月婷啪| 五月综合色| 中文字幕永久在线| 深爱激情中文五月天av| 五月天婷婷xxx| 丁香五月1页| 99视频这里只有免费精品| 色噜噜狠狠色综合AV兰草影视| 色色激情| 久久色频| 婷婷色香六月综合激情| 三级成人网站| 丁香五月欧美色综合| 99爱精品视频| 欧美日韩一区二区三区四区| 狠狠色丁香| 操97免费超级视频| 99精品自拍| 亚洲激情综合| 人妻丰满精品一区二区A片| 又大又粗九一在线| 26uuu成人网| 五月天堂六月丁香亚州中文字幕久久| 婷婷久久婷婷| 久久五月网| 密黄站| 亚洲色情一区二区三区四区| 丁香五月23111| 五月天综合激情网| 婷婷激情六月综合| 日日色综合| 成人免费120分钟啪啪| 久久久久久久久月丁| 五月丁香A片| 亚洲一区国产传媒| 丁香五月,开心五月,成人婷婷| 婷婷大美在线| 色婷五月天综合网| www.久久爱.com| 婷婷欧美| 国产精品男人AV不卡| 特级操b片| 这里只有精品偷拍| 婷婷成人综合五月| 天天操综合网| 五月婷婷丁香五月| 丁香五月天AV在线| 婷婷趴趴| 色爱综合视频| 玖玖资源站中文| 另类视频一区| 欧美综合激情| 大香蕉久久草| 五月天亚洲最大成人| WWW,五月| 丁香五月婷婷色| 丁香五月激情图片婷婷| 97色色综合| 这里只有精品热| 十月色综合| 99视频这里有精品| 九色视频入口91| 成人国产综合| 大地资源色婷婷视频在线| 亚洲免费99| 亚州在线中文字幕| 婷色五月天| 欧美va亚洲va在线播放| 五月伊人网| 色婷婷成人色网| 日韩久热| 天天爽综合网| www.夜夜| 国产九九一区二区三区| 丁香五月婷婷六月婷| 天天干天天干天天| 四川BBB搡BBB爽爽视频| 亚洲六月色婷婷| 天天操夜夜玩!| 武则天精品久久| 久久这里只有精品视频15| 五月综合久久| 久久激情五月婷婷| 亚洲精品白浆高清久久久久久| 操97免费超级视频| 激情开心五月亚洲| 激情五月丁香婷婷| 欧美天天搞| 色婷婷在线视频综合| 五月天成人综合| 日本精品99| 天天射综合网天天插| 免费婷婷| 9热久久在线| 天天更新天天亚洲| 97人妻碰碰中文无码久热丝袜| 色婷婷av综合网| 婷婷天天插天天爱| 夜夜撸天天操| 丁香五月天激情四射网| 天天爽天天爽夜夜爽| 丁香婷婷色五月激情综合| 五月婷婷草| 午夜色丁香| 日韩成人中文| 天天噜天天爱| 天天天干夜夜夜操| www.99婷婷| 五月婷婷六月情| 婷婷黄色网| 久香草视频在线观看| 婷婷五月激情综合| 久热这里只精品| 久草视频一,二三四| 久久一伦| 激情五月天伊人影院| 久久se 综合网 | 日本在线观看91| 色五月视频,小说| 校花娇喘呻吟校长陈若雪视频| 国产乱码久久| 99这里只有| 久久精品婷婷| 日韩性视频| 久久刺激网| 热久国产| 五月丁香六月成人| 成人版视频在线观看| 日韩一级网站| 天天色天天操天天射| 99在线播放| 开心网五月色婷婷| 日韩美女在线视频19| 小视频久久久aaa| 日韩美一级毛卡片| 美女天天爽| 超碰在线观看成人视| 亚洲丁香五月天视频| 欧美人人女女精品综合五月天| 99热首页| 国产激情av| 99热99干| 六月丁香激情综合网| 色爱综合网| 五婷婷六月合| WW婷婷五月天com| 色区域网站视频| 第四色色六月色综合| 五月花激情| 成人资源在线| 91综合国免费久入| 亚洲婷婷视频| 亚洲亚洲人成综合网络| 99aese| 99九九99九九九视频精品| 激情综合网五月天| 激情五月天综合网| 五月丁香六月激情欧美综合| 九九免费精品在线视频| 五月天综合在线网| 激情深爱五月| 久久精品五月天| 成人丁香五月| 天天综合干| 另类亚洲电影| 婷婷伊人综合中文字幕| 久久99这里只有精品| 成人做爰A片免费看视频 | 五月天婷婷色| 亚洲欧洲中文日韩久久AV乱码| 日日激情网| 91精品丝袜久久久久久久久粉嫩| 久热99热| XXXX岛国| 亚洲AV日韩AV永久无码网站| 五月天婷婷网站888| 色婷婷久久综合久色| 香蕉久日夜| 九色无码| www久久五月com| 色婷小说| 九九综合精品| 五月婷婷婷婷婷婷艺术| 色九九七七| 久热婷婷| 天天做天天爱天天要| 丁香婷婷久久 | 婷婷久久综合久| 久久五月婷综合| 婷婷婷婷婷婷婷婷| 天天做天天爱天天爽夜夜揉| 五月丁香色停停啪啪啪| 五月丁香成人网| 丁香五月天信号| 亚洲国产精品成人午夜| 五月丁香六月情| 亚洲成人网无码| 久久艹 五月天| 久热AA| 丁香婷婷五月六月天| 日韩美女羞羞网站在线观看| 婷婷五月天色| 深爱激情丁香| 五月久久五月激情| www.91AV.COM| 天天操天天操天天操天天操天天操 | 亚洲天堂碰碰婷婷| 99精品久久| 激情五月狠狠| 九九99精品| 99久久久精品| 天天摸天天舔在线视频| 五月婷婷综合在线亚洲视频| 六月婷婷av| 120分钟婬片免费看| av高清无码| 成人网站免费在线播放| 亚洲综合色五月| 亚洲激情综合| 神马久久五月天| 色色热| 色综合中文| 五月天电影网| 久久婷婷六月天| 狠狠色噜噜狠狠| 精品香蕉99久久久久网站| www.婷婷亚洲基地| 99精品视频在线6| 色五月婷婷AV| 亚洲六月色| 激情深爱五月天| 日本五月婷婷| 色综合五月婷婷狠狠干| 五月婷婷六月丁香| 91日综合欧美| 国产婷伊人| 五月丁香色色网| 99爱视频免费| 丁香六月天婷婷开心综合| 色波激情五月天| 热久久色| 五月天丁香花婷婷| 国外亚洲成AV人片在线观看| 久久98| 九九热精品视频在线观看| 这里只有精品在线播放| 狠狠色狠狠干| 六月丁香婷| 综合五月丁香六月婷婷| www网站在线观看| 综合久久激情久久| 夜夜爱网站| 九九色99| 婷婷五月综合久久中文字幕| 可似看的AV| 欧美Va在线| 亚洲日韩26uuu| 天天爽在线视频| 91精品婷婷国产综合久久| 久色五月天| 色停停影院五月天| 久久这里只有精品视频15| 日本操天堂| 激情五月综合| 91九色精品熟女内射| 这里只有精品免费| 色婷婷9| 亚洲六月色婷婷| 在线成人视频免费| 丁香六月婷婷色XXXXX| 五月深爱激情网| 五月之婷婷| 99精品7| 婷婷五月天亚洲图片| 婷婷五月综合在线视频| 欧美综合激情五月丁香| 丁香五月婷婷色综合基地| 99视频地址| 丁香激情五月综合网| 99热 在线观看| 精品九九在线观看| 婷婷激情五月天网站| 天天天操天天天爰| 国产精品噜噜在线视频| eeuus五月婷| 色播五月丁香婷婷| 深爱激情久久| 婷婷日日天天| 99免费热视频| 五月花在线观看视频| 激情www| 综合99视频| 国产免费AV网站| 色综合久久天天综合网| 色综合激情| 另类少妇人与禽zOZZ0性伦| 成人AV在线电影| 狼人久草| 久久黄色片| 国产精产国品一二三在观看| 99色视频| 色色五月天 亚洲| 色射7856五月天激情四射| 九九青草热| 26UUU欧美激情一区二区| 五月婷视频久久| 丁香五月天婷婷久久综合| 婷婷成人丁香色情基地30 | 亚洲爱爱无码婷婷色五月| 99re这里只有精品首页| 五月六月伦理| 五月丁香六月色| 五月丁香六月综合激情| 天天肏在线| AV六月丁香| 亚洲免费av在线| 婷婷免费精品视频| 亚洲一区二区无码蜜乳av| 夜夜骑天天玩天天日| 九月激情综合| 97人人干| 9|人妻人人操| 一区二区乱码视频| 亚洲色色图片| 综合图区激情| 婷婷射图| 风流少妇A片一区二区蜜桃 | 亚洲国产色色| www.色婷婷.com| 婷婷伊人网| 五月婷婷婷色| 国产av基地| 色国产五月| 欧美影院| 亚洲亚洲人成综合网络| 99久久天堂婷婷| 婷婷视频网| 丁香五月激情婷婷| 99热精品在线| 国产亚洲精品AAAAAAA片| www.五月婷| 激情色色| 六月丁香婷婷五月| 99色热| 五月天大香蕉婷| 久久综合爱| 丁香婷婷视频一区二区| 五月天婷婷激情小说电影| 青草视频在线观看视频| 激情视频91| www.操逼comm| 草草操操| 狠狠久久婷五月综合色| 超碰99热| 深爱激清网| 99精品在线观看视频| 婷婷综合在线视频| 五月婷婷少妇之| 国产成人在线精品| 久热91| 9热在线视频精品| 色综合香蕉视频| 色婷五月| 激情五月婷婷啪啪| 丁香六月婷婷高清| 人妻精品在线| 99热最新国内| 狠狠草天天草| 99热精品99| 大香蕉久久伊人网| 99色色热| 五月婷婷丁香大陆免费| 亚洲正能量欧美| 久久永久网址| 欧美性猛交99久久久99| 日韩精品呦呦va| 久久小视频免费| 久热AA| 九月婷婷激情久久| www,婷婷五月天777me,com| 免费亚洲婷婷中文字幕| 亚洲成人无码片| 久久久人人人妻丝丝丝| 操操碰| 六月色播| 五月天六月色| 91五月花丁香| 五月婷婷中文网| 亚洲色综合| 婷婷五月色图| 久久久这里有精品| 日99网站| 青青热久精品视频在线观看| 大香蕉啪啪啪| 九九精品综合| 国产VA亚洲VA96| 黄色网址五月婷婷| 亚洲色欲欧美一区二区三区| 天天干天天色综合| 97碰碰视频| 99爱在线精品视频免费观看| 99久久超级| 99爱免费在线视频| 99久在线精品99re8| 欧美色色色| 丁香五月婷婷色| 四色五月婷婷| 99热777| 青青久久五月| 日韩久久这里只有精品| 亚洲精品色| 一区二区中文字幕| www久久99| 亚洲热手机在线观看| 欧美97色| 97热视频| 色五月在线观看| 色丁香五月婷婷| 五月婷中文字幕| 色欲色天天香综合| 伊人久久五月天| 99久久婷婷| www九九| 99色色网| 99在线免费观看| 激情婷婷内射| 伊人色综合网| 梁铮版蜘蛛女在线观看| 欧美韩国日本| 69午夜成人影片| 国产69久久久欧美黑人A片| 五月的婷婷六月丁香| 日韩国产在线精品| 天天做 天天爱| 九九九九热99超碰| 五月婷婷综合在线视频小说| 丁香六月婷婷色XXXXX| 九九亚洲| AV成人在线播放| 九九亚洲视频| 丁香六月婷婷缴情欧美| 久久er99热精品一区二区| 五月天国产成人| 天天日天天舔天天摸| 天天操天天操天天操天天操天天操天天操天天操天天操天天操 | 日日鲁鲁鲁夜夜爽爽狠狠视频97| 五月天婷婷久久日| 91碰碰碰| 玖久精品视频9| 五月天丁香花婷婷| 超碰在线免费9| 99九九精品视频| 色五月成人| 99黄色| 国产第99页| 人人操AV| 午夜大香蕉| 国产69久久久欧美黑人A片 | 女人高潮内射99精品| 五月丁香色婷婷综合| 99九九热视频免费| 亚洲av网站| 韩日在线熟女| 五月婷三级片| 99精品在线观看视频| 婷婷久久五月| 99成人| 五月丁激情| 玖玖综合玖玖| 一起草性爱不卡视频| www好屌操| www狠狠爱com| 91久久久久久久| 襙逼网| 99久久97久久欧美综合网| 97色欧美| 可以免费看av网站| 精品五月花| 99操视频| 婷婷五月伦理| 99噜噜噜| 五月丁香777| 丁香五月天av| 婷婷丁香六月天激情四射网| 婷婷五月色惰| 五月天免费色| 伊人久久综合| 九九色精品| 日本操逼九九九九58日本操逼| 婷婷伊人久久| 五月激情综合婷婷| a网站免费观看| 天天天操天天天日|