免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

分布式會(huì)話共享方案:Redis+Spring Session實(shí)戰(zhàn)解析

分布式會(huì)話共享方案:Redis+Spring Session實(shí)戰(zhàn)解析 說實(shí)話寫這篇東西的起因很直接我接手過一個(gè)訪問量正在往上走的項(xiàng)目系統(tǒng)之前一直是單機(jī)部署內(nèi)網(wǎng)壓測(cè)、外網(wǎng)訪問都挺正??梢坏┌褢?yīng)用從1個(gè)實(shí)例擴(kuò)到3個(gè)實(shí)例線上立刻出問題。用戶前一個(gè)請(qǐng)求還在正常操作下一個(gè)請(qǐng)求回來就被引導(dǎo)去重新登錄客服那邊一天能收到幾十條“為什么老讓我重新登錄”的反饋。我排查了整整兩天中間試過調(diào)負(fù)載均衡策略、改Tomcat配置效果都不徹底最后拍板換成了標(biāo)題里這套組合Redis Spring Session。這不是網(wǎng)上常說的“臨時(shí)繞過”而是把Session的存儲(chǔ)位置從根本上搬到了應(yīng)用之外讓每一個(gè)實(shí)例都變成無狀態(tài)節(jié)點(diǎn)。如果你正在做微服務(wù)拆分、多實(shí)例部署或者只是單純想把單機(jī)應(yīng)用水平擴(kuò)容這套思路應(yīng)該能給你一個(gè)比較徹底、能直接落地的解決路徑。下面我把整個(gè)問題的來龍去脈、原理、實(shí)操步驟和上線后踩過的坑都梳理一遍內(nèi)容會(huì)偏“實(shí)戰(zhàn)記錄”風(fēng)格你可以邊看邊在本地復(fù)現(xiàn)。1. 單機(jī)Session的局限性多實(shí)例部署后為什么用戶被瘋狂踢下線1.1 一個(gè)真實(shí)故障輪詢策略導(dǎo)致用戶批量掉線先說當(dāng)時(shí)的現(xiàn)象。系統(tǒng)從單機(jī)擴(kuò)到3個(gè)實(shí)例前面掛了負(fù)載均衡策略是最常用的“輪詢”。邏輯上沒什么問題3臺(tái)機(jī)器平均分擔(dān)流量哪臺(tái)都能處理請(qǐng)求。結(jié)果用戶一登錄請(qǐng)求被分到實(shí)例A登錄成功JSESSIONID寫進(jìn)瀏覽器Cookie刷新頁(yè)面后下一個(gè)請(qǐng)求被輪詢到實(shí)例B實(shí)例B在自己的本地內(nèi)存里根本找不到這個(gè)Session于是判定用戶未登錄直接重定向到登錄頁(yè)。最迷惑人的是這個(gè)問題不是100%必現(xiàn)。同一個(gè)用戶點(diǎn)幾次有時(shí)能保持登錄有時(shí)被踢出來完全取決于當(dāng)前請(qǐng)求被分發(fā)到哪臺(tái)機(jī)器。我在本地復(fù)現(xiàn)的時(shí)候開著開發(fā)者工具看Network面板清一色的302跳轉(zhuǎn)Cookie明明沒丟服務(wù)器就是不認(rèn)。后來往日志里加了節(jié)點(diǎn)信息才發(fā)現(xiàn)所有“登錄無效”的請(qǐng)求都落在非登錄節(jié)點(diǎn)上。到這一步問題的定位已經(jīng)很明確HttpSession默認(rèn)只存在于單個(gè)JVM進(jìn)程內(nèi)實(shí)例之間互相不知道對(duì)方手里的Session。1.2 理解HttpSession的“本地宿命”狀態(tài)為什么只在單個(gè)實(shí)例里Java Web開發(fā)里HttpSession的默認(rèn)實(shí)現(xiàn)類是存在應(yīng)用服務(wù)器內(nèi)存里的也就是Tomcat、Jetty這類容器的JVM堆。當(dāng)你在代碼里執(zhí)行request.getSession().setAttribute(user, user)底層就是在當(dāng)前實(shí)例的堆內(nèi)存里維護(hù)一個(gè)Map結(jié)構(gòu)key是Session IDvalue是屬性集合。這個(gè)Map的生命周期被死死綁定在單個(gè)JVM上。單機(jī)部署時(shí)沒有問題因?yàn)樗姓?qǐng)求都打到同一個(gè)JVMSession數(shù)據(jù)天然可見。但一旦拆成多個(gè)實(shí)例每個(gè)實(shí)例都有自己獨(dú)立的內(nèi)存A實(shí)例保存的Session對(duì)B實(shí)例來說就是“不存在的數(shù)據(jù)”。負(fù)載均衡把請(qǐng)求撒到不同實(shí)例上時(shí)用戶會(huì)話自然就“丟”了。本質(zhì)是會(huì)話狀態(tài)Session State和計(jì)算節(jié)點(diǎn)Application Instance被綁死在一起橫向擴(kuò)容時(shí)狀態(tài)沒有跟著擴(kuò)容。1.3 ip_hash和Session復(fù)制為什么只是“緩解”而不是“修復(fù)”我第一反應(yīng)是改負(fù)載均衡策略把輪詢改成ip_hash讓同一IP的請(qǐng)求固定打到同一臺(tái)實(shí)例。這個(gè)方案在內(nèi)部辦公網(wǎng)絡(luò)環(huán)境下驗(yàn)證是有效的但放到公網(wǎng)環(huán)境就露餡了。移動(dòng)網(wǎng)絡(luò)下用戶經(jīng)常切換基站出口IP會(huì)變化公司、家庭、4G/5G網(wǎng)絡(luò)來回切換時(shí)IP也不固定還有一些代理和NAT場(chǎng)景同一個(gè)用戶每次請(qǐng)求的源IP根本不是同一個(gè)。IP一變化ip_hash就把請(qǐng)求分到另一臺(tái)實(shí)例用戶一樣被踢。更麻煩的是即使IP一直穩(wěn)定如果某臺(tái)實(shí)例要做滾動(dòng)發(fā)布或重啟固定在這臺(tái)實(shí)例上的所有在線用戶會(huì)在重啟期間集體掉線。ip_hash本質(zhì)上是在“請(qǐng)求入口”層面想辦法把用戶留在同一個(gè)節(jié)點(diǎn)上它沒有解決“Session狀態(tài)不共享”的根因只是降低了狀態(tài)串臺(tái)的概率。我也看過Session復(fù)制方案。Tomcat支持把Session變更廣播到集群中的其他節(jié)點(diǎn)這樣每個(gè)實(shí)例都復(fù)制一份全量Session。但復(fù)制帶來的問題同樣明顯隨著在線用戶增多集群內(nèi)需要同步的數(shù)據(jù)量成倍增長(zhǎng)廣播風(fēng)暴、網(wǎng)絡(luò)開銷、延遲抖動(dòng)很快會(huì)出現(xiàn)。而且這個(gè)方案強(qiáng)依賴具體應(yīng)用服務(wù)器廠商的實(shí)現(xiàn)換容器、換云平臺(tái)時(shí)兼容成本很高。Session復(fù)制把狀態(tài)從一個(gè)節(jié)點(diǎn)復(fù)制到所有節(jié)點(diǎn)本質(zhì)上還是在“單機(jī)Session”的框架里打轉(zhuǎn)治標(biāo)不治本。2. Redis Spring Session的組合原理這為什么算“最終方案”2.1 Spring Session接管了Session的生命周期而不是存?zhèn)€key那么簡(jiǎn)單要理解為什么這套組合能解決問題先搞清楚Spring Session干了什么。Spring Session不是一個(gè)簡(jiǎn)單的“Session工具類”它的核心是通過一個(gè)Servlet過濾器——SessionRepositoryFilter——把應(yīng)用原本使用的HttpSession實(shí)現(xiàn)整個(gè)替換掉。具體流程是這樣的請(qǐng)求進(jìn)入Servlet容器后SessionRepositoryFilter會(huì)先把原始的HttpServletRequest包裝成一個(gè)SessionRepositoryRequestWrapper。當(dāng)你調(diào)用request.getSession()時(shí)它不再?gòu)娜萜鞅镜氐腟essionManager里拿對(duì)象而是從Spring Session配置好的SessionRepository里去取。這個(gè)SessionRepository可以是基于Redis、JDBC、MongoDB等任意持久化存儲(chǔ)實(shí)現(xiàn)我們這里用的是RedisSessionRepository。整套機(jī)制對(duì)外暴露的接口仍然是標(biāo)準(zhǔn)的HttpSession所以業(yè)務(wù)代碼基本不用改動(dòng)以前怎么用session.setAttribute()現(xiàn)在還是怎么用。Spring Session在背后幫你完成了Session的創(chuàng)建、讀取、寫入、過期刪除并且把數(shù)據(jù)序列化后存到Redis。這里有一個(gè)關(guān)鍵點(diǎn)Session的狀態(tài)不再存放在應(yīng)用實(shí)例的本地內(nèi)存而是被抽離到一個(gè)獨(dú)立的、所有實(shí)例都能訪問的存儲(chǔ)層。2.2 Redis里到底存了哪些key一個(gè)登錄用戶的數(shù)據(jù)結(jié)構(gòu)長(zhǎng)什么樣光說“把Session存到Redis”有點(diǎn)抽象看完Redis里的實(shí)際數(shù)據(jù)結(jié)構(gòu)你會(huì)有更直觀的理解。Spring Session在Redis中主要維護(hù)以下幾類key。第一類是主數(shù)據(jù)key默認(rèn)前綴是spring:session:sessions:sessionId類型是Hash。這個(gè)Hash里存了Session的創(chuàng)建時(shí)間、最后訪問時(shí)間、最大不活躍間隔、以及你通過setAttribute寫入的每一個(gè)業(yè)務(wù)屬性。比如你用session.setAttribute(loginUser, userInfo)Redis里就會(huì)多出一個(gè)fieldfield名是sessionAttr:loginUservalue是序列化之后的用戶信息。第二類是過期索引key格式是spring:session:expirations:timestamp類型是Set。這里面保存了一批即將在指定時(shí)間點(diǎn)過期的Session ID供后臺(tái)任務(wù)定點(diǎn)掃描使用。Spring Session并不是完全依賴Redis的key過期機(jī)制來清理Session因?yàn)镽edis key過期事件并不可靠可能丟失、可能延遲。它的策略是每個(gè)被訪問的Session都會(huì)刷新自己的最后訪問時(shí)間同時(shí)由一個(gè)專門的維護(hù)任務(wù)在到達(dá)過期時(shí)間點(diǎn)時(shí)把還在集合里的Session ID找出來做顯式刪除。第三類是查詢索引key格式是spring:session:findByIndexName:索引名:索引值比如按用戶名建立索引之后可以快速查出某個(gè)用戶當(dāng)前對(duì)應(yīng)的Session列表。做強(qiáng)制下線、在線用戶列表這類功能時(shí)這個(gè)索引很有用。通過這幾種key的組合Spring Session把Session的讀寫、過期、查詢都安排得明明白白。Redis本身就是KV存儲(chǔ)Hash結(jié)構(gòu)天然適合存儲(chǔ)“屬性集合”這種數(shù)據(jù)形態(tài)TTL機(jī)制又和Session的過期時(shí)間能對(duì)應(yīng)上。選Redis的根本原因不是因?yàn)樗芫彺娑且驗(yàn)樗峁┝艘徽追植际江h(huán)境都能訪問的、帶超時(shí)能力的、結(jié)構(gòu)足夠靈活的數(shù)據(jù)存儲(chǔ)能力。2.3 這套組合帶來的三個(gè)直接收益收益是很直觀的。第一是實(shí)例徹底無狀態(tài)化。應(yīng)用節(jié)點(diǎn)不再持有用戶狀態(tài)新增機(jī)器、縮減機(jī)器、滾動(dòng)重啟對(duì)在線用戶沒有任何影響。用戶在某臺(tái)機(jī)器上登錄下一次請(qǐng)求被負(fù)載均衡分到另一臺(tái)機(jī)器依舊能從Redis里拿到同一個(gè)Session。擴(kuò)容從“有狀態(tài)擴(kuò)容”變成了“無狀態(tài)擴(kuò)容”技術(shù)上輕松了一個(gè)量級(jí)。第二是故障影響面大幅縮小。以前如果一臺(tái)實(shí)例宕機(jī)那臺(tái)機(jī)器上的所有在線用戶集體掉線?,F(xiàn)在實(shí)例宕機(jī)只要Redis集群還穩(wěn)著用戶根本感知不到后端少了一臺(tái)機(jī)器請(qǐng)求被自動(dòng)分發(fā)到其他健康實(shí)例Session照??捎?。第三是統(tǒng)一了會(huì)話管理能力。你可以通過Redis里的Session數(shù)據(jù)做全局的用戶登錄態(tài)清理比如后臺(tái)強(qiáng)制踢人下線、限制賬號(hào)同時(shí)在多端登錄、構(gòu)建實(shí)時(shí)在線用戶列表。這在單機(jī)Session時(shí)代幾乎不可想象但在多個(gè)微服務(wù)共享同一個(gè)Redis時(shí)這些功能實(shí)現(xiàn)起來非常順手。很多團(tuán)隊(duì)最后選這套方案不只是為了“解決掉線”而是為了把會(huì)話能力沉淀成一套基礎(chǔ)設(shè)施。3. 實(shí)操落地從依賴引入到雙實(shí)例驗(yàn)證3.1 依賴和版本選型Spring Boot 2.x/3.x別搞混直接給可用的依賴清單我用的是Maven。假設(shè)你的項(xiàng)目是標(biāo)準(zhǔn)的Spring Boot Web應(yīng)用需要引入三個(gè)starterdependency groupIdorg.springframework.boot/groupId artifactIdspring-boot-starter-web/artifactId /dependency dependency groupIdorg.springframework.boot/groupId artifactIdspring-boot-starter-data-redis/artifactId /dependency dependency groupIdorg.springframework.session/groupId artifactIdspring-session-data-redis/artifactId /dependency版本號(hào)我沒有手動(dòng)指定而是交給Spring Boot的依賴管理統(tǒng)一控制。這里要特別提醒spring-session-data-redis的版本必須和Spring Boot版本匹配最省心的做法就是讓Spring Boot BOM來管理它。自己?jiǎn)为?dú)指定版本很容易踩到API不兼容的坑尤其是Spring Boot 3.x和2.x之間包名、配置項(xiàng)差異很大。我這里本地驗(yàn)證用的是Spring Boot 2.7環(huán)境但下面的配置我會(huì)同時(shí)給出Spring Boot 3.x需要調(diào)整的地方。Spring Boot 3.x把Redis配置的前綴從spring.redis.*改成了spring.data.redis.*Session相關(guān)的配置不變。碰到3.x項(xiàng)目別慣性照著舊文檔抄否則配置項(xiàng)根本不會(huì)生效。3.2 關(guān)鍵配置Redis連接、Session存儲(chǔ)與命名空間配置文件是重頭戲。先說一個(gè)最容易出錯(cuò)的點(diǎn)Spring Boot 2.x和3.x的Redis連接配置前綴不一樣。Spring Boot 2.x的配置spring: redis: host: 127.0.0.1 port: 6379 password: abc123 database: 0 timeout: 3s lettuce: pool: max-active: 16 max-idle: 8 min-idle: 2 max-wait: 3sSpring Boot 3.x的配置spring: data: redis: host: 127.0.0.1 port: 6379 password: abc123 database: 0 timeout: 3s lettuce: pool: max-active: 16 max-idle: 8 min-idle: 2 max-wait: 3s兩段配置的內(nèi)容幾乎一樣唯獨(dú)嵌套層級(jí)從spring.redis變成了spring.data.redis。我用的是Lettuce客戶端“Lettuce連接池”需要單獨(dú)啟用spring.redis.lettuce.pool.*或3.x的spring.data.redis.lettuce.pool.*才會(huì)生效。如果不配連接池高并發(fā)下Lettuce很容易出現(xiàn)連接等待超時(shí)生產(chǎn)環(huán)境一定要配。Session本身的配置如下spring: session: store-type: redis timeout: 30m redis: namespace: demo-session flush-mode: on_save save-mode: on_set_attribute這里解釋幾個(gè)參數(shù)背后的含義。store-type: redis是明確告訴Spring Boot用Redis存儲(chǔ)Session不帶這個(gè)參數(shù)時(shí)Spring Boot可能會(huì)根據(jù)classpath自動(dòng)推斷但顯式寫出來更可控。timeout: 30m是Session最大不活躍間隔單位是m代表分鐘這個(gè)值最終會(huì)寫入Redis的TTL。生產(chǎn)環(huán)境要根據(jù)業(yè)務(wù)形態(tài)設(shè)置純管理后臺(tái)可以設(shè)短一點(diǎn)電商網(wǎng)站購(gòu)物車場(chǎng)景可能需要更長(zhǎng)。redis.namespace是給當(dāng)前應(yīng)用設(shè)置Redis key前綴如果多個(gè)應(yīng)用共用同一個(gè)Redis實(shí)例一定要設(shè)置不同的namespace否則不同應(yīng)用的Session數(shù)據(jù)會(huì)互相干擾。flush-mode: on_save表示Session每次請(qǐng)求處理結(jié)束時(shí)才把數(shù)據(jù)寫回Redis這是默認(rèn)模式。還有一個(gè)模式是immediate每次調(diào)用setAttribute時(shí)立刻寫Redis實(shí)時(shí)性高但性能差一般不建議生產(chǎn)環(huán)境使用。save-mode: on_set_attribute表示只要Session屬性發(fā)生變化就標(biāo)記為需要保存這是默認(rèn)行為通常不需要改動(dòng)。如果要通過Java配置類來開啟Redis Session存儲(chǔ)可以加上一個(gè)EnableRedisHttpSession注解Configuration EnableRedisHttpSession(maxInactiveIntervalInSeconds 1800) public class SessionConfig { }這個(gè)注解里可以配置最大不活躍間隔秒數(shù)和spring.session.timeout是等價(jià)的。我個(gè)人更推薦用配置文件來管理改參數(shù)時(shí)不用重新編譯打包。3.3 自定義Cookie序列化器Cookie名字、HttpOnly與SameSiteSpring Session默認(rèn)使用名為SESSION的Cookie來傳遞Session ID但很多老項(xiàng)目前端約定的是JSESSIONID。為了兼容業(yè)務(wù)系統(tǒng)通常要自定義一個(gè)CookieSerializerBean public CookieSerializer cookieSerializer() { DefaultCookieSerializer serializer new DefaultCookieSerializer(); serializer.setCookieName(JSESSIONID); serializer.setCookiePath(/); serializer.setUseHttpOnlyCookie(true); serializer.setSameSite(Lax); return serializer; }setCookiePath(/)要特別注意。如果項(xiàng)目部署在/api這類子路徑下Cookie path設(shè)置不對(duì)瀏覽器會(huì)在跨路徑請(qǐng)求時(shí)不再攜帶Cookie導(dǎo)致Session丟失。setUseHttpOnlyCookie(true)能防止JavaScript讀取Cookie降低XSS攻擊后的信息泄露風(fēng)險(xiǎn)。setSameSite(Lax)用于控制Cookie在跨站請(qǐng)求時(shí)的發(fā)送策略對(duì)前后端分離的部署方式影響很大。如果你的系統(tǒng)還有HTTPS環(huán)境可以開啟serializer.setUseSecureCookie(true)確保Cookie只通過HTTPS傳輸。3.4 雙實(shí)例聯(lián)調(diào)腳本證明Session真的共享了配置全部搞定后驗(yàn)證邏輯很簡(jiǎn)單本地起兩個(gè)應(yīng)用實(shí)例端口分別設(shè)為8081和8082然后在8081上登錄獲取Cookie再用這個(gè)Cookie去訪問8082的接口。如果8082能返回當(dāng)前登錄用戶的信息說明Session已經(jīng)成功共享。第一步先在一個(gè)終端啟動(dòng)第一個(gè)實(shí)例mvn spring-boot:run -Dspring-boot.run.arguments--server.port8081第二個(gè)終端啟動(dòng)第二個(gè)實(shí)例mvn spring-boot:run -Dspring-boot.run.arguments--server.port8082假設(shè)項(xiàng)目里有一個(gè)登錄接口/api/login和一個(gè)獲取當(dāng)前用戶的接口/api/user/info。用curl先登錄curl -i -X POST http://localhost:8081/api/login \ -H Content-Type: application/json \ -d {username:admin,password:123456}響應(yīng)頭里能看到Set-Cookie: JSESSIONIDxxxxx; Path/; HttpOnly。把這個(gè)Cookie值記下來再去請(qǐng)求8082的接口curl -i http://localhost:8082/api/user/info \ -H Cookie: JSESSIONIDxxxxx正常返回用戶信息就是驗(yàn)證通過。這時(shí)再去Redis里檢查一下redis-cli keys demo-session:* hgetall demo-session:sessions:xxxxx能看到Session屬性已經(jīng)落在Redis里而且8082實(shí)例讀取的底層數(shù)據(jù)源是同一個(gè)Redis。這套驗(yàn)證在本地大概10分鐘就能跑完比純看理論踏實(shí)得多。4. 生產(chǎn)環(huán)境下踩過的坑亂碼、覆蓋、網(wǎng)關(guān)和內(nèi)存4.1 序列化亂碼與JSON反序列化失敗看懂根因比替換配置更重要上線運(yùn)行不到一周我就發(fā)現(xiàn)一個(gè)隱蔽問題Redis里存的Session屬性值有一大堆看不懂的字節(jié)。直接用hgetall查看某個(gè)Session時(shí)field的值長(zhǎng)這樣\xac\xed\x00\x05t\x00\x03com...這種以\xac\xed開頭的亂碼是Java標(biāo)準(zhǔn)JDK序列化機(jī)制的產(chǎn)物。Spring Session默認(rèn)使用JDK自帶的序列化器把對(duì)象轉(zhuǎn)成二進(jìn)制字節(jié)后再塞進(jìn)Redis。它的問題有兩個(gè)一是不可讀排查問題時(shí)瞪大了眼也看不出里面存的是什么二是兼容性差如果對(duì)象類的結(jié)構(gòu)發(fā)生變化比如新增字段、刪除字段舊數(shù)據(jù)反序列化時(shí)直接拋InvalidClassException。解決辦法是替換Redis序列化器。Spring Session默認(rèn)從springSessionDefaultRedisSerializer這個(gè)Bean獲取序列化器所以我只需要覆蓋這個(gè)Bean即可Bean public RedisSerializerObject springSessionDefaultRedisSerializer() { return new GenericJackson2JsonRedisSerializer(); }注意這里必須叫springSessionDefaultRedisSerializer不是隨便定義個(gè)RedisTemplate的序列化器。很多人在這里踩坑配置了RedisTemplateString,Object的序列化方式結(jié)果Session數(shù)據(jù)還是JDK序列化因?yàn)镾pring Session內(nèi)部根本不走RedisTemplate的默認(rèn)序列化邏輯。換JSON序列化之后還有一個(gè)更深的坑要提醒JSON串里默認(rèn)會(huì)帶上類信息class字段用來反序列化時(shí)確定目標(biāo)類型。一旦你的用戶類從User改名為Account或者在包里移動(dòng)了位置Redis里舊數(shù)據(jù)的類路徑已經(jīng)不存在了反序列化直接失敗。我后來定的規(guī)矩是涉及Session里保存對(duì)象的字段變更時(shí)要么提前清空線上Redis的Session前綴要么在代碼里寫一個(gè)兼容的轉(zhuǎn)換處理器。老數(shù)據(jù)有時(shí)候舍不得清但Session本來就是“丟了就讓用戶重新登錄”的臨時(shí)數(shù)據(jù)優(yōu)先保證系統(tǒng)可用比死守?cái)?shù)據(jù)更實(shí)際。4.2 用戶的并發(fā)請(qǐng)求導(dǎo)致Session覆蓋一個(gè)被低估的丟失更新問題這個(gè)坑不是馬上暴露的而是上線后功能越加越多才慢慢顯現(xiàn)?,F(xiàn)象是用戶同時(shí)打開多個(gè)瀏覽器標(biāo)簽頁(yè)在一個(gè)標(biāo)簽頁(yè)里更新了Session中的用戶資料隨后在另一個(gè)標(biāo)簽頁(yè)里操作時(shí)第一次更新“消失”了。根因要從Redis的讀寫模式說起。Spring Session在請(qǐng)求結(jié)束后把整個(gè)Session對(duì)象寫回Redis這個(gè)操作不是原子更新局部字段而是讀出Session、反序列化、修改屬性、整體寫回的過程。當(dāng)兩個(gè)請(qǐng)求分別落在兩個(gè)不同的實(shí)例上兩邊幾乎同時(shí)從Redis讀出同一個(gè)Session的同一個(gè)字段各自在本地做修改然后先后寫回Redis。后寫的那個(gè)會(huì)把先寫的覆蓋掉其中一個(gè)請(qǐng)求的修改就丟了。這種問題場(chǎng)景和并發(fā)寫數(shù)據(jù)庫(kù)記錄時(shí)的“丟失更新”完全一致只是很多人沒意識(shí)到Session也會(huì)遇到。我當(dāng)時(shí)的排查思路是確認(rèn)哪些數(shù)據(jù)會(huì)被高頻并發(fā)寫。比如用戶每次訪問時(shí)更新“最近訪問時(shí)間”這個(gè)字段就在并發(fā)時(shí)頻繁觸發(fā)覆蓋。解決辦法分兩路走一是把并發(fā)寫頻率最高的數(shù)據(jù)從Session里挪出去比如“最近訪問時(shí)間”這種數(shù)據(jù)完全可以通過Redis單獨(dú)記錄一個(gè)user:online:userId的key來管理不必塞進(jìn)Session二是盡量減少Session里的可變屬性總量Session只保留登錄憑證、用戶主鍵這類低頻變化的標(biāo)識(shí)性數(shù)據(jù)其余高頻業(yè)務(wù)數(shù)據(jù)走專門設(shè)計(jì)的Redis key。如果確實(shí)需要保留并發(fā)寫場(chǎng)景可以考慮把Session的存儲(chǔ)粒度做細(xì)或者引入分布式鎖來控制同一Session的寫并發(fā)。但我的真實(shí)感受是最佳策略不是“控制并發(fā)”而是“減少寫入”——Session的屬性越少、越穩(wěn)定這套方案就越穩(wěn)。它本質(zhì)上是一個(gè)定位標(biāo)識(shí)不是內(nèi)容倉(cāng)庫(kù)。4.3 網(wǎng)關(guān)轉(zhuǎn)發(fā)與前后端分離下的Cookie透?jìng)黜?xiàng)目改造到一定階段前端從服務(wù)端渲染換成了前后端分離請(qǐng)求統(tǒng)一走API網(wǎng)關(guān)。網(wǎng)關(guān)部署完之后又冒出一個(gè)新問題用戶明明登錄成功了緊接著請(qǐng)求業(yè)務(wù)接口卻返回401。瀏覽器里Cookie明明還在后端Session也存在Redis里但請(qǐng)求就是帶不到后端。排查下來發(fā)現(xiàn)是網(wǎng)關(guān)這一層把Cookie信息丟掉了。網(wǎng)關(guān)在轉(zhuǎn)發(fā)HTTP請(qǐng)求時(shí)如果配置里沒有顯式轉(zhuǎn)發(fā)Cookie頭后端拿到的請(qǐng)求里就不會(huì)包含JSESSIONID。后端的SessionRepository完全不知道該查找哪個(gè)Session自然判定未登錄。解決方式是在網(wǎng)關(guān)的轉(zhuǎn)發(fā)配置里把Cookie頭原樣透?jìng)?。以常見的網(wǎng)關(guān)配置為例在路由規(guī)則里加一行轉(zhuǎn)發(fā)Headerfilters: - PreserveHostHeader - RewritePath/api/(?segment.*), /$\{segment} default-filters: - DedupeResponseHeaderAccess-Control-Allow-Credentials Access-Control-Allow-Origin核心是確保轉(zhuǎn)發(fā)請(qǐng)求時(shí)保留瀏覽器提交的Cookie頭同時(shí)響應(yīng)時(shí)不要重復(fù)添加互相沖突的CORS頭??缬蚺渲靡彩莻€(gè)關(guān)鍵點(diǎn)。前后端域名不一致時(shí)后端必須配置CORS允許攜帶憑證Bean public CorsWebFilter corsWebFilter() { CorsConfiguration config new CorsConfiguration(); config.setAllowCredentials(true); config.addAllowedOrigin(https://frontend.example.com); config.addAllowedHeader(*); config.addAllowedMethod(*); return new CorsWebFilter(source - config); }這里有一個(gè)安全限制必須要知道allowCredentials(true)時(shí)allowedOrigins不能寫成*必須指定具體域名。瀏覽器規(guī)范明確禁止攜帶憑證的跨域請(qǐng)求使用通配符來源。前端調(diào)用時(shí)也要設(shè)置withCredentials: true否則即使后端允許瀏覽器也不會(huì)主動(dòng)攜帶Cookie。這個(gè)跨域問題排查起來比較費(fèi)時(shí)我每次都會(huì)先看瀏覽器Network面板里請(qǐng)求是否帶上了Cookie再看響應(yīng)頭里Access-Control-Allow-Credentials是否為true兩步能定位90%的問題。4.4 Redis內(nèi)存持續(xù)增長(zhǎng)與session過期回收失效還有一個(gè)經(jīng)典問題系統(tǒng)跑了一段時(shí)間后Redis內(nèi)存占用越來越高明明設(shè)置了Session過期時(shí)間數(shù)據(jù)卻沒有按預(yù)期釋放。這通常不是Spring Session沒做清理而是清理機(jī)制依賴某些前提條件。Spring Session的過期清理依賴兩個(gè)關(guān)鍵機(jī)制一個(gè)是通過spring:session:expirations:timestamp集合定時(shí)掃描另一個(gè)是Redis的過期key事件通知。如果Redis實(shí)例關(guān)閉了notify-keyspace-events配置Spring Session就無法收到key過期事件來觸發(fā)后續(xù)的刪除操作。雖然掃描任務(wù)也能兜底但事件通知關(guān)閉時(shí)清理效率和實(shí)時(shí)性都會(huì)下降內(nèi)存里會(huì)殘留更多等待淘汰的Session數(shù)據(jù)。建議在Redis配置里打開必要的事件通知notify-keyspace-events Exgx這個(gè)配置項(xiàng)開啟了過期key事件和通用命令事件。生產(chǎn)環(huán)境調(diào)整Redis配置后要記得驗(yàn)證生效用config get notify-keyspace-events確認(rèn)。更需要注意的另一個(gè)坑是Redis內(nèi)存淘汰策略。如果Redis配置的maxmemory-policy是allkeys-lru那么當(dāng)內(nèi)存達(dá)到上限時(shí)Redis會(huì)從所有key里挑選最久未用的key來淘汰Session數(shù)據(jù)也會(huì)被當(dāng)成普通緩存清掉哪怕它還沒到過期時(shí)間。結(jié)果就是用戶明明還在活躍Session卻被Redis強(qiáng)制刪除用戶被莫名其妙踢下線。這種情況特別難排查因?yàn)槿罩纠锟床坏饺魏螆?bào)錯(cuò)就是偶發(fā)掉線。后來我把Redis的內(nèi)存淘汰策略改成了volatile-lru這個(gè)策略只淘汰設(shè)置了TTL的key。Session主key自帶TTL業(yè)務(wù)緩存如果不需要被淘汰可以不帶TTL。這樣既能保證Redis內(nèi)存可控又不會(huì)誤傷活躍Session。同時(shí)我還寫了一個(gè)定時(shí)巡檢腳本每天檢查一次Redis內(nèi)存增長(zhǎng)曲線和spring:session:*的key數(shù)量如果發(fā)現(xiàn)Session數(shù)量異常增多基本都是某個(gè)接口在瘋狂創(chuàng)建新Session這時(shí)會(huì)去檢查業(yè)務(wù)代碼里是不是有“一登錄就訪問request.getSession(false)并觸發(fā)創(chuàng)建新Session”的邏輯。結(jié)尾改動(dòng)之外我留下的一點(diǎn)心得整套方案落地后再回看技術(shù)層面的難度其實(shí)不算高真正的難點(diǎn)在于兩處一是意識(shí)到“Session狀態(tài)必須和實(shí)例解耦”這個(gè)根本前提二是上線后通過實(shí)際問題把方案打磨到符合業(yè)務(wù)特性。如果你還在單機(jī)架構(gòu)里提前把Session遷到Redis并不是過度設(shè)計(jì)而是一筆很劃算的“架構(gòu)保險(xiǎn)”因?yàn)榈鹊綌U(kuò)容當(dāng)天再處理緊迫感和故障壓力會(huì)讓你沒有充足時(shí)間考慮細(xì)節(jié)。我個(gè)人的體會(huì)是遷到Redis Spring Session之后最需要改變的其實(shí)是“往Session里亂塞東西”的習(xí)慣。單機(jī)時(shí)代往Session塞什么都能跑但分布式環(huán)境下Session變成了分布式共享存儲(chǔ)每一次寫入都對(duì)應(yīng)一次網(wǎng)絡(luò)請(qǐng)求加一次序列化濫用會(huì)直接把Redis拖成瓶頸。我現(xiàn)在定的原則很簡(jiǎn)單Session里只放穩(wěn)定且低頻使用的核心標(biāo)識(shí)數(shù)據(jù)比如用戶ID、登錄令牌、少量偏好設(shè)置所有需要業(yè)務(wù)計(jì)算和頻繁變化的數(shù)據(jù)單獨(dú)設(shè)計(jì)Redis緩存key或落庫(kù)。這套原則比任何技術(shù)選型都更影響長(zhǎng)期穩(wěn)定。最后分享一個(gè)實(shí)用小技巧本地開發(fā)環(huán)境可以保留內(nèi)存存儲(chǔ)只把生產(chǎn)環(huán)境切到Redis避免每個(gè)開發(fā)同學(xué)都依賴一個(gè)共享的Redis實(shí)例。具體做法是在application.yml里用多環(huán)境配置區(qū)分dev和proddev環(huán)境不配spring.session.store-type讓它走Spring Boot默認(rèn)的內(nèi)存Sessionprod環(huán)境顯式配置成redis。這樣開發(fā)調(diào)試不受Redis狀態(tài)影響線上又能享受無狀態(tài)擴(kuò)容的紅利。兩套環(huán)境隔離好開發(fā)效率和系統(tǒng)穩(wěn)定性都可以兼得。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
精品一区二区三区三区| 亚洲亚洲人成综合网络| 99成人网一区| 国产午夜精品一区二区三区嫩草| 婷婷五月天免费视频| 久久艹网| 啪啪六月婷婷| 成人AV在线电影| 丁香婷婷色五月| 大香蕉久久伊人婷婷五月丁香| 色综合久久久久| 秋霞午夜理论| 五月丁香精品| 无语停婷丁香网| 久久久99视频| 色婷婷aV四虎| 久久98| 五月婷婷激情四季| 丁香花操逼| 五月丁香激情欧洲啪啪| 激情久久五月天| 五月丁香六月| 另类图片天天影视在线观看| 色婷婷狠狠干| 91好好热日本在线| 大香蕉五月婷婷丁香| 五月婷婷婷丁香播| 丁香五月婷婷欧美成人色图| 人人人操Av| 五月婷狠狠| 五月天久久婷婷| 婷婷六月开心网| 视频1区2区| 99在线观看精品视频| 婷婷五月丁香青青草在线| 五月丁花六月丁香综合| 五月婷综合性中心| 天天拍夜夜撸| 欧美情月伍月天| 丁香五月婷婷国产在线| 99热久久这里只有精品| 婷婷激情五月| 色五月婷婷久久| 丁香成人五月天| 丁香丁香激情网| 婷婷久久婷婷| 成人啪啪色婷婷久| 丁香婷婷久| 五月天婷婷色| 久9视频| 丁香婷婷婷五月| 五月激情婷婷图片基地| 99视频在线| 亚洲五月天激情| 国产日批视频| 激情综合网之激情五月| 五月婷六月综合在线观看| 丁香五月伊人| 丁香五月婷婷啪啪| 五月天婷婷在线播放| 五月婷婷开心五月| 5月丁香婷婷激情网| 2020久久婷婷五月| 色婷婷先锋| 激情五月综合六月丁香婷婷狠狠干| 九色PORNY自拍成人精彩视频| 色吊操色妞| 欧美午夜乱妇午夜福利| 97干干干丁香| 激情电影五月婷婷| 青996青| 日本三级片片| 91操片| 99在线精品视频| 狠狠狠狠狠草| 5月婷婷激情在线| 国产在线中文字幕| www.主妇. com| 亚洲综合草草| 成人色五月天婷婷| 美女激情婷婷| 很很干夜夜干| 91超碰在线观看| 91色涩| 五月婷婷成人| 色一情一乱一乱一区91Av| 激情五月综合网| 久热这里只有精品3| 日韩在线视频中文字幕| 色就是色婷婷五月亚洲激情| 色五月av伊人| 婷婷五月丁香基地| 婷婷五月色惰| 午夜一区| 182tv992tv人之初午夜免费观看| 五月天激情网址| www.99日本| 激情久久五月天| www.色综合| 亚洲综合激情五月久久| 亚洲综合婷婷六月丁香五月| 九九婷婷综合| 蜜乳av一级av| 超碰在线播放免费观看| 五月总合激情网| 五月婷五月婷伊人伊人五月婷| 久久这里只有精品5| 精品一区二区三区四区五区六区介绍| 玖玖资源站蜜臀| 色色色色色色色色色色色色色色,网站| 大香伊人久色| 97亚洲婷婷| 99热国产| 婷婷五月综合网| 色婷婷狠| 九 九九九AV| 天天射色五月天| 99热国产婷婷| 大狠狠在线| 六月激情婷婷| 国产av一区二区三区| 1024在线视频| 婷婷六月色丁香视频在线观看| 婷婷丁香五月天亚洲| 啪啪小说五月天| 婷婷五月香蕉| 婷婷五月天性爱视频| 超碰激情网| 色婷婷视频| 免费人人操| 亚洲日韩国产黑丝黑丝AVAV一区二区三区| 五月婷婷色激情| 99视频精品全部免费观看| 久久天天| 色婷婷五月丁香色| 人妻肉射免费观看| 天天做天天爱天天高潮| 欧美在线干| 激情 婷婷 插| 99色综合| 欧美综合激情五月丁香| 这里只有精品免费| 婷婷情色五月天| 色五月婷婷大| 五月婷激情| 超碰97在线观看免费| 99九九视频精彩在线| 丁香五月网络网络| 91久久久久久| 久久久久久久久久8888| 99热热热国产超碰| 另类小说激情五月天| 九九热只有精品| Www.se.久久| 五月色亭丁香| 99在线观看| 婷婷爱爱蜜臀天天操| 九九久久视频| 色婷婷综合久久| 激情五月婷婷丁香六月| 婷婷伊人网| 狠狠精品干练久久久无码中文字幕| 九九色色色| 色婷婷五月天小说| 激情五月天.色网| 丁香五月天欧洲在线| 成人丁香色| 大香久久伊人网| 狠狠干五码| 曰韩少妇内射免费播放| 九久热| 一夜福利不卡| 色五月情| 思思久久青草热| 高清一区二区三区日本久| 天天做天天爱天天摸| 91人人操人人爱| 亚洲AV永久无码影院黑人| 中文aV网| 超碰在线资源| www.五月丁香| 丁香婷婷色五月| 色婷婷a v| 91九色精品| 天天综合网在线| 亚洲色区17| 五月色俺婷婷| 久久资源综合| 亚洲精品视频在线播放| WWW.激情| 丁香六月综合激情| 丁香五月久久综合| 五月天综合婷婷| 嫩草AV久久伊人妇女超级A| 99综合视频在线| 99色色视频| 精品视频这里只有精品| 亚洲网综合在线| www,五月天激情| 久热精彩视频98| 天天爽免费视频| 免费97碰碰| 亚洲精品99| 91九九九九九九| 99免费视频在线观看爱| 日韩av在线免费观看| 久久总和99| 色五月天堂| 久久婷婷五月| www激情com| 欧美VA视频| 婷婷香蕉| 噜噜视频| 久草丁香婷婷1024| 2017狠狠干| 成人色五月天婷婷| 99热在线观看成人| 激情综合婷婷| 天天视频亚洲| www。五月天激情| 三十熟女| 大香蕉婷婷色| 婷婷激情五月天网站| 极品人妻VIDEOSSS人妻| 女同激情久久av久久| 久久这里面只有精品视频| 免费黄网不卡AV| 丁香五月激情在线| 激情五月婷婷欧美极品 | 噼里啪啦完整版中文在线观看| er99免费视频在线| 人伦30P| 色五月婷婷基地| 亚州精品色情无码A片| 丁香五月激动深爱欧美| 日韩综合天堂| 黄色AAAAAAA| 久久98| 青草激情在线| 婷五月天在线草| 98热精品| 国产免费性爱| 激情综合网五月婷婷| 久久亚洲婷婷| 熟女五月天久久综合| 大胆伊人久久| 久操乱| 夜夜撸天天操| 亚洲激情网| 亚洲五月天伊人| 丁香五月123| 亚洲欧洲中文日韩久久AV乱码| 开心五月婷婷| www.天天日| 停停色综合伊人| 久婷婷婷| 九九色大香蕉| 色噜噜狠狠色综合日日| 日本本土色网第一区| 六月婷婷综合| 人妻性爱| 丁香六月天婷婷开心综合| 五月天婷婷色色| 深爱婷婷网| 五月丁香婷中文字幕| 另类激情综合| 久久综合爱| 9 大屁股在线视频精品| 亚洲成人在线观看网址| www.99.色| 国产精品大香蕉| 九九99九九99| 欧美色图天堂网| 婷婷成人AV| 俺去啦综合网| 午夜五月天| SS丁香五月婷婷| 桃色伊人在线| 色五月天网| 激情小说婷婷小说| 婷婷免费成人视频| 色五月婷婷视频| 激情婷婷综合| 五月丁香六月婷婷a v| 99国产小视频免费观看| 99在线免费视频| 97热九九| 丁香青青五月天| 婷婷丁香无码专区| 天天爽日日爽夜夜爽| 夜夜操少妇| 精品久久人妻热| 综合色播| 狠狠狠人妻| 亚洲综合丁香婷婷六月天| 他改变了拜占庭| 久久婷婷丁香五月一二三| 丁香五月网站| 中文字幕av在线| 婷婷五月综合色拍| 思思久久网| 精品九九在线观看视频| av色婷婷| 国精产品一区二区三区| 色五月成人| 99热综合| 久久东京热婷婷五月| 丁香五月婷婷性爱| 激情五月天在线免费美女视频| 91日韩在线| 婷婷五月噜噜| 国产99久久久国产精品免费看| 久久婷婷网址| 九色99视频| 日本婷婷色| www色哟哟| 色色五月综合| 99自拍视频| 久久网站免费亚洲| 六月色色婷婷| 日韩黄色电影| 色五月大香蕉| 中文字幕人妻AV| 天堂网色色| 伊人久久大香线蕉av一区| 五月婷婷之综合激情| 久草婷婷| 久久九九99视频| 欧美毛卡| 婷婷五月天最新综合你懂的| 99福利视频| 色色网站| 九九色婷婷| 五月桃花网综合| 99人人操| 色婷婷五月天成人网| 2025天天操| 无码髙清| 久九男女天堂| 九色91美女| 色噜噜伊人| 夜夜操激情| 99热这里只有在线播放| 五月婷婷五月天激情网| 丁香五月天啪啪| 99热热热99精品丁香| 国产亚洲成人综合| 蜜臀av无码久久久久久久久 | 丁香六月婷| 99爱精品| 中文字幕亚洲-区久久99婷婷| 99久久婷| 五月天涩涩| 色色色综合色| 五月天激情图片网| 人妻五月天激情开心网| 无码人妻电影| 亚洲区1| 五月丁香久久精品在线观看| 色五月激情网| 91精选国| 五月丁香六月激情综合啪啪| 五月色婷婷影院| 国产又爽又猛又粗的视频A片 | 国产成人+亚洲+欧洲| 亚洲成人av在线| 91打屁股免费看| 色综合久久99色| 五月婷婷插一插| 色五月天激情| 国产免费av在线| 天天插轮理| 婷婷五月香蕉| 超碰精品国产首页| 九九成人精品| 裸睡玩奶头(高H)| 成人AV中文字幕| 西瓜美女a片| 亚洲精品亚洲人成人网| 在线不卡中文字幕| 激情五月,婷婷五月,丁香五月| 五月天婷婷社区| 色久99| 天天综合天天玩夜夜玩天天玩夜夜玩 | 亚洲欧美婷婷五月色综合| 色婷婷狠狠18yy| 99久热这里有精品| 色播五月婷婷| 亚洲精品视频在线播放| 成人网在线视频| 午夜激情四射影院| 五月综合缴情网| 天天日夜夜| 色婷婷视频| 婷婷六月综合基地| 超碰色女人| 日日操天天爽| 日本色啪| 99免费视频在线观看爱| 午夜AV网| 伊人AV五月婷| 天天日P天天射P| 色999;丁香五月| 狠狠精品干练久久久无码中文字幕| 久综合网| 能看的AV| 婷婷激情另类| 乱岳熟女50岁| 色播丁香婷婷五月激情| 91色综合网站在线| 亚洲婷婷激情五月天| 影音先锋日本三级资源| 99视频精品全部免费观看| 91蜜桃婷婷狠狠久久综合9色| 97人人射| 操一区| 男人的天堂999| www99精品| 婷婷五月香蕉| 久9视频| 五月天国产成人| 色中色综合| 五月婷婷在线短视频| 91人人爽狠狠狠| 欧美精品啪啪| 99综合网| 亚州精品久久久久AV无码| 丁香综合日产精品久久| 另类小说激情五月天| 久久全色| 国产成人网站在线观看| 天天摸,天天爽| 天天爽天天操| 五月天另类图片| 九月大香蕉| 激情五月天婷婷| 91九色中文字幕女在线观看| 开心五月婷婷激情| 五月天激情国产综合AV| 青青草原爱爱网| 操逼六区| 五月丁香久久久日婷婷久久婷婷日 | 久久久999精品| 色五月网址| 色婷婷电影| 丁香婷婷丁香五月欧美人| 国产特级毛片AAAAAAA高清| 午夜理论片最新午夜理论剧 | 日本一级| 亚洲AV激情五月综合网| Av中文在线| 婷婷少妇激情| 深爱激情九九五月天 | 成人丁香婷婷五月天| 99在线综合视频| 91性高潮久久久久久久久| 激情婷婷丁香五月天小说| 青草视频在线观看视频| 99re6久热只有精品6在线直播| 97在线/亚洲| 婷婷久久网| 这里只有精彩视| 亚洲色激情| 99热在线播放| WWW.桔色成人.COM| 天天草天天舔| 婷婷狠狠18禁久久| 一级操逼大片| 婷婷五月丁香综合| 天天天日天天天干| 婷婷丁香久久| 伊人激情网| 99久re热视频精品98| 激情黄色小说五月天| 五月停停色| 精品亚洲国产成人A片在线鸭王| 亚洲成人人人操| 激情五月丁香五月| 色婷婷另类| 久久婷婷视频| 色色a| 99超在线| 操久久网| www热久久yy9| 五月天婷婷狂暴白浆| 亚洲天堂爱爱| 激情文学五月丁香六月婷婷| 一本久久亚洲五月婷婷| 九九热中文| 97超级啪啪在线观看| 日韩AV大全| 色五月人妻| 欧美色骚婷婷五月天| 十区AV| 成人αV视频免费观看| 亚洲在线综合| 操操操Av| 开心五月深爱激情| 五月婷无码| 99精品视频偷拍| 大香蕉久久伊人网| 日韩AV免费电影在线播放| 狠狠操综合| 99精色| 青青草深爱激情网| 五月花综合网| 久操婷婷| 天天操B| 激情婷婷综合网| AV在线不卡播放| 精品色色| 91热爆在线| 色婷婷免费观看| 五月色婷婷综合| 五月欧美色色五月| 九九草热在线观看| 无码毛片992367| 2014天天爽| 青青草原亚洲天堂| 热99精品视频五月| 九热免费视频| xxxx久| 91chinese 在线| 丁香五月婷婷高清| 人妻Av在线| 99久久综合狠狠综合久久| 国精产品一区一区三区免费视频| 婷婷97| 欧美性爱五月天| 日韩999| PORNY九色9l自拍视频成人| 国产日韩欧美性爱| 99免费在线视频| 五月天播播| 高清无码视频网址| 五月婷婷啪啪综合网| 狠狠做婷婷| 五月丁香亚洲综合| 亚洲激情综合| 人妻综合网| 久久新地址| 91九色国产| 久热9| 操碰91| 激情综合网五月天| 丁香五月天堂| 69超碰在线| 九月丁香久久网| 丁香五月天91| 毛v一区二区视频| 久啪欧美| 色色色色综合网| 亚洲1区| 欧美又粗又大一区二区在线观看| 狠狠va| 亚洲婷婷激情888精品久| 午夜九九电影| 俺也高清无码高清视频| www.狠狠| 日韩啪啪网| 综合五月天| 中国丰满熟女A片免费观| 99燥99日| 探花搜索结果 - 黄上黄| 国产激情av| 五月婷婷色| 婷婷五月天777| 激情五月丁香六月婷婷| 一月婷婷色色| 精品无码久久久久久久久| 久久综合99综合| 99啪啪骑| 亚洲婷婷五月天在线激情综合网| 日本性激情色播| 色在线视频网2025| 99色在线| aaa久久久| 婷婷少妇激情| 五月婷婷香蕉| 五月天激情综合网| 精品亚洲国产成AV人片传媒| 色婷婷另类| 91精品久久久久久| 六月丁香激情综合| 日本综合色色| 超碰av在| 超碰99在线观看| 99re这里有精品手机在线| 99视频这里有精品| 五月激情在线| 丁香五月电影院在线观看| 五月丁香婷婷爱激情综合网| 五月天激情亚洲| 免费黄色视频网址| 沈娜娜av| 色婷婷久久综合久色| 精品A√| 欧美色婷婷| 久久久久久久,99精品视频| 玖玖无码中文| 天天做天天摸| 99精彩视频| 色综合狠狠色| 婷婷五月天激情五月天网站| 99精在线| 久热伊人9| 丁香五月大片| 激情AV| 操比激情五月| 色视五月天婷婷| 99在线视频精品| 玖玖婷婷色欲| 久久五月天激情婷婷| 五月丁香五月婷婷| 婷婷五月色综合香五月| 五月丁香婷婷无码中文| 91干视频| 亚洲四色五月| 婷婷综合网站| 丁香六月婷婷久久综合| 丁香六月婷婷开心| www婷婷| 99热每日| 精品福利911| 人人爱国产| 91se在线观看| 婷婷十月激情综合网| 国产AV一区二区三区日韩| 高清视频一区| 成人在线视频一区| 大香伊人婷婷| 欧美成人五月天| 国产精品扒开腿做爽爽爽A片唱戏| 变态另类9| 99只有这里有精品在线视频| 丁香八月综合激情| 五月丁香狠狠地噜噜噜噜| 九九在线精品| 亚洲精品成人| 91成人品| 色婷婷免费观看| 五月天婷婷视频小说| 亚洲九九99精品视频在线播放| 五月丁香怕怕综合| 日韩另类| 五月丁香在线视频观看| www.婷婷五月天| 超碰在线人人| 操久久网| 日本人妻A片成人免费看片| 另类 在线| 婷婷久久18| 色五月在线观看| 超碰国产一区| 狠狠五月激情丁香六月| 991自拍视频| 26uuuuuuuu国产| 天天色中文字幕女优AV| site:feetmall.com| 人人摸人人操人人爱| 激情久久天天| 影音 五月 婷婷 久久| 天天干天天操天天干天天操天天干天天操 | 五月丁六月香av| 午夜少妇在线观看视频| 婷婷五月丁香基| 91中文狠狠综合| 天天操天天谢| 91干99| 五月天开心婷婷激情网站| 日本少妇AA一级特黄大片| 99免费在线| 久久免费丁香| 大香蕉精品视频| 婷婷五月天堂网| 99热最新| 丁香五月天激情综合网| 亚洲综合碰| 五月天综合久久| 久久婷婷五月天激情四射| 婷婷丁香97| www.天天色综合| 狠狠精品干练久久久无码中文字幕| www.久久五月天.com| 丁香色婷婷色手机免费在线| 99爱在线精品视频免费观看| 婷婷爱爱蜜臀天天操| 日本综合色图| 国产99视频永久免费| 久热re视频在线观看网站| WWW五月| 玖玖爱综合网| 荡乳尤物3HP1V5| 婷婷丁香综合成人| 生活片五区| 亚洲精品色| 丁香六月爱综合| 色婷婷综合在线| 久久作爱| 丁香五月丁香伊人| 日韩欧美一道四区中文字幕| 色婷婷综合网| 人人做天天爱| 久综合色| 五月天色色无码| 开心婷婷中文字幕| 99在线观看视频免费| 伊人香大香蕉视频| 伊人网大香| 极品 少妇 内射| 色蜜婷婷| 久久精品一区二区三区四区| www.婷婷五月天| 丁香午月AV中文字幕| 色九九中文字幕| 四虎成人精品永久免费AV九九| 婷婷成人在线| 色在线99| 超碰97在线观看免费| www.91九色| 婷婷五月天激情在线观看 | 色色无码| 色噜噜狠噜噜视频| 激情伍月 欧美| 五月天婷婷AV| 高潮毛片又色又爽免费| 九九婷婷综合| 五月深爱激情网| 丁香六月婷婷综情欧美| 六月综合婷婷开心伊人| 熟女人妻一区二区三区免费看 | site:minyis.com| 欧美啪啪网| 日欧一片内射VA在线影院| 五月激情网站| 五月综合缴情网| 五月天第四色开心色播| 国产视频福利| 久久这里只有精品视频15 | 五月婷婷色情| 手机在线视频观看9| 中国丰满熟女A片免费观| 噜噜操操| 激情五月婷婷开心网| 日日婷婷不卡| 九九熱最新視頻| 久婷久婷| 91丨人妻丨国产丨丝袜| 国产黄色在线观看| 超碰av在线| 久99久在线| 亚洲九九视频| 深夜A片| 欧美丁香六月激情视频| 五月丁香手机在线| 99re视频在线播放| 亚洲综合一区二区| 久久婷婷六月综合综合| 色欲AVV| 成人午夜天| 欧美99热| 99色视频| 狠狠色噜噜狠狠狠888| 久久综合五月天| 99在线免费观看| 天天综合中文| 亚洲综合热| 人妻精品久久久久久| 思思热在线精品视频网站| 色五月丁香总合网| 丁香五月1页| 九久9精品| 久久人人九九| 色色色国产| 99热综合在线| 色色色在线| 欧美精产国品一二三区| 日本婷婷在线| 伊人婷婷大香蕉| 99网址在线看| 中文字幕不卡+婷婷五月| 成人综合视频在线| 情色婷婷五月天| 亚洲成人AV在线播放| 日本久久性| 色五月成人| 五月婷婷性爱| 色婷婷婷av| 噜噜噜噜噜日本视频| 99re久热只有精品6在线直播| 欧美精品久久久久久视频观看| 色七色九九| 婷婷黄色五月天在线视频| 亚洲熟妇AV综合网五月丁香伊人 | 五月婷婷综合网| 1000部毛片A片免费观看| 五月婷丁香| 成人做爰黄A片免费看直播室男男 A片试看120分钟做受图片 | 色婷婷4| 成年人99热| 深爱激情69热| 丁香五月婷婷五月天| 丁香婷婷色色| 人人摸人人搞| 成人综合网站| 有码一区二区三区| 久久五月天网| 91色久| 婷婷五月天777| 99热这里只有精品热| 五月天综合影院| 五月天开心网| 久久免片| 狠狠干五月| 亚洲视频1区| 天天搡日日搡aaaaⅩ| 婷婷亚洲五| 六月婷婷色宗合| 婷婷五月天开心网| 成人片在线播放| 粉嫩AV久久一区二区三区| 婷婷五月丁香五月基地| 无码橾| 久久只有这里精品免费| 天天橾日日橾夜夜橾17| 婷婷爱五月天| 97色色色| 久久99激情五月天| 日韩在线视频中文字幕| 丁香五月色综合色播五月| 伊人五月天婷婷| 九九这里是免费的视频5| 超碰免费人人| 九月av在线| 五月天婷婷综合久久| 丁香五月成人在线| 久综合色| 久久婷婷七月丁香| 婷婷综合精品| 国产片色| 狠狠色婷婷7777久| 色色婷婷综合| 亚洲超碰在线| 日韩在线五月天婷婷| 999热在线视频| 亚洲天堂婷婷丁香| 97婷婷丁香| 久久机只有这里精品| 九九热精品99| 国产婷婷婷| 97操操操| 婷婷色激情五月天| 五月天色五月| 亚洲超级碰| 天天艹天天色| 99婷婷| 超碰激情五月| 狠狠va| 九九九九国产| av人人操| 天堂五月婷婷| 色婷久久| 九九中文字幕九| 五月综亚洲| 九九综合精品| 伊人青涩网| oVV4WIB3vFi8D| 亚洲五月婷婷| 色婷在线视频| 青青草视频福利| 五月开心久久| 激情五月天综合网| 六月丁香婷婷五月| 免费看欧美成人A片无码| 91狠狠综合网| 亚洲视色| 久久色大香蕉| 亚洲人人96@| 激情九月婷婷| 国产精品丝| 激情五月婷婷老师| 青草视频在线播放| 久久中文人妻系列| 五月婷婷欧美| 4438国产免费看| 五月婷婷伊人在线| 少妇高潮呻吟A片免费看软件| 99黄色性生活| 色域五月婷婷丁香| 五月天色站| 人人操人人爱丁香五月| 日欧一片内射VA在线影院| 婷婷精品视频| 九九色欲网| 超碰人人99| 六月色播| 五月婷婷五月天| 亚洲视频五区| 天天爱天天爽| 另类天堂| 亚洲成人在线播放| 9久久久久| 1024操逼视频| 99久久精品国产色欲| 激情五月丁香六月综合AVXXXX| 97超碰,人人舔,人人操,人人摸| 激情婷婷综合| 国产亚洲精品久久久久久郑州| 另类的婷婷| 99热思思在线观看| 丁香五月天激情综合| 九色视频91疯狂| 日韩成人中文字幕| 伊人狠狠丁香婷婷综合尤物| 日韩在线视频网站| 超碰91人人操| 五月婷婷av| 在线播放成人网站| 欧美婷婷综合| 婷婷欧美色| 99激情| 丁香五月第九色| 国产亚洲精品AAAAAAA片| 99热这是里只有精品| 激情综合五月| 涩涩五| 人碰人人人玩91| www天天爽| 免费AV在线网址| 五月天激情小说网| 97视频91| 色噜噜狠狠色综合日日| 怡红院99| 精品久久久中文字幕大豆网推荐理由| 不卡影院午夜理论片| 亚洲中文字幕在线电影| 狠狠干五月天| 婷婷激情性爱| 色婷婷电影网| 狠狠操在线视频| 天色色综合网| 中文久久婷婷| 色五月丁香六月资源站| 国产乱人偷精品人妻A片| 色婷婷五月天小说网| 久久五月天丁香花| 99九无网码| 美女天天久久| 国产99久| 日本综合色色| 婷婷六月色| 色狠狠色综合| 狼友超碰| 五月婷婷深深爱| 精品,99| 夜夜躁婷婷AV| 九九色婷婷| 丁香综合网| 色婷婷综合综合网| 丁香五月婷婷基地| 成人综合伍月天| 91丨九色丨熟女|新版| 久久怡红院| 一本伊人色婷| 中文字幕,综合,91| 激情第四色| 五月激情婷婷丁香| 婷婷五月色| 丁香五月婷婷图片综合| 玖玖五月丁香| 综合99在线| 久碰久| 久久九九热视频| 天天干天天玩天天夜天天射天天操天天日蜜臀少妇 | 玖玖玖婷婷婷| 欧美25p| 狠狠五月综合在线| 网色99| 大香伊人久色| 激情综合网五月婷婷| 五月婷婷综合色啪首页| 亚卅毛片| 天天日天天久久青青| 九九大香蕉黄色影院| 亚洲视频丁香网va| 97se视频在线| 少妇性按摩无码中文A片| 五月丁香六月婷婷成人电影| 99热精品在线播放观看| 日韩欧美一道四区中文字幕| 国产小精品| 人人综合久| 五月激情综合深爱| 噜噜噜狠狠色综合| 久99久视频精选| 婷婷久草| 日本色99| 伊人AV五月婷| 综合99在线| 超级碰碰碰97免费| 婷婷五月性感| 五月天国产| 久色大| 99热99这里有免费的精品| 婷婷五月丁香综合| 欧美久久久久久久久中文字幕| 色色激情| 成人国产综合| 九九热在线99| 天天舔天天插天天干| 久久婷色| 亚洲一区二区无遮挡A片| 影音先锋91网站在线观看| 精品99久久久久成人网站免费| 久久久婷婷五月亚洲97号色| 欧美三级视频| 99精品国产在热久久| 日本久久精品| 九九干视频| 天天草比天天爽| 激情亚洲色图片丁香综合| www.久久| 26UUU欧美激情一区二区| 日韩AV在线免费| 综合色色五月| 五月花婷婷| 亚洲色五月婷婷| 国产操碰| 亚洲网站999| 日本色五月| 五月婷六月婷婷| 亚洲色欲AAAAAA| 丁香久久AV| WWW.夜夜操.com| 大香蕉伊人久久| 亚洲另类婷婷综合| 99re久热只有精品6在线直播.com| AV在线不卡网站| 亚洲午夜国产成人电影VA国产欧…| 国产亚洲成AV人片在线观黄桃| 婷婷五月天色播| 亚洲热久久| 淫视馆aV二区一区| 丁香激情久久| 99爱爱| 色婷婷香蕉| 丁香五月综合久久八| 色婷婷久久久| 超碰九九热| 久久人操| 久操大香蕉| 五月丁香色情| 久久久人妻人伦| 99热啪啪| 五月婷婷六月丁香激情深爱| 婷婷成人网五月天| 婷婷激情五月天网站| 五月天日日操夜夜操| 五月婷成人| 日韩 欧美 国产 一区 二区| 五月激情婷婷图片基地| 久热这里只有精品在线观看 | 五月天天天色| www.天天日| 天天日夜夜| 九九re精品视频在线观看| 五月婷婷激情久久| 色欲婷婷五月天| 成年人丁香五月| 97福利视频| 电影91久久久| 91啦丨九色丨刺激中文| 99色视| 久9热视频在线观看| 五月丁香999| 五月天激情站| 欧美韩日AAA网站| 深爱激情六月| 99成人在线观看| 亚洲激情免费久久| 欧美丁香六月激情视频| 五月天婷婷中文字幕在线播放| 99re思思热久久| 天天日天天舔| 婷婷伊人綜合中文字幕| 99在线精品观看99| 大香蕉伊人丁香五月| 亚洲av无码影院| 五月婷婷综合久久| 天天爽成人综合网站| 玖玖精品资源| 天天干天天操天天爽| 激情综合九月| 99ER热精品视频| 色八戒操婷婷| 五月综合丁香婷婷| 77799热| 丁香五月另类小说| 日韩狠狠色| 疯狂做受XXXX高潮A片| 玖玖@三月天天丁香婷婷| 日韩精品一区二区亚洲AV观看| 99er这里只有精品| 开心激情站婷婷五月天| 中文成人在线| 丁香色婷婷| 亚洲成人AV一区在线观看| 91尤物九色在线| 综合色天天| 久久综合人妻| 思思热视频在线| 婷婷五月天av小说| 久久九九爽| 五月婷婷乱| 五月丁香成人| 成人无码髙潮喷水A片| 五月天婷婷激情网| 夜夜骑日日操| 99亚洲精品视频| 五月丁香六月婷| 殴美97色| 日韩欧美一区二区三区四区| 九九热这里只有精品在线观看| 精品国产va久久久久久久| 五月婷婷激情久久| 久久这里只有精品8| 91大操| 久久久中文| 日日日日操| 能看的AV| 亚洲激情五月| 五月丁香直播| 五月丁香婷婷基地| 欧美黄色一级| 免费视频舔| 亚洲综合五月天| 香蕉久久av一区二区三区 | 91丨九色丨东北熟女| 思思国产99| 色色色热| 色九月婷婷综合| 性天天中文网| 女人天堂AV| 国产成人AV在线播放| 日日噜狠狠色综合久久| 91啪啪视频| 亚洲成人中文字幕| 婷婷色系婷色| 婷婷婷婷色| 午夜丁香六月婷| 色五月婷婷啪啪五月| 丁香五月婷婷五月| 9l视频自拍九色9l视频在线观看| 啪啪激情网站| 久久精彩视频| 五月天丁香婷| 终合激情网| 激情网 久久| 婷婷五月色花丁香社区| 五月天婷婷操逼视频| 七七久久婷婷| 精品综合五月| 欧美成人精品A片免费一区99| 91久久综合亚洲鲁鲁五月天| 99热免| 婷婷丁香五月天激情四射| 激情另类综合| 亚洲啪啪视频| 日本久草福利| 久 久9 9 热 视 频| 国产伦亲子伦亲子视频观看| 五月丁香六月综合情在线观看| 99热乎| 伊人超碰| 五月天丁香综合久久国产| 第四色婷婷丁香五月| 亚洲六月综合激情久久下卡| 天天se在线视频| 大香蕉99热| 99在线观看精品视频| 31色区视频免费看| 丁香五月激情视频在线| 2018国产大陆天天弄| 色噜噜伊人| 五月婷婷综合在线| 丁香婷婷人妻| 五月激情六月宗合| 午夜成人天堂久久无码日韩久久| 99国产精品久久久久久久久久久| 久久日曰| 五月天婷婷在线观看| 亚洲啪| 久久小片| 久久久久九九九九视屏小说88| 99久久久国产精品免费蜜乳tv| 亚洲成人在线在线| 操日本人妻视频| 色吧婷婷五月亚洲| 亚洲综合婷婷五月| 色色五月婷婷狠狠| 五月天婷婷五月| 精品综合网在线| 婷婷五月天在线观看免费| 丁香婷婷五月综合欧美另类| 久热这里只有精品在线| 丁香婷婷六月| 色五月综合在线| 99啪在线| 九九99香蕉在线视频播放| 91丨九色丨白浆| 激情综合久久| 97精品综合久久| 激情网站综合五月天| 9久热精品在线视频| 99免费视频精品| 日本久碰| 五月天开心网| 7777激情基地| 91人妻PORNY九色大屁股| 色亚洲视频| 五月停停大香蕉| 婷婷五月激情视频在线| 日本女人久久| 五月婷婷之综合激情| 玖玖在线资源视频| 日韩青青| 色色色色热| 久久色区| 国产精品一区在线观看你懂的| 五月婷婷色吧!| 婷婷久久图片| 超碰在线国产| 婷婷五月天亚洲天堂| Www.se.久久| 99在线精品视频| 青草性爱视频| 五月丁香六月停停停| 97色色综合| 人人爱干人人爱草| 99亚洲精品综合在线| 婷婷刺激综合| 五月激情丁香五月| 婷婷综合中文| 99成人| Av狠狠色丁香婷| 3p九色在线| 伊人玖玖精品| 99在线观看免费精品视频| 五月婷婷激情啪啪| 99re视频在线播放| 丁香久久AV| 狠狠色婷婷7777久综合| 激情婷婷五月| 永久AⅤ1| 99综合在线| 激情小说色五月| 性视频久久| 色综合久久伊伊婷婷五月| 久久天堂婷婷五月| 五月天综合色| 色婷婷社区| 久久五月婷婷电影| 玖玖婷婷五月天毛片| 五月丁香色| 操人妻视频91| sS丁香五月婷婷|