久久亚洲成a人片熟女精品色一区二区三区|国产精品视频第一精品视频|av天堂热无码手机版|亚洲?v无码久久无遮挡|国产精品偷伦视频免费观看国产|麻豆国产自产精品丰满熟妇|av无码av不卡一区二区|久久亚洲精品中文字

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

nginx 1.29.6 新特性解讀:官方粘性會話與性能優(yōu)化實(shí)踐

nginx 1.29.6 新特性解讀:官方粘性會話與性能優(yōu)化實(shí)踐 nginx 1.29.6 發(fā)布了作為主線版本這算得上是今年值得仔細(xì)看的一次更新。我在生產(chǎn)環(huán)境里維護(hù)著一批 nginx 網(wǎng)關(guān)從 1.16 一路追到 1.28每次主線版本發(fā)版我都會先翻 changelog再拿測試機(jī)驗(yàn)證確認(rèn)沒有坑之后才考慮要不要跟。這次 1.29.6 最讓我關(guān)注的有兩件事一是 upstream 終于支持原生粘性會話二是性能與穩(wěn)定性方向有一批改進(jìn)。這兩個點(diǎn)對搞負(fù)載均衡、多節(jié)點(diǎn)部署的朋友來說屬于能直接改變架構(gòu)選型的內(nèi)容。粘性會話這個詞搞過后端的人應(yīng)該不陌生。應(yīng)用多節(jié)點(diǎn)部署之后用戶的登錄狀態(tài)、購物車數(shù)據(jù)、臨時上傳進(jìn)度都存在某臺服務(wù)器上如果負(fù)載均衡把請求隨機(jī)分到不同節(jié)點(diǎn)輕則用戶反復(fù)掉線重則直接把業(yè)務(wù)打崩。以前 nginx 官方不支持這個能力大家只能用第三方模塊或者用 ip_hash、hash 指令硬湊?,F(xiàn)在 1.29.6 官方主線直接支持意味著以后在標(biāo)準(zhǔn)環(huán)境里就能做會話保持不用再為了一個 sticky 模塊去編譯維護(hù)一堆第三方代碼了。這篇文章我會先把這次更新的核心內(nèi)容拆開講清楚然后重點(diǎn)聊粘性會話的原理和配置再補(bǔ)上性能調(diào)優(yōu)和升級后的常見坑。適合正在用 nginx 做反向代理和負(fù)載均衡的運(yùn)維、后端開發(fā)以及準(zhǔn)備升級主線版本但心里沒底的團(tuán)隊(duì)參考。1. 1.29.6 的核心看點(diǎn)官方粘性會話為何等了這么久1.1 為什么粘性會話此前一直靠第三方模塊nginx 官方在很長一段時間里反代負(fù)載均衡只有輪詢、權(quán)重、ip_hash、最少連接這幾種策略。這些策略的共同點(diǎn)是“負(fù)載均衡優(yōu)先”每個請求盡量均勻分發(fā)給后端不關(guān)心請求來自哪個用戶、和之前的請求有沒有關(guān)聯(lián)。這在純 API 網(wǎng)關(guān)場景沒問題但一旦涉及 Session、Cookie、長連接就很容易捅婁子。社區(qū)很早就有解決方案。老牌的 nginx-sticky-module-ng很多人編譯過稍微新一點(diǎn)的做法是用 hash 指令自己按 Cookie 或 Header 做一致性哈希。但這些方案都有比較明顯的毛病。第三方模塊要跟隨 nginx 版本重新編譯每次 nginx 升級模塊編譯失敗的情況我都遇到過不止一次。hash 方案呢能用但對節(jié)點(diǎn)增刪不友好調(diào)整后端的瞬間會有大量請求漂移到其他節(jié)點(diǎn)Session 直接丟失。這背后其實(shí)有 nginx 官方的取舍。官方對核心模塊的穩(wěn)定性要求極高一個新特性要進(jìn)主線得先解決權(quán)限模型、模塊加載機(jī)制、與健康檢查的協(xié)作方式等一系列問題。粘性會話不像輪詢那樣無狀態(tài)它天然引入“用戶和后端節(jié)點(diǎn)綁定”的概念這會和故障轉(zhuǎn)移產(chǎn)生沖突——如果用戶綁定的那臺后端掛了請求到底該轉(zhuǎn)發(fā)到哪里這個問題處理不好官方寧可不做。所以這次 1.29.6 上線粘性會話從產(chǎn)品決策到協(xié)議設(shè)計都花了不少心思。1.2 新增粘性會話后哪些場景直接受益第一類明顯受益的場景是帶登錄態(tài)的傳統(tǒng) Web 應(yīng)用。比如企業(yè)內(nèi)部系統(tǒng)、CMS、電商網(wǎng)站用戶登錄之后 Session 存在本機(jī)內(nèi)存里Session 沒有做共享這種架構(gòu)下粘性會話幾乎是剛需。以前沒有官方支持要么在應(yīng)用層做 Session 復(fù)制要么引入 Redis 共享 Session要么就忍著用戶隨機(jī)掉線?,F(xiàn)在只需要在 nginx 層做一次配置把同一個用戶的請求固定到同一臺后端節(jié)點(diǎn)應(yīng)用層基本不用動。第二類是 WebSocket 和長連接場景。nginx 代理 WebSocket 已經(jīng)非常成熟但長連接比普通 HTTP 請求更需要會話保持。一個 WebSocket 連接建立之后后端的進(jìn)程和前端是保持雙向通信的一旦連接被轉(zhuǎn)發(fā)到另一臺節(jié)點(diǎn)這條鏈路就會斷裂。比如用 nginx 代理 FreeSWITCH 的 WS 端口、IM 服務(wù)的推送通道這類業(yè)務(wù)天然需要粘性會話。第三類是文件上傳下載、分片傳輸這類有狀態(tài)流。大文件分片上傳每一片都希望落到同一臺后端否則合并的時候找誰要數(shù)據(jù)粘性會話能把同一用戶的流式請求穩(wěn)穩(wěn)固定在一臺節(jié)點(diǎn)上省掉很多應(yīng)用層的合并邏輯。1.3 性能與穩(wěn)定性提升的實(shí)際價值其實(shí)每次主線版本更新changelog 里都會有一批性能優(yōu)化和穩(wěn)定性修復(fù)。這種更新通常不會大張旗鼓宣傳但對生產(chǎn)環(huán)境的影響非常直接。從我追蹤版本的經(jīng)驗(yàn)來看這類改動主要集中在這幾個方向。一是連接生命周期相關(guān)的問題。包括連接復(fù)用、空閑連接回收、異常連接釋放等。生產(chǎn)環(huán)境中經(jīng)常出現(xiàn)的 TIME_WAIT 堆積、worker 連接數(shù)緩慢上漲、長時間運(yùn)行后連接池膨脹基本都是這類問題引起的。新版本往往會在 upstream 連接的復(fù)用策略和等待隊(duì)列上做調(diào)整讓整個并發(fā)連接模型更平滑。二是 HTTP/2 和 HTTP/3 的實(shí)現(xiàn)完善。HTTP/2 已經(jīng)普及但多路復(fù)用下的流量控制問題、連接并發(fā)導(dǎo)致的性能回退問題不同版本的表現(xiàn)差異很大。HTTP/3 也就是 QUIC 協(xié)議nginx 一直在推進(jìn)每一次主線更新都會帶上 QUIC 相關(guān)的修復(fù)和改進(jìn)。如果你打算開啟 HTTP/3這類底層的協(xié)議棧完善對穩(wěn)定性幫助很大。三是內(nèi)存使用和 worker 進(jìn)程的穩(wěn)定性。nginx 對內(nèi)存的控制一直很嚴(yán)格但應(yīng)對極端流量、大量非法請求、畸形報文的時候偶發(fā)的高內(nèi)存占用和 worker 崩潰也沒有完全絕跡。主線版本通常會在這些邊緣場景上打補(bǔ)丁所以“穩(wěn)定性全面提升”這種說法其實(shí)是落到這些具體場景里的。2. 粘性會話的原理與選型從 Cookie 到一致性哈希2.1 粘性會話解決的核心矛盾負(fù)載均衡的核心邏輯是把流量分散開讓每臺后端都能吃飽但又不能撐死。問題來了請求可以隨便分用戶的數(shù)據(jù)狀態(tài)卻不能隨便分。用戶登錄之后Session 存在 A 節(jié)點(diǎn)下一次請求如果被負(fù)載均衡分到 B 節(jié)點(diǎn)B 節(jié)點(diǎn)查不到這個 Session就只能讓用戶重新登錄。粘性會話的思路很簡單在負(fù)載均衡層加一個“綁定關(guān)系”讓同一個用戶的請求盡量落到同一臺后端。這與 Session 共享是兩種不同的解決路徑。Session 共享是讓所有節(jié)點(diǎn)都能訪問同一份狀態(tài)屬于“數(shù)據(jù)搬家”粘性會話則是把用戶綁死在固定的節(jié)點(diǎn)上屬于“人不搬家”。兩種方式?jīng)]有絕對的好壞但粘性會話在改動成本上更低尤其適合改造老系統(tǒng)。只要 nginx 層配置一下業(yè)務(wù)代碼完全不用動不香嗎2.2 Cookie 粘性如何工作Cookie 粘性是實(shí)現(xiàn)粘性會話最常見的方式。流程大概是這樣的用戶第一次訪問某個服務(wù)nginx 所在的負(fù)載均衡層發(fā)現(xiàn)這個請求沒有攜帶粘性 Cookie就按照當(dāng)前策略選擇一臺后端節(jié)點(diǎn)接收請求并在響應(yīng)里種一個 Cookie比如 srv_idbackend-a。用戶接下來的請求都會帶著這個 Cookienginx 看到 Cookie 里的值之后直接把請求轉(zhuǎn)發(fā)到 backend-a完成綁定。這里有個細(xì)節(jié)需要理解nginx 并不需要真的去后端存儲里確認(rèn)這個 Cookie 是否有效。它維護(hù)的是一個映射關(guān)系即“某個 Cookie 值對應(yīng)哪個后端節(jié)點(diǎn)”。這個映射可以放在共享內(nèi)存里也可以把后端節(jié)點(diǎn)信息直接編碼在種下去的 Cookie 值中后者避免了大量連接狀態(tài)占用內(nèi)存。生產(chǎn)環(huán)境里更推薦后一種方式即使 nginx 重啟、worker 重新調(diào)度Cookie 值仍然有效不影響粘性。還有一類是基于一致性哈希的實(shí)現(xiàn)。不種 Cookie而是根據(jù)請求里的某個穩(wěn)定標(biāo)識比如用戶 ID、來源 IP、特定的 Header做哈希計算算出來的結(jié)果就是后端節(jié)點(diǎn)的編號。這種方式的優(yōu)點(diǎn)是沒有額外的 Cookie也不依賴瀏覽器是否支持 Cookie缺點(diǎn)是如果后端節(jié)點(diǎn)數(shù)量變化哈希結(jié)果會大面積漂移。2.3 幾種粘性策略怎么選不同策略的選型主要看你的業(yè)務(wù)形態(tài)和現(xiàn)有基礎(chǔ)設(shè)施我整理了一個對比表格策略實(shí)現(xiàn)方式優(yōu)點(diǎn)缺點(diǎn)適用場景Cookie 粘性種 Cookie 并映射到節(jié)點(diǎn)精確、用戶經(jīng)驗(yàn)好、不受代理 IP 影響依賴瀏覽器 Cookie無 Cookie 客戶端不適用帶登錄態(tài)的 Web 應(yīng)用、購物車、企業(yè)系統(tǒng)ip_hash按來源 IP 哈希無需額外配置天然支持多出口 IP 會把用戶全塞到一臺節(jié)點(diǎn)出口 IP 單一的內(nèi)網(wǎng)服務(wù)、IPv6 場景Hash Key按 Header/參數(shù)/指定 key 哈希靈活可針對業(yè)務(wù)標(biāo)識進(jìn)行哈希節(jié)點(diǎn)變更時哈希漂移Session 容易丟無 Cookie 的 API 網(wǎng)關(guān)、需要按租戶隔離的場景第三方 sticky 模塊編譯第三方模塊功能成熟可自定義升級跟隨成本高模塊質(zhì)量參差不齊舊環(huán)境暫時無法升級到新版本我在實(shí)際項(xiàng)目里給電商類站點(diǎn)用的是 Cookie 粘性種一個短期 Cookie 就好給內(nèi)部 API 網(wǎng)關(guān)用的是基于 Header 的哈希比如按 X-User-Id 哈希不用管 Cookie也不會因?yàn)闉g覽器禁用 Cookie 而失效。這個選擇邏輯很簡單有明確用戶身份的優(yōu)先用 Cookie 粘性按來源 IP 和入口網(wǎng)關(guān)做聚合的就用 ip_hash 或 Hash Key。3. 升級 1.29.6 與粘性會話配置實(shí)操3.1 升級前的檢查與備份升級之前我習(xí)慣先做三件事。第一明確當(dāng)前版本。命令是nginx -v如果發(fā)現(xiàn)當(dāng)前是某個很老的穩(wěn)定版跳版本升級要格外注意配置兼容性。第二完整備份配置。不僅僅是復(fù)制一份 nginx.conf而是把 conf.d 下的所有 conf 文件、證書目錄、還有編譯時的模塊列表全部記錄下來。第三確認(rèn)回滾路徑。git 里留一份當(dāng)前可用的 nginx 二進(jìn)制和配置萬一新版本有兼容性問題能在一分鐘內(nèi)回到舊版本。還有一點(diǎn)容易被忽略就是確認(rèn)第三方模塊兼容性。如果你當(dāng)前環(huán)境編譯過第三方模塊升級到 1.29.6 之后這些模塊大概率要重新編譯。有些模塊原作者已經(jīng)不怎么維護(hù)了在新版本上編譯可能直接報錯。建議升級前先在新版本源碼上跑一次./configure加上原有參數(shù)看看模塊能不能編譯通過。這一步卡住的話就別急著上生產(chǎn)先解決模塊兼容性問題。3.2 平滑升級的完整流程如果你用的是官方源碼編譯方式平滑升級流程相對成熟。先把 1.29.6 的源碼包下載下來解壓沿用之前的編譯參數(shù)重新 configure 并編譯新二進(jìn)制然后用新二進(jìn)制替換舊二進(jìn)制。保險起見替換前可以把舊二進(jìn)制備份為 nginx.old。替換完成后執(zhí)行kill -USR2 舊master進(jìn)程PID讓新老版本同時運(yùn)行再kill -WINCH 舊master進(jìn)程PID優(yōu)雅關(guān)閉舊 worker最后kill -QUIT 舊master進(jìn)程PID退出舊的 master。用系統(tǒng)自帶軟件源安裝的 nginx升級方式會更簡單直接執(zhí)行包管理器的升級命令就行。但要注意RedHat 系和 Debian 系默認(rèn)的 nginx 版本往往比主線版落后不少。如果你等不到官方源更新可以自行添加 nginx 官方源或者直接使用編譯安裝的方式。我這里更推薦編譯安裝因?yàn)榭梢跃_控制編譯參數(shù)還能把第三方模塊一起編進(jìn)去。升級完成之后我的驗(yàn)證順序是nginx -t校驗(yàn)配置nginx -V確認(rèn)版本和編譯參數(shù)然后 reload 一次觀察 error.log 有沒有新增告警再通過壓測或者線上小流量驗(yàn)證基礎(chǔ)功能。3.3 配置一個帶粘性會話的 upstream假設(shè)我們有兩個后端節(jié)點(diǎn)部署了同一個 Java Web 應(yīng)用用戶登錄狀態(tài)存在本機(jī) Session。配置粘性會話之后同一用戶的請求會穩(wěn)定落到同一臺節(jié)點(diǎn)。生產(chǎn)環(huán)境下的配置大致長這樣upstream app_backend { zone app_backend 64k; sticky cookie srv_id expires1h maxage1h; server 192.168.1.10:8080 max_fails2 fail_timeout10s; server 192.168.1.11:8080 max_fails2 fail_timeout10s; } server { listen 80; server_name app.example.com; location / { proxy_pass http://app_backend; proxy_set_header Host $host; proxy_set_header X-Real-IP $remote_addr; proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; } }這里有一個我踩過的坑升級到 1.29.6 之后如果配置sticky指令報 unknown directive說明你使用的這個版本可能還沒編譯粘性會話模塊或者指令名有細(xì)微差異。畢竟 nginx 不同版本的模塊名和參數(shù)會有調(diào)整保險做法是先看當(dāng)前版本的官方文檔確認(rèn)模塊名再按文檔語法來配置。我在測試機(jī)上試過第一次配置時就是因?yàn)橹噶蠲麑戝e導(dǎo)致 nginx -t 直接報錯。另一個關(guān)鍵參數(shù)是expires。Cookie 粘性會給客戶端種一個 Cookie這個 Cookie 的過期時間要設(shè)計好。太短的話用戶沒過多久就失效還得重新綁定太長的話后端節(jié)點(diǎn)要下線維護(hù)時用戶可能還掛在舊節(jié)點(diǎn)上請求頻繁失敗。我的經(jīng)驗(yàn)是業(yè)務(wù) Session 持續(xù)多久Cookie 就設(shè)置多久最多不要超過一天。電商場景設(shè)置 30 分鐘到 1 小時比較合適管理后臺這類長會話可以設(shè)置 8 小時。3.4 驗(yàn)證粘性是否生效的兩種方法配置完粘性會話怎么確認(rèn)是真的生效了我常用的方法是先看 Set-Cookie 響應(yīng)頭再用帶 Cookie 的請求做連續(xù)性驗(yàn)證。第一步不帶 Cookie 請求一次登錄接口打開抓包工具或者直接用 curlcurl -sI http://app.example.com/login | grep -i set-cookie正常響應(yīng)里應(yīng)該能看到 nginx 下發(fā)的 Cookie比如srv_idbackend-a。如果看到的是業(yè)務(wù)自己種的其他 Cookie沒有 srv_id說明粘性模塊可能沒生效或者被業(yè)務(wù)層覆蓋了。第二步把第一步拿到的 Cookie 值原樣帶回去連續(xù)請求幾次業(yè)務(wù)接口curl -s -b srv_idbackend-a http://app.example.com/api/user/info curl -s -b srv_idbackend-a http://app.example.com/api/order/list這時候去后端的 access log 里查請求來源 IP 或者響應(yīng)時間兩個請求應(yīng)該都落在 backend-a 節(jié)點(diǎn)上。如果第二次請求落到了 backend-b說明粘性配置有問題或者 Cookie 在瀏覽器側(cè)被清了。多節(jié)點(diǎn)場景最好給每個后端節(jié)點(diǎn)配置獨(dú)立的 access_log方便做這種驗(yàn)證。4. 性能與穩(wěn)定性調(diào)優(yōu)的落地姿勢4.1 長連接與 keepalive 的正確參數(shù)nginx 1.29.6 這類主線版本在 upstream 長連接處理上通常會有改進(jìn)但你的配置如果一直沒調(diào)再好的改動也發(fā)揮不出來。之前排查過一次線上問題后端 Tomcat 的連接數(shù)經(jīng)常被打滿后來發(fā)現(xiàn) nginx 每次請求都重新建連沒有啟用 upstream keepalive。補(bǔ)上之后連接數(shù)和后端負(fù)載同時降了不少。upstream app_backend { zone app_backend 64k; sticky cookie srv_id expires1h; server 192.168.1.10:8080; server 192.168.1.11:8080; keepalive 32; } server { listen 80; location / { proxy_pass http://app_backend; proxy_http_version 1.1; proxy_set_header Connection ; } }這里有兩個容易忽略的細(xì)節(jié)。第一必須設(shè)置proxy_http_version 1.1否則 nginx 到后端默認(rèn)走 HTTP/1.0連接無法復(fù)用。第二proxy_set_header Connection 必須清空不然頭信息里留著 Connection: closekeepalive 照樣不生效。這兩個點(diǎn)少一個keepalive 就等于沒配。keepalive 參數(shù)也不是越大越好。32 條空閑連接看后端能承受多少。后端 Tomcat 并發(fā)線程通常就 200 左右你在一臺 nginx 上 keepalive 設(shè)置 100意味著每臺后端要維護(hù) 100 條空閑連接后端連接池的負(fù)擔(dān)會很大。合理的設(shè)置是先看后端連接池上限再給 nginx 配一個合適的值一般 16 到 64 之間比較穩(wěn)妥。4.2 HTTP/3 要不要現(xiàn)在就上1.29.6 主線版本里 HTTP/3 和 QUIC 的支持又往前走了一步很多朋友已經(jīng)開始糾結(jié)要不要開啟。我的判斷是HTTP/3 確實(shí)能提升弱網(wǎng)環(huán)境下的用戶體驗(yàn)尤其針對移動端和跨地域用戶但生產(chǎn)環(huán)境直接全量上線安全隱患和兼容性問題都不少。最常見的坑是中間設(shè)備攔截。運(yùn)營商網(wǎng)絡(luò)或者企業(yè)防火墻里有些老設(shè)備不認(rèn)識 QUIC 報文直接把 UDP 443 丟掉導(dǎo)致瀏覽器報net::err_quic_protocol_error。這個問題在辦公網(wǎng)、校園網(wǎng)尤其明顯。另一個坑是監(jiān)控體系。HTTP/3 的請求在抓包工具和 Web 日志里的形態(tài)和 TCP 完全不一樣監(jiān)控、日志分析都要跟著調(diào)整如果監(jiān)控沒跟上出了問題定位會很痛苦。我建議的做法是漸進(jìn)式開啟。先在某個測試域名或者對部分用戶開啟 HTTP/3觀察訪問成功率、報錯率、頁面加載時間跑一段時間穩(wěn)定之后再逐步擴(kuò)大流量。如果業(yè)務(wù)對網(wǎng)絡(luò)穩(wěn)定性要求極高暫時不開也不丟人HTTP/2 TLS1.3 在絕大多數(shù)場景下已經(jīng)夠用了。4.3 SSL 握手性能優(yōu)化清單升級到新版本之后SSL/TLS 相關(guān)的優(yōu)化也值得重新過一遍。nginx 默認(rèn)配置在手寫環(huán)境下往往沒有展示出真正的性能幾個改動能明顯減少握手時間和 CPU 占用。第一個是ssl_session_cache。這個參數(shù)非常關(guān)鍵它讓 nginx 在本地緩存 TLS 會話票據(jù)后續(xù)客戶端重新建連可以直接復(fù)用省掉一次完整的 TLS 握手。生產(chǎn)環(huán)境建議設(shè)置為shared:SSL:10m10MB 共享內(nèi)存大約能存 8 萬多個會話。如果你發(fā)現(xiàn)客戶端頻繁握手、頁面加載偏慢多半是這個沒設(shè)好。第二個是ssl_protocols和ssl_ciphers。建議只開啟 TLSv1.2 和 TLSv1.3把 SSLv3、TLSv1.0、TLSv1.1 全部關(guān)閉。TLSv1.3 在握手輪次和加密效率上比老版本強(qiáng)太多只要客戶端兼容優(yōu)先開啟。這個操作放在 nginx 配置里只是一個指令但對安全合規(guī)和性能都有實(shí)際提升。第三個是證書鏈優(yōu)化。證書鏈里有中間證書和根證書nginx 每次握手要發(fā)送整條證書鏈。證書鏈太長、證書文件過大握手時間就會增加。把證書文件整理成 PEM 格式并檢查證書鏈完整性雖然不起眼但訪問速度會有體感提升。5. 升級后常見問題與排查實(shí)錄5.1 排查工具與應(yīng)急思路升級過程中不管做多少準(zhǔn)備上線后還是可能出問題。我的排查思路一般都是自底向上先看 error.log再看 access.log最后才動具體請求驗(yàn)證。查看 error.log 時建議帶上時間線定位到一個比較長的時間窗口用tail -f或者grep篩選關(guān)鍵字。常見的錯誤信息格式大概是[error]、[crit]、[emerg]等嚴(yán)重級別從低到高。[emerg]出現(xiàn)意味著配置錯誤nginx 起不來[crit]出現(xiàn)在磁盤寫滿、內(nèi)存不足等系統(tǒng)級問題[error]則多是業(yè)務(wù)請求相關(guān)的錯誤。看到報錯先別急著百度先認(rèn)真讀一遍日志內(nèi)容大多數(shù)情況下報錯信息已經(jīng)很明確了。排查連接問題時nginx -T非常有用。它可以導(dǎo)出 nginx 加載后的完整配置比直接看散落的配置文件更清楚能看清sticky、keepalive、proxy_pass這些指令最終生效的值避免因?yàn)?include 引入多個配置文件時出現(xiàn)覆蓋和沖突。配合curl -v看請求頭能直接確認(rèn) Cookie、響應(yīng)頭是否符合預(yù)期。5.2 高頻問題速查表問題可能原因解決辦法配置 sticky 后 nginx -t 報 unknown directive粘性模塊未編譯或模塊名寫錯確認(rèn)當(dāng)前版本是否包含對應(yīng)模塊查閱官方文檔修正指令名粘性會話不生效用戶反復(fù)掉線瀏覽器禁用了 Cookie、多個域名間 Cookie 未共享、代理層多次轉(zhuǎn)發(fā)檢查 Set-Cookie 路徑和域名用 curl 模擬帶 Cookie 請求驗(yàn)證后端節(jié)點(diǎn)添加或刪除后大量 Session 丟失節(jié)點(diǎn)變更導(dǎo)致哈希映射漂移舊用戶被重定向到新節(jié)點(diǎn)規(guī)劃好維護(hù)窗口結(jié)合一致性哈希的前綴保留策略逐步調(diào)整升級后部分接口 403/404配置文件不兼容server_name、location 匹配規(guī)則有變化grep 對比新舊配置文件差異重點(diǎn)檢查 location 和 rewrite 規(guī)則開啟 HTTP/3 后瀏覽器訪問報 err_quic_protocol_error中間網(wǎng)絡(luò)設(shè)備攔截 UDP 443 報文暫時關(guān)閉 HTTP/3或限制到測試域名小流量驗(yàn)證高并發(fā)下 error.log 出現(xiàn) worker_connections are not enoughworker_connections 設(shè)置過小根據(jù)系統(tǒng) ulimit 調(diào)大 worker_connections配合調(diào)整 worker_processesreload 后連接瞬間斷掉worker 進(jìn)程重啟長連接被回收業(yè)務(wù)側(cè)實(shí)現(xiàn)重連機(jī)制避免在流量高峰時 reload5.3 幾個來自實(shí)踐的避坑經(jīng)驗(yàn)第一升級前一定要在一臺獨(dú)立測試機(jī)跑一遍全量回歸。我在一次升級中吃過虧新版本配置校驗(yàn)通過但舊配置里的某個第三方指令在新版本中行為變化了上線后即時接口出現(xiàn)了路徑漂移?;貧w用例要覆蓋至少一遍登錄、上傳、WebSocket 連接等核心場景不能只壓測不驗(yàn)功能。第二粘性會話的 Cookie 名稱不要和業(yè)務(wù) Cookie 沖突。業(yè)務(wù)本身可能種了一個名為 srv_id 的 Cookienginx 又種了一個同名 Cookie后種的值會覆蓋前種的值導(dǎo)致粘性失效。我在一次配置時把粘性 Cookie 命名為 app_srv_id從源頭上避免沖突。第三升級后不要立即清空舊版本二進(jìn)制。保留 nginx.old保留舊配置備份至少保留到新版本穩(wěn)定運(yùn)行一周以上再清理。真出了兼容性問題回滾路徑遠(yuǎn)比修復(fù)問題更可靠。6. 從 1.29.6 看主線版本選型與演進(jìn)6.1 主線版和穩(wěn)定版怎么選nginx 的版本發(fā)布節(jié)奏里主線版本和穩(wěn)定版本是并行的。主線版本更新頻繁新功能都在主線里先出現(xiàn)但并不意味著不穩(wěn)定只是更新迭代速度快。穩(wěn)定版本更保守只做嚴(yán)重安全修復(fù)和 bug 修復(fù)不引入新功能。很多團(tuán)隊(duì)對主線版本有心理顧慮覺得“穩(wěn)定版才適合生產(chǎn)”這個觀念在早期確實(shí)是主流但現(xiàn)在 nginx 官方對主線版本的定位已經(jīng)非常成熟生產(chǎn)環(huán)境用主線版本的團(tuán)隊(duì)越來越多。如果你所在團(tuán)隊(duì)對新技術(shù)接受度較高且有一定的測試能力我建議直接跟隨主線版本。粘性會話、HTTP/3 改進(jìn)這些新東西只有主線版本才有穩(wěn)定版要等很久才會合入。如果你所在的行業(yè)對變更極度敏感或者你只有一臺核心網(wǎng)關(guān)、沒有測試環(huán)境那還是保守一點(diǎn)等穩(wěn)定版發(fā)布之后驗(yàn)證沒問題再升級也不遲。我的個人習(xí)慣是測試環(huán)境永遠(yuǎn)用最新主線版本生產(chǎn)環(huán)境比主線版本滯后一個版本等社區(qū)反饋穩(wěn)定之后再跟進(jìn)。這樣既不會錯過新特性又能用社區(qū)的問題反饋?zhàn)鳛楸芸右罁?jù)。6.2 nginx 在網(wǎng)關(guān)生態(tài)里的位置從 1.29.6 這次的更新其實(shí)能看到 nginx 的演進(jìn)方向官方對網(wǎng)關(guān)層能力越來越重視。粘性會話過去是商業(yè)版 nginx Plus 的賣點(diǎn)之一現(xiàn)在進(jìn)了主線說明官方在把一些高頻需求逐步下沉到開源版本里。這對開發(fā)者來說肯定是個好消息。但也要清醒看到nginx 核心的定位始終是高性能反向代理和 Web 服務(wù)器它不會變成一個功能冗雜的應(yīng)用網(wǎng)關(guān)。像灰度發(fā)布、熔斷限流、服務(wù)發(fā)現(xiàn)集成、自定義鑒權(quán)這類能力純 nginx 配置會越寫越復(fù)雜維護(hù)成本很高。如果你的業(yè)務(wù)發(fā)展到那個階段可以考慮在 nginx 生態(tài)的基礎(chǔ)上引入 OpenResty 或 APISIX、Kong 這類基于 nginx 的 API 網(wǎng)關(guān)它們復(fù)用 nginx 的高性能內(nèi)核同時在上層提供了更豐富的擴(kuò)展能力。還有一部分團(tuán)隊(duì)在使用 KubernetesIngress Controller 底層很多就是 nginx。這種情況下粘性會話的能力可以通過 Ingress 注解來配置不一定直接操作 nginx.conf。理解 nginx 底層的粘性會話實(shí)現(xiàn)對排查 Ingress 場景下的會話問題依然有幫助畢竟最終干活的是同一套引擎。聊到最后我還是想強(qiáng)調(diào)一點(diǎn)任何新版本、新功能都不要急著全量上生產(chǎn)。這次的粘性會話我就是在測試環(huán)境先跑了一周覆蓋了登錄、購物車、文件上傳幾個核心場景確認(rèn) Cookie 流轉(zhuǎn)、故障轉(zhuǎn)移都符合預(yù)期之后才在新項(xiàng)目里啟用。因?yàn)?nginx 是流量入口改出問題影響的就是所有業(yè)務(wù)。升級前備份好配置規(guī)劃好回滾路徑先把變化控制在最小范圍等驗(yàn)證通過再一步步擴(kuò)大。這比追求新版本帶來的性能數(shù)字更重要生產(chǎn)環(huán)境穩(wěn)定跑著比什么都值。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
天天干18禁| 日本国产欧美高清在线| 日韩精品影视| 青草香蕉网| 久久曰曰| 亚洲中文字幕三级在线| 国产精品久久久久久久黄无码 | 亚欧免费| 无码日韩网站| 97免费免费视频网| 亚洲蜜臀精品视频久久| 免费a v| 黄片免费久久久久久久| 午夜精品久久久久久久久久蜜桃| 国产精品原创巨作?v网站| 老熟女搡BBBB搡BBBB视频| ..日韩av毛片精品久久久| 嫖老熟女A片一二三区| 丁香五月天激情| 射欧美综合| 亚洲在钱| 免费看黄片现成| 日韩中文字幕在线视频观看| 亚洲麻豆精品二区三区| 中文字幕、久久精品国产2020、久久综合久久自在自线精品自、亚洲 | 怡红院成人视频| 超碰人人妻| 成人国产精品三级A片| 啊啊啊97视频| 日韩成人高清一区二区| 婷婷九月| 按摩中文字幕| 97 超碰 人人做 人人爱| 成人八戒网站| 日韩国产欧美伦理在线| 亚洲欧美伦综合| 亚洲精品国产熟女久久久| 成人精品视频一区二区| 夜夜爽妓女| 亚洲中文字幕97久久精品少妇| 婷婷色五月激情| 天天躁日日躁AAAXX| 99九九久久| 91人妻做a观看视频| 精品一区二区人妖| 国内外色色色色色成人视频| 亚洲高潮少妇| 久久九九精品一区二区| 久久AV无码网址| 国产不良强奸视频免费看| 超碰人妻97| 精品国产乱码久久久影院| 欧美第五页| 天天操狠狠日夜夜干超大胆开放com大香蕉视频在线观看 | 黄色免费网| 超碰在线人妻中文字幕| 超碰碰碰碰| 欧美老妇综合网| 91中出视频| 超碰成人人人爽人人爽| 人成午夜免费大片| 久久久久久久久久久久久久久久9| 伊人久久亚洲色欲综合网站 | 91av一区二区在线观看| 无码自拍SM| 亚洲另类久操网| 中文字幕1区2区| 在线观看一级α片刺激高潮视频| 六月婷婷五月丁香| 日韩人人精品| 女人双腿搬开让男人桶| 久久成人午夜狠狠| 嗯啊抽插大香蕉网页| 91麻豆天美国产| 久久精品电影在线| 日韩97超碰中文字幕| 五月天欧美色图| 粉嫩粉嫩一区性色AV片| 久久人人爽av亚洲精品天堂桃色| 口爆吞精在线观看| 91美乳| 91欧美综合| 中文字幕人妻色偷偷久久皮| 亚洲精品亚洲人成在线麻豆| 91美女视频在线免费观看| 一区二区三区在线美女| 精吧天堂| 高清国产无码av| 91亚洲最新在线| 美女黄频a美女大全免费皮| 亚洲精品天堂久久A∨51成人漫| 51国产午夜精品视频| 日本午夜久久电影| 久久久999国产精品| h在线看免费版在线看| 可乐操亚洲蜜911| 国产日本久久免费精品| 少妇淫妇久久久久久久| 乱日视频| 婷婷五月综合在线| 极品综合| 欧美色图第一页| 亚州色站 日韩电影| 亚洲黄色a级片| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师黑人潮喷一 | 蜜桃久久综合视频| 国产传媒av天美传媒在线| 吉川爱美98堂在线| 国产 热久久久久国产精品| 加勒比综合a∨| 婷婷15月天青娱乐| 一区二区三区四区姦女| 日韩激情啪啪| 精品美女少妇一区二区| 人妻精品综合中文字幕在线 | a在线观看| 欧美色图综合| 综合久久六月久久婷婷| 91欧美长吊| 久久成人国产| 国产精品午夜福利亚洲综合网| 亚洲天天精品| 久操在97| 青青伊人久久| 亚洲情色一区二区三区| 亚洲国产精品久久久男人的天堂| 青青青操| 久久av网| 久久精品国产97欧美精品亚洲| 四虎免费视频| 亚洲自拍小说| …亚洲黄色厕厕女女在线播…| 久热精品在线| 人妻少妇精品视频一区二区三区| 三四中文字幕| 欧美五十路熟| 国产免费久久久久| 久久99热这里只频精品6学生| 亚洲av无码成人精品国产| 黄色av一区二区在线| 99热99色| 超碰97男人| 久草资源在线视频官方总站日韩丝袜美腿| 亚洲人妻av| www.夜夜操| 三级三级三级日本99| 啊a一区在线| 午夜欧美J进J出白浆流出久久久| 亚洲污污网站| 少妇熟女一区二区三区| 一本精品日本在线视频精品| 婷婷伊人| 男人的天堂日韩| 一级AAA片一区二区三区| 亚洲情色 自拍| 亚洲AV无码天美传媒一区| 国产人伦精品一区二区三区| 午夜精品久久一区二区| 国产成人精品日本视频| 91粉嫩萝控精品福利网站_精品影音先锋国 | 三级网站超变态精品| yazhououmeizongya| 久久精品美女一区| 九九九九九九综合| 综合激情五月丁香| 亚洲高清视频在线免费观看| 特级大荫道BBwBBwBBW| 日韩一级性爱无码| 国产免费一区| 久久伊人大香蕉| 97香蕉网| 91在线/欧洲| 婷婷五月天丁香花| av亚欧| 日本熟人妻中文字幕在线|...久久国产精品-国产精品_日本一区二区三区中文字幕 | 欧美人人曰人人操人人射射| 黑人无码一区二区| 国产精品播放| 91青视频| 毛片久久| 夜夜操夜夜爽夜夜高潮| 野狼激情网| 欧美超碰在线| 96AV精品| 人人摸人人摸人人干| 欧美综合综合| 国产亚洲精品美女| 超碰97欧美在线| 青娱乐久久艹| 三级日韩一区二区三区| 久久久久久久久久久久欧美日| 亚洲综合另类| 国产亚洲在线观看| 每日更新AV| 日本三级A片网站com| 香蕉视频精品亚洲一区二区三区在线播| 日韩女优在线| 青青草中文-久久青草精品一区二区三| 国产亚洲精品激情| 很很操在线| 欧洲综合色图| 男人的天堂久久| 久久久久久电影| 欧美成熟性爱精品| 中日韩一区二区三区欧美| 爱干爱射网啊啊啊| 欧洲黄色网| 欧美爱爱97| 亚洲加勒比| 欧美黑人91| 色播综合| 东京热av男人的天堂| 又黄又爽在线观看视频| 亚洲天堂热| 在线可观看的黄色网址| 欧美天天综合网| 国产一区二区精品久久99| 爱欲AV| 日韩欧美天天爽爽爽天天爽爽| 大香交| 久久久久久久唑| surenchaopeng| 人澡逼| 久久9 9 9精品| 欧差乱伦二三| 好屌色综合| 日韩ab网| 亚洲欧美日韩综合在线尤物| 91 手机在线播放 绯色| JuliaAnn丝袜熟女系列| 天天操天天日天天干| com 首页 18岁 禁区 女优 免费 精选 同城 | 国产Aα| 亚洲精品天堂久久A∨51成人漫| 啪一啪免费视频| 亚洲男人bt天堂| 欧美中字二区| 九九AV| 岛国网址国产| 久久精品免费| 91少妇通奸网站| 国产女同在线观看视频| 人人操人人uiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiii | 99热精品在线观看| 2026国产精品视频| 天天干天天干天天干| 亚洲脚交| 日本 欧美 亚中文字幕| 久久伦理视频久久大香蕉视频| 在线岛| 很很很很操| 丁香五月天激情| 五十路三区在线| 亚洲人成网www| 精品毛片av一区二区| 蜜乳av一区二区三区| 日韩超碰97| 国产精品亚洲色婷婷久久久| 日本Xx性爱| 欧美色图97| 大香蕉中文在线| 久久av一级av少妇av高潮 | 欧美综合天堂| 亚洲人妻在线一区| 亚洲……91| 熟女熟妇一区二区三四区| 91社操逼| 999熟女精品| 亚洲天天做日日做天天谢日日 | 91在线色| 日韩免费一级性爱视频| 天天摸天天插天天日| 欧美综合色图片| 色五月首页| 人人妻人人爽人人精品| 久9热| 青青操日韩| 丁香六月婷婷综合| www.男人的天堂| 97久久久久久久精| 亚洲av无码国产精品字幕| 欧美精品在线观看| 亚洲高清无码在线桃色| 91久久九九精品国产综合| 超碰人人干| 日本一区二区三区四区免费观看| 特色a在线上| 91天天| 久久久久久久久久9| 综合久久欧美| 岛国黄| 青青操少妇| 色y情视频免费看| 少妇三p| 久久精品国产亚洲AV无码做| 美中日韩无码| 色噜噜狠狠色综无码久久合欧美| 操逼天美3区| 久久精品国产亚洲av水密被窝| 中文字幕在线第二页| 青青草天天亲夜夜操网| 国产亚洲精品第一最新| 东方亚洲在线操逼天堂| 好一吊区二区| 好看的久久不射无码影视影院| 日本免费人成视频播放120秒| 精品人妻视频一区二区三区蜜桃视频| 亚洲无 码A片在线观看麻豆| 秋霞福利网| 亚欧美天堂在线| 国模精品娜娜一二三区| 蜜臀网 一区| 成人精品一区二区三区| 啊啊啊啊啊啊啊国| 丁香五月av| 国产高清成人传媒影视| 国产91乱伦| 精品日韩人妻视频| 97精品国产| 国产97在线 | 亚洲| 午夜啊啊| 91爱啪| 97日韩欧美亚洲| 国产乱码久久久久久| 99精品人人爽| 婷婷伊人一区| 九九十八精品| 国产在线播放成人免费| 97精品国产97久久久久久| 国产精品9999| www.AV有限公司一区| 精品78| 成人小电影网站tex| 欧美天天综合网| 欧美日韩在线小说 | 色综合久| 老熟乱一区二区三区四区| 唐山老熟妇露脸啪啪叫| 国产农村妇女精品1区二区| 深夜激情| 精品少妇一区二区三区免费观看| 亚洲综合性网址| 婬女免费一二三区A片| 中国国产精品一区视频| 欧美精品四区| 91社区拍啪人妻| 极品久久久久久久久久久久久久| 搡老女人老妇女AAA一VU麻豆| 久久怡红院| 国产女人9999| 97天天综合| 精品超碰国产| 亚洲免费精品一区| 免费一级视频特黄色大片| 91撸色网 玖玖网 欧美| 久久久久网站-538在线视频-欧美永久乱码 | 亚洲色系另类精品国产| 日韩卡一卡二卡三在线| 亚洲天堂 视频你懂的| 欧美亚洲丝袜美女电影| 嗯嗯啊啊啊好爽| 亚洲欧美日韩免费电影| 屌色在线97视频| 涩涩久久精品| 人人做,人人操,人人摸| 精品一区二区亚洲国产| 欧美欧美啪啪视频| 日韩精品 资源| 中文一区二区| 在线播放成人高清免费视频 | 操操逼视频| 97九色人妻| 国产农村妇女毛片精品久久| 国人欧美精品一区二区| 欧美爆操91| 国产兽交视频在线播放| 91 偷| 狠狠狠狠狠狠| 国产欧美成人第一页在线观看| 91午夜无码| 亚洲一区二区三区播放在线| 尤物视频新赏网鲜网色诱网| 色爱综合网欧美| 男女猛烈无遮掩视频免费软件| 中国一区二区亚洲人妻| 国产熟妇一区二区| 夜夜人妻爽| 日韩欧美成人大香蕉| 国产9区| 狠狠综合| 色香综合| 日韩肏逼视频| 国模私拍一区二区三区神乳| 一级乱伦网站| 亚洲色天堂日韩中| 成年在线视频日本亚洲在线视频区精品江靖宇公司 | 啊啊啊97视频| 少妇免费视频| 无码最新| 天天看,天天做| 国内毛片婷婷六月色| 亚洲国产精品99久久久| 欧美人黑A片无码免视费| 试看60秒 爽| 亚洲熟妇图片| 久久久久久久国产a∨| 亚洲丝袜二区在线| 婷婷伊人一区| 人妻aa| 欧美色女人| 热久久无毒不卡| 这里是精品| 久久婷婷综合国际产色怕| 青草综合| 亚洲欧洲综合| 久操视频在线| 色www精品视频在线观看| 日韩人妻资源网| 亚洲色综合| 亚洲熟女乱综合一区二区在线-...亚洲国产日韩欧美一区二区三区,久久久久久精 | 女人被添高潮免费视频| 91在线视频国产网站| 日韩淫色网| 免费网站观看www在线观| 人人喜人人妻| 四虎影库国产精品免费| 另类图片五月| 青青操青娱乐| 亚洲少妇综合在线播放| 中文字幕一区 二 区 三 四 五 区日 日 骚| 亚洲日韩狠狠撸视频| 日韩AV熟女乱伦| 伊人成人中文字幕久久网| 午夜欧美女人操逼| 无码国产精品久久久久| 欧美性爱伊人| 麻豆啪啪啪视频| 国产h小视频在线观看免费| 亚洲 自拍偷拍 欧美| 国产免a费看黄片在线| 97超碰9| 91搡老女人老妇女老熟女歌词翻译| 日日夜夜模| 亚洲影院无码在线| 日韩免费中文字幕视频| 日韩九区| 欧美另类丝袜熟女| 国产中文精品一区二区在线观看| 天美传媒在线一区| 91亚洲黄色网| 97精品一区二区视频| 日曰骚久久精品| 熟妇人妻丰满久久久久久久无码 | 日韩免费人妻色情网站| 高树玛利亚无码流出| 欧美美女啪啪视频| 豆1无夜无码| 超碰地址久久| 日韩卡一卡二卡三在线| 丁香激情网| 亚州男人的天堂| 亚洲欧美黄| 日韩国产乱子伦App| 色婷婷成人| 夜夜 中文视频rt| 12一15性XXXX粉嫩国产| 看黄片视频免费| 免费观看的黄色的网站| 日韩三四五区| 最新制服中文第一页| 亚洲成人无码影院| 老师充足的奶水小说| 操人妻视频| 成人av免费观看| 啊啊啊好疼| 一本色道久久综合狠狠操| 在线国产福利网址导航| 舔人妻中文免费视频| 好看的久久不射无码影视影院| 国产人妖视频一区在线观看| 激情小说亚洲视频| 91成人久久| 欧美狠狠弄| 先锋女优在线观看视频| 日本一级二级三级网站| 亚洲阿v天堂在线| 欧美色另类| av2014 日韩在线中文字幕| 男人天堂久久精品不卡| 尤物av网站免费在线播放| 日韩免费在线观看不卡| 久久久无码av精| 免费αⅴ在线观看| 久久香蕉国产传媒一区剧情天美| 91日产欧美| 偷拍视频青青草在线视频| 日韩一区二区精彩视频| 中国zzijzzijzzwww精品| 91在线秘 男同| 伊人国产视频| 97精品久久久久久久| 国产精品一区在线播放| 国产精品麻豆视频网站| 久久97资源 网| 午夜视频黄| 亚洲男人天堂Av| 亚洲深夜福利| 国产精品久久久久久久毛片1| 亚州乱码中文字幕综合久久久| 91狠狠狠| 欧美成人精品A片免费一区99| 国精综合一二三区影视| 操逼逼中文字幕| 加勒比东京热五月天天堂网| 人人 操人人 操人人| 日本久操视频| 久久久久久久人妻丝袜| 久久久久久波多野吉衣高潮| 亚洲欧美国产va在线播放频| 第二页中文字幕| 97久久超碰| 黄色高清久久无码依人| 国产AV激情无码久久无码| 熟女91网| 91老司机在线视频免费观看| 色哟哟AⅤ| 久久久久ab| 5278欧美一区二区三区| 91精品91久久久久77777| 欧美性爱五月天| 日韩射精| 久久久久久久久女黄| 97精品一区二区视频| 日韩 欧美 国产 麻豆| 四虎国产精品永久地址入口| 亚州色图狠狠干| 国产精品探花在线| 欧美色图亚洲色| 嗯嗯嗯啊啊啊操的我好爽| 久久久亚洲高清不打码| 欧美人黑A片无码免视费| 激情四射婷婷六月天| 婷婷五月成人| av日韩在线观看电影| 黄色免费一级在线毛片| 高清视频一区| 超碰在线日韩一区| 后入式视频国产自| 午夜性| 五月丁香婷婷综合网| 51一区二区三区| 欧美日韩精品一区二区三区高清| 天天综合91入口| 97操碰| 锕锕好爽 死我在线观看| 国产天天看| 人人色人人操在线| 婷婷亚洲色| 中文字幕成人理论在线| 久久精品国产亚洲AV成人直播| 无码免费在线观看黄色片| 偷拍欧美亚洲| 91亚洲在线| 色眯眯av| 日日骚中文字幕| 一级@啪啪视频| 色综合色色| 97爱亚洲综合色| 18精品一二区| 亚洲午夜av| 久久久无码av精| 久久性爱视频99| 午夜乱轮操逼视频免费看| 天天综合站| 国产av色网| 粉嫩AV一区二区夜夜| 中日韓欧美高清| 天天躁日日躁xxxxx| 加勒比在线视频一区二区三区| 国产中文大片资源中文字幕| 无码自拍SM| 极品白嫩福利在线| 欧美九一精品久久久熟妇| 久久系列| 俺去俺来也在线www| 九九在线精品| 亚洲综合贴图91| 欧美综合色图网| 国产精品精品系列在线观看| 九九综合久久中文字幕| 日韩欧美视频青青| 啊啊啊啊啊舒服| aaa亚无码专区| 国产精品一区二区黄片| 精品国产72| 日韩猛交| 欧美极度丰满熟妇hd| ′ !γ}丶。。久久精品欧美一区二区三区| a人欧美综合天堂麻豆| 美女91AV| 久久曰曰| 不卡视频一区蜜桃视频 | 一区二区三区精品黑丝白丝酒店对鸡 | 国产免费小视频| 欧美一级黄片视频在线| 亚洲日本韩国极品一区二区| 97中文字幕一区| aⅴ日韩成人电影av在线免费看av大全 | 国产白丝av| 蜜桃午夜视频一区二区 | 麻豆 欧美 日韩| 女人天堂av在线播放| 日韩在线观看字幕精品| 97AV在线免费观看| 日韩精品在线观看网站| 欧美日综合| 园内精品自拍视频在线播放| 亚洲欧美九九九| 国产黄色在线播放观看| 欧美少妇内射| 国产精品无码在线| 果冻传媒一区二区三区| 色婷婷六月| 60秒不遮不挡| 国产精品高潮久久AV| 91精品微拍福利| 欧美第二页午夜| 一区二区娱乐网站| 新亚洲无码| 国产欧美日韩在线观看麻豆传媒公司 | 亚洲深夜福利| 开心五月婷婷| 亚洲黄色网址视频| 日韩成人性日韩成人性爱视频在线免费观看| 裸体女人草逼视频播放一区,二区,三区,四区,五区 | 超碰在线观看av不卡| suv精产一二三区| 久久综合激情| 天天日美女的B| 日本 色 导航| 高清无码人妻久久久一区二区三区aⅴ| 这里都是精品在线观看| 国产视频一区二区三区在线免费观看 | 欧美精品另类人妖xxxx| 欧美系列在线一区二区| 国产精品第一区第一页| 中文字幕国产| 老女人91| 亚洲精品97中文字幕| 大香蕉综合| 美女露胸露奶头| 性吧在线视频| 99在线精品观看99| 人妻丰满熟妇一区二区三| 久久久97| 草草草视频在线免费看| 亚州欧美另类| 91美女在线| 国产精品欧美在线观看| 不卡视频一区蜜桃视频 | 日韩一级片在线看| 岛国片国产成人亚洲播放| 操B视频日韩无码| 黄色免费一级在线毛片| 福利视频香蕉免费一区二区在线| 91观看 国产白丝| 传媒在线观看一区二区三区| 欧美九一精品久久久熟妇| 日本超碰97日韩精品人妻| 熟啊v色欧美热| 亚洲蜜臀视频精品久久| 欧美久久婷婷| 熟妇高潮二区三区| 性九九九九九九| 日本三级韩国三级美三级91| av天堂加勒比| 97亚洲在线| 操逼啊啊啊91| av日韩国产一区二区| 男人兔费天堂| 午夜一区| 亚洲精品乱码久久久久久蜜桃麻豆| 亚洲国产成人7777| 白丝被操91| 美女网站91| 亚州欧美色图| 无码日韩网站| 亚洲色资源| 日韩有码 一区二区三区| 91九色精品熟女内射| 色综合99999| 影音先锋每日最新资源在线观看 | 性高潮久久久久久久久久久| 大香蕉黄色一级片免费看| 久久一二区四| 九九九久久久| 人妻碰碰碰碰碰碰| 狠狠操使劲操| 婷婷五月天伊人| 三级色影综合网| 九九热视频在线观看| 91狠狠狠| 久久香蕉网| 欧美日韩中文字幕不卡| 天天操夜夜操| 欧美亚洲激情| 91 丝袜在线| 老熟妇一区二区三区…| 久草在| 操逼操逼逼操操逼91 | 免费视频a级毛片免费视频| 亚洲成人激情小说视频| 99这里都是精品| 91美女看B| 欧美日韩超碰在线| 国产人妻精品久久久一区二区三区 | 啊啊啊免费| 国产精品九9| 91精品久久久久五月天精品| 亚洲熟女偷拍在线观看| 99热婷婷| 亚洲无码成人精品| 亚洲美腿丝袜香蕉影视欧美成人| 久久五月天婷婷丁香中文字幕| 欧洲一区二区三区四区在线观看| 久99热| 影视综合无码少妇| 校园春色 亚洲| 超碰99在线观看| 亚洲乱色熟女一区| 久久人妻熟女一区二区| 日本不卡码黄色| 麻豆这里只有精品| 免费少妇一区二区| 色色97爱| 少妇蹲下买菜露大唇0| 特级大荫道BBwBBwBBW| 国产精品三级视频网站| 91网站18禁| 96精品一区| 九九热在线精品视频| 91蜜臀在线久久久久| 欧美一区二区观看在线| 内射老妇BBWX0C0CK| 日韩精品亚洲一二三| 制服丝袜第二页| 日韩淫色网| 日本三级网页| 欧美亚性天堂| 香蕉99秘 一区精品蜜桃臀| 岛国成人av在线播放网址| 九一综合网| 校园春色欧美色图| 婷婷丁香在线| 人夜夜精品网站香蕉嫩草| 福利在线黄片| 一区二区激情国产熟女| 视频分类 国内精品| 东京热双插| 岛国黄色大片网站| 免费视频无码| 国产真实子伦对白| 日韩天天综合| 色九久| 欧美肥臀在线| 九九热精品在线| 亚洲一区日韩精品中文字幕| 青青草操逼逼视频| 无码人妻一区二区三区四区老鸭窝| 亚洲有薄码区日本系列中文字幕| 2025年A片视频精品| 蜜臀网址在线| 亚洲综合射| 97蜜桃综合| 婷婷五月天色色| 情色五月天久久久| 超碰97玖玖爱| 男人综合网| 99操逼| 麻豆亚洲Av成人无码一区精品| 久艾草在线精品视频在线观看| 久久999久| 92人人操人人| 在线岛国新天堂8| 97超碰超碰| 亚洲 欧美 色图| 成人开心网在线视频| 九九九九九九成人| 丰满欧美少妇| 三级三久久线久久99久目本WW| 老熟妇一区二区三区…| 韩国嫰模上门援交视频| 91亚洲电影| 99日韩| 日韩色图 一区二区| 91在线免费精品视频| 精品成人av一区二区三区在线| 免费视频在线观看啊啊啊啊啊| 亚洲色图伊人网| 国产在线综合福利网站| 不卡中文字幕aⅴ在线| 亚洲av影音先锋| 成人短视频在线观看| 综合 青草 伊久久 影院 综合| 成人性交午夜免费片| 四虎国产精品永久在线囯在线| 国产福利影视| 超碰1997| 国产成人超碰在线| 欧美熟妇视频| 久操国产在线| 人人色人人操在线| 劲爆欧美人妖三区91| 亚洲熟女性高潮久久久| 国产传媒美日韩av| 黄色AV免费| 极品丝袜无码| 三级日本一区二区三区| 成人夜夜爽| 亚洲久9| 日本欧美成人片AAAA| 9久9久| 人妻熟女av国产网站| 欧洲一区二区三区四区在线观看| 国产精品999zyz| 亚洲码和欧洲精品激情系列| 偷拍 亚洲 欧美| 操我啊啊啊啊啊| 日韩免费中文字幕视频| 伊人丝袜美腿高跟在线观看高清| 26uuu国产免费观看| 国产无码精品久久久久久| www.四虎在线| 日本成人A片网站| 中文子幕一二三| 亚洲第一综合| 99热这里都是精品| 美女露胸露奶头| 麻豆视频一区二区| 蜜桃久久久久久久久久久久| 伦伦成年午夜免费视频| 人妻第一页| 东京成人一区| 福利在线观看一区二区| 久9无限国产| 亚洲综合骚逼| 欧美有码激情视频一区二区三区| 久久无码一区二区二三区性色| 日夜干射色啊| 好吊妞转入那个网| 日本成人A片免费看| 欧美 亚洲精品首页| 国产精品麻豆成人AV艾秋| 国产又黄又粗的视频| 91高清欧美| 亚洲天堂人人妻| 久久精品电影| 久久久女人| 亚州精品人妻一二三区| 久操高青| 男人天堂综合| 精品偷拍13p欧美dodk视频| 97色妞| 日本黄色精品专区网站| 欧洲射精91| 欧美人与动性人交a| 久久思思热| 综合 亚洲 欧美| 内射白嫩美女| 少妇厨房愉情理伦片bd在线观看| 99国产女人| 国产成人精品网站| 人妻 制服 日韩 中文 在线| 色综合加勒比四四季| GVH-003 母子姦 青木玲-麻豆视频,麻豆视传媒短视频网站入口,麻豆视传媒官网直 | 久久宗合亚洲| 日韩欧美午夜一区二区| 国产一级久久久| 精品日韩中文在线| 色拍偷亚洲| 7777奇米影视久久| 91欧美另类| 亚洲国产一级精品毛一级精品看免费视频| 啪啪91| 天天看天天日天天操| 极品粉嫩一区二区| 高清国产精品福利网站| 国产超碰在线一区| 3028国产精品| 福利一级版子| 美日韩成人| 精品人妻一区二区免费蜜桃视频| Av色五月| 免费成人在线熟妇网| 亚州色站 日韩电影| 成人97人人超碰人人| 欧美日韩青操| 欧美黄片视频在线观看免费| 台湾佬大香蕉| 九一综合精品视品av| 操操吧亚洲乱伦视频| 狠狠干2020| 综合激情婷婷| 在线日韩日本亚洲国产| 日韩精品怡红院| 亚洲成人久久一区二区| 国语精品av| 亚洲妇色| 99综合免费视频| www.91色综合| AV一区观看| 97超碰精品图片| 成人网欧美风情| 自拍视频一区在线观看| 亚洲黄色AV电影| 久久久久9999精品九九九| 黄色欧美性爱视频| 老司机福利青青草| 精品少妇一区二区三区| 人妻在线臀日韩| 欧美三级中文字幕hd| 亚洲精品97| 欧美色爱综合| 久久欧美按摩999| AA特级绝黄| 久久精品国产亚洲AV清纯| 日本黄色XXX| 97露脸精品丝袜| 日人妻视频91| 亚洲 小说 欧美 激情 另类| 五月天精品| 国产精品久久久久久久久久久久久久久久| 天天日日夜夜| 韩国一级做A片免费的| 亚洲欧洲无码bt精品合集| 日夜尻逼网| 91欧美丨精品丨入口| 97精品国产97久久久久久免费| 久久久亚洲Av| 午夜福利1区2区3区| 精品午夜福利| 东京热综合久久一区二区| 大香蕉在线SuP| 欧美一级欧美三级在线观看| 99在线免费观看| 婷色五月| 少妇xx精品| 制度丝袜99| 国产精品点击进入在线影院| 大JI巴好深好爽又大又粗视频| 手机在线大香蕉| 日本韩国五十路六十路七十路老熟女作爱视频网站 | 亚洲欧美精品福利在线| 九九久久一区二区伦理| 精品九九国产无码| 欧美性爱第一区| 小视频国产| 91人妻精华帖| 精品无码一区二区三区| 亚洲中字幕日本一区二区三区| 伊人网高清| 97超碰久久| 久久精品国产亚洲AV清纯| 91在线免费精品视频| 蜜乳中文字幕a在线| 天天做天天爱夜夜爽毛片试看| 无码一区免费在线不卡| 久久成人国产精品| 亚洲无码国产精品久久| 波多野结衣一级视频| 蜜乳AV一区| 最近2019中文字幕国语免费版| 久久草在线综合视频| 天天射,天天操,天天爽-国内精品一区二区三区-成人AV | 天天爽天天爽| 一本正道久久熟女| 91n免费处女| 91精品人妻一区二区三区蜜臀| 国产精品免费久久久久久久久久| 亚洲电影中字一区二区| 欧美专区日本专区| 情色日播放AV| 天天操天天看| 91人妻在线视频| 日本丝袜人妻内射| 美女刺激久久国产欧美| 国模不卡一本二本三电影| 午夜九九| 人妻无一区二区三区| 亚洲欧美日韩夜夜| 高树玛利亚无码流出| 91网站18+| 日本乱人伦片中文三区| 国产成人精品日本亚洲语言| 天天操天天射青青草| 91无摭挡| 丰满人妻被猛烈进入中| A片三级无码| 综合干干干av久久久综合网| 日韩日韩日韩-国产乱码精品一区二区| 久久久久久久人妻丝袜| 色噜噜人妻丝袜a∨先锋影| 中文字幕亚洲欧美在线不卡| 老鸭窝在线视频播放| 亚洲天堂五月天国产| 婷婷综合久久| 欧美综合777| 久久av无码| 日韩草久视频| 欧美日韩精品青青| 亚洲小电影免费涩涩成人在线高清| 农村少妇久久久久久久| 日韩精品在线观看观看| 97国产超湿| 青青草一区二区高清无码视频| 超碰成人公开| 狠狠搞 亚洲91| 亚洲色图综合| 狠狠狠狠狠| 综合亚州欧美| 成人三级片无码| h色99999| 久久黄色视频一区二区三区 | 怡红院视频在线| 精品国产乱码久久久久久久久久毛片| 亚洲精品三区在线观看| 裸体女人草逼视频播放一区,二区,三区,四区,五区 | 欧美夜夜草视频| 久久一二三四五六七八九区区区 | 九九九九热| 激情五月婷| 一块操欧美性爱| 天天躁日日躁XXXXYY| 亚熟hd视频在线| 中文AV制服乱伦| 日本天天吊| 九久精品| 夜夜爽爽爽| 嗯嗯不要视频| 丁香六月天| 久热热| 开心五月婷婷| 久久久久久九| AV 少妇 人妻 偷拍| 欧美性性性| 国产精品一二三免费网站| 精品国产乱子伦一区二区三区,精品一 | 女人爽到高潮潮喷18禁网站 | 欧美日韩91| 麻豆天美在线| 亚州国产精品乱| 欧美亚洲91| 女人妻一区| 欧美传媒| 一区二区视频你懂的| 99热99在线播放激情| 日本久久999| 极品尤物在线观看| 美女性91| 熟女日韩| 翔田千里Av在线| 中国黄色特级精品一区二区三区片| 成年人性爱日韩| 大香蕉视频啪啪啪啪| 99re这里只有精品中心播放| 五月天我淫我色av| 亚洲熟女乱色一区二区三区久久久 | 萌白酱自拍视频| 97超碰国产亚洲精品| 色999;丁香五月| 久久男人天堂| 超碰98综合网| 久久久久婷婷| 中文久久| 乱码人妻一区二区三区| 天天肏夜夜肏| 欧美日韩精品久久| 日本加靬比网站发布页| 午夜福利av电影在线| 天操天操夜操夜月月年年操操| 婷婷亚洲综合| 国产辣妈在线视频福利| 亚洲污污网站| 伊人久久88国产女| 91深夜夜| 精品少妇99| 日夜干射色啊| 五月综合视频| 女同女同恋久久级三级| 国产精品白丝www| 麻豆乱码久久精| 在线观看综合精品亚洲| 欧美性爽xyxOOOO| 四虎免费视频| 色av中文字| 国产一区二区三区导航| 一起草高清无码| 国产人人干| 少妇500双飞99| 日本幼女18+| 久久亚洲精品成人av| 国产第11页| 日本人体九九九九九九| 亚洲最新中文字幕免费| 超碰欧美| 97在线/亚洲| 成人黄页| 久九干| 国产亚洲国产超碰| AV和黑人在线播放| 97视频免费在线观看| 97精品视频在线播放| 精品久久久久黄少妇| 99在线免费视频| 日本高清有码网址视频| 偷拍偷窥与盗摄视频专区| 亚洲欧美校园| 综合九九| 天操老女人| 亚洲AV乱码专区国产噜噜亚洲| 色婷婷综合网站| 国产女生在线| 日本日逼高清| CCYY草草影院地址入口| 综合97| 国产久久天堂资源| 国产人人干| 免费成人在线熟妇网| 欧美天天综| 无码一区二区三区四区五区六区七区八区九区十区视频 | 日韩丝袜高跟制服在线观看| 精品免费一区二区三区在线亚洲人成| 99久久99久久综合| 在线观看黄色电话| 在线观看亚洲专区| 久操网无码在线| 操逼日批| 精品国产无码中文| 中国AV美女| 中文字幕黄片在线| 亚洲国产成人精品999| aV中亚| 尤物网站91| 青娱乐二区免费| 久久中文字幕不卡人妻| 国产91影院| 精品无码一区二区三区色欲| 久久久久亚洲Av无码专区老牛影视| 欧美色图91| 欧美色院| 精品性爱| 综合av社区| 亚洲国产av中文字幕久久| 伊人国产视频| 粉嫩AV一区夜夜嗨| 蜜桃久久精品一区二区三区| 日韩午夜国产| 欧美色自拍| 欧美后入式| 中文字幕人妻丝袜乱一区三区|