久久亚洲成a人片熟女精品色一区二区三区|国产精品视频第一精品视频|av天堂热无码手机版|亚洲?v无码久久无遮挡|国产精品偷伦视频免费观看国产|麻豆国产自产精品丰满熟妇|av无码av不卡一区二区|久久亚洲精品中文字

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

單一職責(zé)、第一性原則與ACID:系統(tǒng)設(shè)計(jì)的三條底線

單一職責(zé)、第一性原則與ACID:系統(tǒng)設(shè)計(jì)的三條底線 1. 先把三個原則的靶心認(rèn)清楚前年接手一個訂單模塊一個文件兩千三百多行里面有下單、算價、發(fā)券、調(diào)支付、寫對賬、發(fā)通知還有一段誰也不敢刪的歷史兼容邏輯注釋寫著“勿動動了會出事”。有次改一個優(yōu)惠券疊加規(guī)則上線第二天退款流程全掛了查了大半天才發(fā)現(xiàn)退款復(fù)用了算價里的一段私有方法而那段方法被我在改優(yōu)惠券時順手改了返回值結(jié)構(gòu)。這件事之后我把“原則性”這三個字重新理解了一遍——它不是面試時背的概念而是給代碼和系統(tǒng)劃的那幾條不能越的線單一職責(zé)原則管的是“邊界在哪”第一性原則管的是“從哪開始想”ACID原則管的是“什么狀態(tài)不能破”。三條線合起來最終落到三個很實(shí)在的地方安全、學(xué)習(xí)、節(jié)約——系統(tǒng)更不容易出事故自己成長路徑更清晰長期的人力和機(jī)器成本更低。這篇內(nèi)容適合誰看如果你寫業(yè)務(wù)代碼一兩年感覺項(xiàng)目越寫越亂、改一處崩三處如果你開始做一點(diǎn)模塊設(shè)計(jì)或者帶一兩個新人需要一套能講清楚、能落地的判斷標(biāo)準(zhǔn)如果你是做技術(shù)方案評審的經(jīng)常被“別人都這么做”這種理由堵回來。下面的東西不玩概念全是能直接抄的做法、能直接套的算例以及我踩過的坑。2. 三個原則各自盯住的是什么問題很多人把這三個原則當(dāng)成三個孤立的知識點(diǎn)考完就忘。真正有用的是把它們看成一套成本控制工具單一職責(zé)控制的是“變更成本”第一性原則控制的是“認(rèn)知成本”ACID控制的是“故障成本”。三樣?xùn)|西壓下去項(xiàng)目才可能長期活著。2.1 單一職責(zé)原則判斷標(biāo)準(zhǔn)是“變更的理由”不是“代碼行數(shù)”先糾正一個特別常見的誤解。SRPSingle Responsibility Principle里的“單一職責(zé)”不是“一個類只干一件事”也不是“一個方法只寫十行”。它的原始表述是“一個模塊應(yīng)該有且只有一個變更的理由”。關(guān)鍵詞是理由——理由來自人來自需求方。換句話說如果兩個需求來自不同的角色、不同的業(yè)務(wù)方向、不同的上線節(jié)奏卻都要改同一個文件那這個文件就違反了SRP。舉個具體的一個OrderService里同時放著“下單”“退款”“對賬出報(bào)表”三塊邏輯。下單的變更來自產(chǎn)品經(jīng)理退款的變更來自客服和財(cái)務(wù)對賬的變更來自財(cái)務(wù)結(jié)算周期。三個來源三種節(jié)奏三種驗(yàn)收方式卻擠在一個類里——這就是典型的職責(zé)過載。反過來一個PriceCalculator里有一百五十行算價邏輯包含了階梯價、會員價、區(qū)域價看著很長但它們?nèi)贾灰驗(yàn)椤岸▋r策略變化”這一個理由而改那它反而是合規(guī)的。所以行數(shù)不是判據(jù)變更源的個數(shù)才是。我習(xí)慣用一個很土的自測問題這個模塊如果要在周會上匯報(bào)我能不能用一句話說清它負(fù)責(zé)什么并且這句話里不出現(xiàn)“和”“以及”“順便”如果說不清基本就該拆了。2.2 第一性原則把“結(jié)論”還原成“事實(shí)”再從事實(shí)重新組裝第一性原則First Principles說白了就一句話別從別人給的結(jié)論出發(fā)從不可再分的事實(shí)出發(fā)。它的對立面是“類比推理”——因?yàn)閯e人這么做所以我也這么做因?yàn)樯洗芜@么做成了所以這次還這么做。類比推理省事但它會把別人的歷史包袱一起繼承過來。做過飯的人有體會照著菜譜一步步抄能做出一盤能吃的菜但只有搞明白“為什么先炒后燉”“為什么這個要大火快炒那個要小火慢煨”你才能在缺一味調(diào)料、換一口鍋的時候照樣做出來。寫系統(tǒng)也一樣。上來就問“我們要不要上消息隊(duì)列”“緩存用哪個”這是從結(jié)論出發(fā)先問“這個鏈路的讀寫比例是多少”“數(shù)據(jù)能容忍丟嗎”“延遲預(yù)算是多少毫秒”這是從事實(shí)出發(fā)。我見過最典型的一次爭論是某團(tuán)隊(duì)要做一個配置下發(fā)功能會上直接開吵“用推還是用拉”。吵了四十分鐘沒結(jié)果。后來有人把問題拉回事實(shí)配置一共多少條不到兩千條、多久變一次平均一天兩次、客戶端多少臺三千臺左右、能容忍多長延遲一分鐘內(nèi)都行。四個數(shù)字?jǐn)[出來答案自己就出來了——三千臺客戶端一天拉兩次QPS 不到 0.1隨便搞個定時輪詢就完事根本不需要長連接推送。算一遍比吵一小時管用。2.3 ACID原則它不是數(shù)據(jù)庫的專屬品是“狀態(tài)變更”的底線ACID 四個字母——原子性、一致性、隔離性、持久性——很多人只在學(xué)數(shù)據(jù)庫時背過工作后覺得那是 DBA 的事。但只要你的系統(tǒng)里存在“一次操作要改多處狀態(tài)”ACID 就是繞不開的底線。用轉(zhuǎn)賬這個老例子說清楚四件事。原子性指的是“扣錢和加錢要么都成要么都不成”不能出現(xiàn)扣了沒加一致性指的是“轉(zhuǎn)賬前后總金額不變”這是業(yè)務(wù)規(guī)則層面的約束隔離性指的是“兩個人同時轉(zhuǎn)不會互相看到中間狀態(tài)導(dǎo)致算錯”持久性指的是“銀行說轉(zhuǎn)成功了哪怕下一秒機(jī)房斷電這筆記錄也不能消失”。關(guān)鍵在于這四個性質(zhì)在業(yè)務(wù)層同樣成立。一次下單要扣庫存、生成訂單、發(fā)券、記流水這四步如果只成了兩步就是原子性被破壞兩個用戶搶最后一件庫存都顯示成功就是隔離性沒做好接口返回成功但消息沒發(fā)出去用戶看不到訂單就是持久性在業(yè)務(wù)語義上失守。把 ACID 當(dāng)成思維模型而不是數(shù)據(jù)庫參數(shù)你對“這次操作到底該放在一個事務(wù)里還是該拆開補(bǔ)償”的判斷會清晰很多。2.4 三條線合起來看它們都在給“不確定性”上鎖單獨(dú)看SRP 是模塊級的約束第一性是思考方法ACID 是數(shù)據(jù)層的約束好像不搭。但放到一個真實(shí)項(xiàng)目里它們其實(shí)是在給三種不同的不確定性上鎖需求會變所以要用 SRP 把變化圈在一個小范圍里別讓一次改動擴(kuò)散出去、信息不完整所以要用第一性把已知事實(shí)擺清楚別在假設(shè)上蓋樓、系統(tǒng)會出故障所以要用 ACID 保證出錯的時候狀態(tài)是可解釋、可恢復(fù)的。這三件事有一個共同特征它們都是“事前”的工作做完之后看不見摸不著但省下的是“事后”的巨額成本。改一處崩三處的項(xiàng)目排查一次線上資損事故的成本折算成人力往往夠重寫半個模塊了。3. 單一職責(zé)怎么落地從“上帝類”到能改得動的模塊道理都懂難的是手上這個兩千行的類怎么動手。我這幾年拆過七八個類似的模塊有幾個做法是可以直接復(fù)用的。3.1 先識別職責(zé)過載的四個信號別憑感覺判斷看信號。我總結(jié)下來有四個命中兩個以上基本就該動手了。第一個信號是測試成本異常。你想給某個方法寫個單元測試結(jié)果要 mock 掉五個依賴、準(zhǔn)備三份測試數(shù)據(jù)寫完發(fā)現(xiàn)測試代碼比被測代碼還長。這說明這個方法牽連的東西太多職責(zé)邊界早就糊了。第二個信號是命名里出現(xiàn)連接詞。OrderManager、DataUtil、CommonHelper、XxxAndYyyService這些名字本身就是投降聲明——作者已經(jīng)說不清它到底負(fù)責(zé)什么了。名字里帶“Manager”“Util”“Common”的類十個里有八個是垃圾桶。第三個信號是不同角色在改同一個文件。去看提交記錄如果同一個文件最近的提交者里有做訂單的、做財(cái)務(wù)的、做營銷的而且改的是不同區(qū)塊那這就是職責(zé)過載的鐵證。代碼的變更歷史比代碼本身更能說明問題。第四個信號是改一個需求要動多個不相關(guān)的地方。比如“會員折扣規(guī)則調(diào)整”這么一個需求你要改算價、改下單校驗(yàn)、改退款重算、改報(bào)表口徑四個地方分散在三個文件里改完還得祈禱沒漏。這種情況說明“定價”這個職責(zé)被切碎撒到各處了跟職責(zé)過載是一體兩面。3.2 按“變更來源”切不按“技術(shù)分層”切拆的時候最容易犯的錯是按技術(shù)分層拆把數(shù)據(jù)庫操作抽到 Repository把校驗(yàn)抽到 Validator把組裝抽到 Converter。拆完之后文件是變小了但一次業(yè)務(wù)變更仍然要橫跨五個文件改一遍因?yàn)檫@些層都是同一條業(yè)務(wù)鏈路的切片它們共享同一個變更理由。正確的切法是按變更來源切。還是拿訂單舉例我先畫一張表把這個模塊所有邏輯列出來標(biāo)上“誰會來改它”邏輯塊變更來源變更頻率是否獨(dú)立上線下單校驗(yàn)、創(chuàng)建訂單交易產(chǎn)品高是算價、優(yōu)惠疊加營銷產(chǎn)品很高是支付回調(diào)處理支付渠道對接中是退款、售后客服與財(cái)務(wù)中是對賬、報(bào)表口徑財(cái)務(wù)結(jié)算低但影響大是表格一拉出來答案就明擺著了這五塊是五個獨(dú)立的變更源應(yīng)該拆成五個模塊各自有獨(dú)立的接口、獨(dú)立的數(shù)據(jù)訪問、獨(dú)立的上線節(jié)奏。拆完之后算價規(guī)則再變也碰不到退款那段代碼我開頭遇到的那種事故從結(jié)構(gòu)上就被排除了。3.3 一段拆分前后的對照拆之前大概長這樣一個方法包辦到底class OrderService: def create_order(self, user_id, items, coupon_id): # 1. 校驗(yàn) if not items: raise ValueError(empty) user db.query_user(user_id) if user.status ! active: raise ValueError(inactive) # 2. 算價含會員價、券、階梯價200 行 total 0 for it in items: price db.query_price(it.sku) if user.level vip: price price * 0.95 total price * it.qty if coupon_id: coupon db.query_coupon(coupon_id) total total - coupon.amount # 3. 扣庫存 落單 發(fā)券 發(fā)通知 db.deduct_stock(items) order_id db.insert_order(user_id, items, total) db.mark_coupon_used(coupon_id) mq.send(order_created, order_id) return order_id拆之后每個類只對一個變更源負(fù)責(zé)class OrderValidator: 只因?yàn)椤合聠螠?zhǔn)入規(guī)則變化』而修改 def check(self, user, items): if not items: raise DomainError(EMPTY_ITEMS) if user.status ! active: raise DomainError(USER_INACTIVE) class PriceCalculator: 只因?yàn)椤憾▋r與優(yōu)惠策略變化』而修改 def calc(self, user, items, coupon): ... class OrderRepository: 只因?yàn)椤捍鎯Y(jié)構(gòu)或訪問方式變化』而修改 def save(self, order): ... def deduct_stock(self, items): ... class OrderCreatedNotifier: 只因?yàn)椤和ㄖ阑蛭陌缸兓欢薷?def notify(self, order_id): ... class CreateOrderUseCase: 編排只因?yàn)椤合聠瘟鞒滩襟E變化』而修改 def __init__(self, validator, pricer, repo, notifier): self.validator, self.pricer validator, pricer self.repo, self.notifier repo, notifier def execute(self, user, items, coupon): self.validator.check(user, items) amount self.pricer.calc(user, items, coupon) order_id self.repo.save_with_stock(user, items, amount) self.notifier.notify(order_id) return order_id注意CreateOrderUseCase這一層是必要的它負(fù)責(zé)“流程編排”。很多人拆完之后把編排邏輯也拆沒了結(jié)果調(diào)用方要自己按順序調(diào)五個對象漏一步就出錯——那是拆過頭了。3.4 拆過頭的三個坑我全踩過第一個坑是鏈路斷裂。拆得太碎一個新同事想搞懂“下單到底發(fā)生了什么”要跳八個文件每個文件都只看到局部。我的應(yīng)對是保留一個薄薄的編排層并且在編排層寫上完整的流程注釋讓人從入口一眼看到全貌想深入再看細(xì)節(jié)。第二個坑是為了單一而造轉(zhuǎn)發(fā)層。曾經(jīng)有個項(xiàng)目里出現(xiàn)了OrderService調(diào)OrderManager調(diào)OrderHandler調(diào)OrderProcessor四層全是透傳沒一行有實(shí)際邏輯。這種拆法只增加了導(dǎo)航成本。判斷標(biāo)準(zhǔn)很簡單一個類的方法如果全部只有一行轉(zhuǎn)發(fā)那它就不該存在。第三個坑是按技術(shù)拆而不是按業(yè)務(wù)拆。我前面說過這里再強(qiáng)調(diào)一次因?yàn)樗R娏恕0研r?yàn)拆成Validator、把計(jì)算拆成Calculator看起來很像 SRP但如果校驗(yàn)規(guī)則和計(jì)算規(guī)則永遠(yuǎn)同增同減、同一個產(chǎn)品經(jīng)理提需求那它們其實(shí)共享同一個變更理由拆開反而制造了耦合。注意事項(xiàng)拆分粒度用一句話衡量——一個熟悉業(yè)務(wù)的人能不能在半小時內(nèi)把這個模塊的職責(zé)、輸入、輸出、依賴講清楚。能就夠細(xì)了不能繼續(xù)拆拆完發(fā)現(xiàn)要講半小時才能串起一條鏈路說明拆錯了方向。4. 第一性原則怎么用把拍腦袋換成算一遍第一性原則聽著玄其實(shí)是個很機(jī)械的流程。我把它拆成五步每次做方案評審都按這個走能擋掉大部分“過度設(shè)計(jì)”和“跟風(fēng)選型”。4.1 五步倒推目標(biāo)、約束、假設(shè)、推導(dǎo)、驗(yàn)證第一步寫清目標(biāo)。注意是目標(biāo)不是手段?!白屜到y(tǒng)支持十萬用戶”是目標(biāo)嗎不是太模糊?!霸诜逯得棵雰砂俅握埱笙伦x接口 P99 延遲低于 200 毫秒”這才是目標(biāo)。第二步列出硬約束。硬約束是那些你改不了的事實(shí)預(yù)算上限、團(tuán)隊(duì)現(xiàn)有技術(shù)棧、上線時間點(diǎn)、數(shù)據(jù)合規(guī)要求、現(xiàn)有數(shù)據(jù)庫的能力邊界。硬約束越早擺出來越好因?yàn)榉桨缚臻g是被約束框出來的。第三步剔除假設(shè)。這一步最費(fèi)勁也最值錢。你要逼自己把“我們一直是這么做的”“行業(yè)里一般都用這個”這類句子劃掉只留下能被驗(yàn)證的事實(shí)。我常用一個提問法這句話如果被證明是錯的我們的方案會變嗎會變那它就是假設(shè)需要驗(yàn)證不會變那它無關(guān)緊要可以忽略。第四步從約束推導(dǎo)。有了目標(biāo)和事實(shí)方案通常只剩一兩個合理選項(xiàng)。這一步不需要靈感只需要算術(shù)。第五步驗(yàn)證最小可行。別一次上全套。先用最小的成本驗(yàn)證核心假設(shè)跑通了再加。這一步能救很多命——我見過太多方案在第四步推得頭頭是道第五步一壓測全崩。4.2 一個真實(shí)的容量估算比任何爭論都有說服力回到前面那個配置下發(fā)的例子我把算術(shù)過程寫完整你能看到第一性是怎么工作的。已知事實(shí)配置總量約兩千條每條平均 2KB總共約 4MB平均每天變更兩次客戶端三千臺業(yè)務(wù)能接受的配置生效延遲是 1 分鐘。推導(dǎo)三千臺客戶端每分鐘拉一次就是每分鐘三千次請求折合50 QPS。每次返回 4MB 的話總帶寬是 50 × 4MB 200MB/s這個就有點(diǎn)嚇人了。但注意配置大部分時間不變所以可以用版本號做條件請求——客戶端帶上本地版本號服務(wù)端發(fā)現(xiàn)沒變就返回 304實(shí)際響應(yīng)體接近零。這樣帶寬壓力基本消失50 QPS 對一個普通服務(wù)來說毫無壓力。最后方案單實(shí)例 本地文件 版本號條件請求配一個定時任務(wù)做變更推送的喚醒。整個實(shí)現(xiàn)不到兩百行沒有引入任何中間件。如果當(dāng)初按“配置中心都該用長連接推送”這個結(jié)論出發(fā)那就要維護(hù)連接數(shù)、心跳、斷線重連、灰度發(fā)布工作量翻十倍不止。4.3 成本也要算而且要算全生命周期選型時只看開發(fā)工作量是新手最容易掉的坑。我在做第一性推導(dǎo)時會強(qiáng)制加一張全周期成本表把三年內(nèi)的賬一起算成本項(xiàng)方案A自研簡單版方案B引入成熟中間件初期開發(fā)約 5 人日約 15 人日含部署調(diào)試學(xué)習(xí)曲線無純業(yè)務(wù)代碼團(tuán)隊(duì) 3 人各約 3 天運(yùn)維負(fù)擔(dān)復(fù)用現(xiàn)有服務(wù)幾乎為零新增集群、監(jiān)控、備份、升級故障排查自己寫的日志齊全需要理解內(nèi)部機(jī)制擴(kuò)展上限十萬級 QPS 以內(nèi)夠用更高但短期用不上三年總成本估算約 8 人日約 30 人日 持續(xù)運(yùn)維這張表不是為了證明“自研一定更好”而是讓決策顯性化。如果業(yè)務(wù)確實(shí)需要百萬級吞吐那方案 B 的額外成本就是必要投入如果只需要 50 QPS方案 B 的那二十多人日就是純浪費(fèi)。4.4 什么情況下別用第一性原則這點(diǎn)必須說清楚因?yàn)楹芏嗳藢W(xué)了第一性之后什么事都想從零推一遍效率反而低了。成熟標(biāo)準(zhǔn)方案直接抄。比如排序、哈希、基礎(chǔ)的 HTTP 服務(wù)框架、常見的鑒權(quán)流程這些是被無數(shù)人驗(yàn)證過的最優(yōu)解你從第一性推一遍大概率推不出更好的還容易推出 bug。強(qiáng)合規(guī)、強(qiáng)安全的領(lǐng)域別自作聰明。涉及資金結(jié)算、隱私數(shù)據(jù)處理的部分行業(yè)里有一套經(jīng)過審計(jì)的規(guī)范流程照著做就行。這時候“我重新想了一遍”不是優(yōu)點(diǎn)是風(fēng)險。時間成本高的時候先求有再求好。周一要上線周五你還在推第一性那是自找麻煩。第一性原則適合用在“這個決策會影響三年”的地方不適合用在“這個決策下周就可能改”的地方。判斷標(biāo)準(zhǔn)是這個選擇錯了返工成本有多高高值得推低先跑起來。5. ACID怎么延伸到業(yè)務(wù)層事務(wù)邊界是設(shè)計(jì)出來的數(shù)據(jù)層的事務(wù)數(shù)據(jù)庫幫你兜底業(yè)務(wù)層的事務(wù)得自己設(shè)計(jì)。這一塊做不好出的都是資損級別的事故。5.1 四個字母在業(yè)務(wù)代碼里的具體樣子原子性在業(yè)務(wù)里對應(yīng)的是“一組操作要么全做要么全不做”。下單場景扣庫存、建訂單、核銷優(yōu)惠券、記流水。這四步如果在同一個數(shù)據(jù)庫里一個本地事務(wù)就解決了如果庫存和訂單在不同服務(wù)里就得靠補(bǔ)償或者本地消息表。一致性是業(yè)務(wù)規(guī)則層面的不變量。比如“任何時刻所有賬戶余額之和加上在途資金等于總發(fā)行量”這是一條永遠(yuǎn)要成立的規(guī)則。它不靠數(shù)據(jù)庫的約束來保證靠的是你把所有會改余額的路徑都收攏到同一個入口并且在那里做校驗(yàn)。這就是 SRP 和 ACID 的交匯點(diǎn)——如果改余額的邏輯散落在五個地方一致性根本無從保證。隔離性在業(yè)務(wù)里是“并發(fā)操作不能互相污染”。最典型的兩個人同時下單最后一件庫存。數(shù)據(jù)庫層面靠行鎖或者樂觀鎖版本號解決業(yè)務(wù)層面還要考慮“用戶點(diǎn)了兩次提交”這種重復(fù)請求那是冪等問題不是隔離問題得分開處理。持久性在業(yè)務(wù)里是“承諾了就要兌現(xiàn)”。接口返回成功意味著后續(xù)所有異步流程發(fā)消息、發(fā)券、發(fā)通知都必須最終完成。這里最容易出事主流程提交成功消息發(fā)送失敗用戶看不到訂單。解決辦法是把“發(fā)消息”這個動作也納入事務(wù)——本地消息表就是干這個的消息先寫進(jìn)同一個庫的表中跟業(yè)務(wù)數(shù)據(jù)一個事務(wù)提交再由后臺任務(wù)掃表投遞。5.2 隔離級別的取舍別只記結(jié)論這一塊面試??嫉嬲绊懢€上表現(xiàn)的是這四種隔離級別帶來的鎖行為和并發(fā)度差異隔離級別臟讀不可重復(fù)讀幻讀并發(fā)度適用場景讀未提交可能可能可能最高幾乎不用僅用于極端統(tǒng)計(jì)場景讀已提交不會可能可能高大多數(shù)業(yè)務(wù)查詢的默認(rèn)選擇可重復(fù)讀不會不會視實(shí)現(xiàn)而定中同一事務(wù)內(nèi)需要多次讀同一批數(shù)據(jù)串行化不會不會不會最低強(qiáng)一致要求的結(jié)算類操作選的時候不要背“默認(rèn)用可重復(fù)讀”這種結(jié)論問自己兩個問題這個事務(wù)里會不會多次讀同一行數(shù)據(jù)并依賴結(jié)果一致會就要可重復(fù)讀以上。這個事務(wù)的并發(fā)量有多大、持鎖時間有多長并發(fā)高、持鎖長就往低級別靠用應(yīng)用層的樂觀鎖替代數(shù)據(jù)庫鎖。5.3 長事務(wù)是性能殺手也是故障源我遇到過的數(shù)據(jù)庫告警一半以上跟長事務(wù)有關(guān)。長事務(wù)的危害是雙份的一是長時間持有鎖把其他請求堵在門外二是回滾段膨脹拖慢整個實(shí)例。常見的長事務(wù)來源有這么幾個。把外部調(diào)用放進(jìn)事務(wù)里——事務(wù)里調(diào)了一個第三方接口對方超時三十秒鎖就持有三十秒。把批量操作放進(jìn)一個事務(wù)——一次性更新一萬行看著優(yōu)雅實(shí)際把鎖的范圍拉得極大。事務(wù)里做了重計(jì)算——循環(huán)里算價格、算積分算了兩秒才提交。我的處理原則很直接事務(wù)里只放數(shù)據(jù)庫操作而且只放必須原子的那幾個。外部調(diào)用、消息發(fā)送、文件寫入全都挪到事務(wù)外面用補(bǔ)償或者消息表保證最終一致。批量操作拆成小批每批五百到一千條分批提交。# 反例事務(wù)里做外部調(diào)用 def pay_bad(order_id): with db.transaction(): order db.lock_order(order_id) resp http.post(https://payment.example/charge, {...}) # 可能超時 30s order.status paid db.save(order) # 正例外部調(diào)用挪出去用狀態(tài)機(jī) 冪等鍵保證一致 def pay_good(order_id, idempotency_key): order db.get_order(order_id) if order.status paid: return order # 冪等重復(fù)請求直接返回 if not db.try_mark_paying(order_id, idempotency_key): return db.get_order(order_id) # 已被其他請求搶占 resp http.post(https://payment.example/charge, {...}) if resp.ok: db.mark_paid(order_id, resp.txn_id) else: db.mark_pay_failed(order_id, resp.code)5.4 冪等做不好前面全白搭只要你的接口可能被重試——不管是用戶手抖點(diǎn)兩次、客戶端超時重發(fā)、還是消息隊(duì)列重復(fù)投遞——就必須做冪等。三種做法我都用過各有適用面。唯一鍵約束最省事也最可靠。給業(yè)務(wù)表加一個冪等鍵字段比如“訂單號 操作類型”加唯一索引重復(fù)插入直接報(bào)沖突捕獲了當(dāng)成成功返回。缺點(diǎn)是冪等鍵的生成規(guī)則要提前設(shè)計(jì)好事后加字段很痛苦。狀態(tài)機(jī)前置判斷適合有明確生命周期的東西。支付單的狀態(tài)是“待支付→支付中→已支付”任何一步都先查狀態(tài)不符合前置條件就拒絕。注意這里必須用UPDATE ... WHERE status 待支付這種帶條件的更新讓數(shù)據(jù)庫來保證原子性別用“先查后改”的兩步走法那在并發(fā)下必然出錯。去重表適合沒有天然唯一鍵的場景比如消息消費(fèi)。建一張表記錄已處理的消息 ID處理前先插插失敗就說明處理過了。這張表要定期清理不然會無限增長。注意事項(xiàng)冪等的有效期要跟業(yè)務(wù)對齊。支付類操作可能需要永久冪等而“查詢類”操作壓根不需要冪等。別一刀切給所有接口都加去重表那是給自己找麻煩。6. 三個原則落到安全、學(xué)習(xí)、節(jié)約上是什么樣前面講的是“怎么做”這一節(jié)講“為什么值得做”。這三個維度是我評估一個技術(shù)決策值不值的時候最常用的三個尺子。6.1 安全原則是炸不穿的那層殼安全這個詞在這里有兩層意思。一層是狹義的信息安全權(quán)限校驗(yàn)、數(shù)據(jù)脫敏、越權(quán)防護(hù)。另一層是廣義的系統(tǒng)安全故障不會擴(kuò)散一次失誤不會拖垮全局。單一職責(zé)在狹義安全上的價值特別直接。假如權(quán)限校驗(yàn)的邏輯散落在二十個接口里你幾乎不可能保證每一處都寫對了只要漏一處就是越權(quán)漏洞。正確的做法是把校驗(yàn)收攏到一個入口網(wǎng)關(guān)或者統(tǒng)一攔截器讓“校驗(yàn)”成為一個只有單一職責(zé)的組件所有請求必須經(jīng)過它。這樣你要審計(jì)的只有一個地方。這就是為什么安全規(guī)范里總強(qiáng)調(diào)“統(tǒng)一入口”——不是官僚主義是把攻擊面收窄。ACID 在資金類業(yè)務(wù)里就是安全本身。原子性保證不會出現(xiàn)“扣了錢沒加錢”持久性保證“說成功了就一定成功”。這類系統(tǒng)里為了性能犧牲這些性質(zhì)的方案我一般直接否掉因?yàn)橐淮问鹿实拇鷥r遠(yuǎn)超性能收益。第一性原則在安全上的用法稍微繞一點(diǎn)但很有用它能幫你識別“看起來有必要其實(shí)沒必要”的安全措施。比如有人提議給所有接口加簽名校驗(yàn)理由是“更安全”。用第一性拆一下這個接口是內(nèi)網(wǎng)調(diào)用還是公網(wǎng)暴露調(diào)用方是不是只有固定的兩個服務(wù)如果只在內(nèi)網(wǎng)、調(diào)用方固定那簽名帶來的收益很小反而增加密鑰輪轉(zhuǎn)的運(yùn)維負(fù)擔(dān)。真正的風(fēng)險點(diǎn)可能在別處——比如這個接口有沒有做入?yún)㈤L度限制、會不會被用來做資源耗盡。6.2 學(xué)習(xí)用第一性原則搭骨架用單一職責(zé)管節(jié)奏學(xué)技術(shù)最容易陷入的狀態(tài)是“收藏了一堆文章一個都用不上”。原因是從結(jié)論入手——學(xué)了某個框架的用法但不知道它解決什么問題。我的做法是先問“這個東西沒出現(xiàn)之前人們怎么解決的痛點(diǎn)在哪”。比如學(xué)消息隊(duì)列先搞清楚沒有它的時候服務(wù)之間靠什么通信、會遇到什么問題同步調(diào)用鏈太長、高峰期扛不住、一個服務(wù)掛了拖垮上游。把痛點(diǎn)想透了再看消息隊(duì)列提供了什么異步解耦、削峰填谷、廣播。這時候它那些概念Topic、分區(qū)、消費(fèi)組、offset就不是名詞背誦而是“為了解決某個具體問題引入的機(jī)制”記起來毫不費(fèi)力。單一職責(zé)在學(xué)習(xí)節(jié)奏上的用法是一次只攻一個方向。我見過太多人同時學(xué)三門語言、兩個框架、一套云原生結(jié)果每樣都停在“會寫 Hello World”。按 SRP 的思路你某個階段的學(xué)習(xí)目標(biāo)應(yīng)該只有一個變更理由——“我要能獨(dú)立寫一個帶鑒權(quán)的增刪改查服務(wù)”這個目標(biāo)達(dá)成就停下來復(fù)盤再進(jìn)下一個。學(xué)習(xí)計(jì)劃里出現(xiàn)“同時學(xué)習(xí) A 和 B”這種表述基本都會失敗。ACID 對學(xué)習(xí)也有一層很妙的類比尤其是持久性。學(xué)的東西如果不落盤——不寫成筆記、不寫成代碼、不寫成可復(fù)現(xiàn)的 demo——它就像沒提交的事務(wù)隨時會丟。我的習(xí)慣是每學(xué)一個新東西強(qiáng)制產(chǎn)出一個最小可運(yùn)行的樣例放在自己的代碼庫里標(biāo)注“解決什么問題、關(guān)鍵配置是什么、踩了什么坑”。這玩意兒攢兩年就是自己的知識庫比任何收藏夾都值錢。6.3 節(jié)約省的是人力、算力、還有注意力節(jié)約這個詞容易被理解成“摳門”其實(shí)它指的是不浪費(fèi)。三個原則各自省的是不同的東西。單一職責(zé)省的是變更成本。這個收益是復(fù)利的一個邊界清晰的模塊改一次的成本是一一個邊界模糊的模塊改一次要通讀兩千行、要跑全量回歸、要擔(dān)心副作用成本是十。一年改二十次差距是多少不用算。而且這里還有個隱性收益——新人上手成本。邊界清晰的模塊新人兩天能改不清晰的兩周都不敢動。第一性原則省的是過度設(shè)計(jì)。前面那個配置下發(fā)的例子算一遍省掉二十多個人日。這類節(jié)省在很多項(xiàng)目里都存在只是沒人算過。我建議每個方案評審都強(qiáng)制帶一段“容量與成本估算”哪怕只有三行數(shù)字。養(yǎng)成這個習(xí)慣之后團(tuán)隊(duì)里“上來就要集群、就要中間件”的聲音會自然消失因?yàn)橐凰憔吐娥W了。ACID省的是故障處理成本。這個最容易被低估。一次數(shù)據(jù)不一致的事故處理成本包括定位幾小時到幾天、修數(shù)要寫腳本、要雙人校驗(yàn)、要留審計(jì)、用戶補(bǔ)償、后續(xù)的信任修復(fù)。相比之下把事務(wù)邊界設(shè)計(jì)對的成本可能只是多寫二十行代碼。這個投入產(chǎn)出比在任何項(xiàng)目里都是最高的。6.4 三者沖突的時候怎么排優(yōu)先級現(xiàn)實(shí)里一定會有沖突。為了節(jié)約成本少做校驗(yàn)安全就打折為了學(xué)習(xí)新技術(shù)引入復(fù)雜方案就違背節(jié)約為了趕進(jìn)度跳過拆分就把變更成本推給未來。我的排序是安全 節(jié)約 學(xué)習(xí)但這個排序有前提——這里的“安全”指的是不可逆的損失比如資金錯誤、數(shù)據(jù)泄露、用戶權(quán)益受損。這類事情發(fā)生了沒法回滾所以優(yōu)先級最高。節(jié)約排第二是因?yàn)樗绊懙氖强沙掷m(xù)性。一個長期虧錢的系統(tǒng)技術(shù)再優(yōu)雅也活不下來。學(xué)習(xí)排最后不是說學(xué)習(xí)不重要而是學(xué)習(xí)成本不該由生產(chǎn)系統(tǒng)承擔(dān)。想試新技術(shù)可以在旁路項(xiàng)目、內(nèi)部工具、灰度環(huán)境里試別拿核心鏈路當(dāng)試驗(yàn)田。我見過拿主站練手的出了事故之后再也沒人敢提“技術(shù)升級”這四個字反而把整個團(tuán)隊(duì)的技術(shù)迭代能力凍住了。7. 常見問題與排查技巧實(shí)錄下面這些是我和身邊同行真遇到過的問題按癥狀整理成速查表遇到類似情況可以直接對照。癥狀大概率原因排查動作處理方式改 A 功能導(dǎo)致 B 功能崩職責(zé)耦合共用私有方法看 B 的調(diào)用鏈?zhǔn)欠翊┻^ A抽出共用部分明確接口邊界一個類改一次要跑全量回歸變更影響面不可控用提交記錄看該文件的修改者分布按變更來源拆分模塊事務(wù)超時、連接池被打滿長事務(wù)持有鎖查慢事務(wù)日志看事務(wù)內(nèi)是否有外部調(diào)用外部調(diào)用挪出事務(wù)批量拆小用戶被重復(fù)扣款接口缺冪等查請求日志是否有重復(fù)入?yún)⒓游ㄒ绘I或狀態(tài)機(jī)前置判斷并發(fā)下庫存超賣隔離性不足看扣減語句是否帶條件更新改條件更新或加樂觀鎖版本號接口返回成功但用戶看不到數(shù)據(jù)主流程與異步流程不一致查消息是否投遞成功本地消息表 定時補(bǔ)償方案越做越復(fù)雜工期一再延沒做容量估算按結(jié)論選型補(bǔ)一份目標(biāo)與約束清單用最小可行方案先跑通拆完模塊反而更難維護(hù)按技術(shù)分層拆而非按變更源拆數(shù)一條業(yè)務(wù)鏈路要跨幾個文件按變更源重新劃分新人一周都不敢改代碼缺乏清晰的模塊職責(zé)說明看模塊是否有單一入口收斂入口補(bǔ)流程注釋7.1 三個不寫在文檔里的排查心得第一個先看提交歷史再看代碼。代碼只告訴你“現(xiàn)在是什么”提交歷史告訴你“為什么會變成這樣”。一個文件如果被五個人反復(fù)改而且每次改動都很小很碎那它的問題一定不是代碼質(zhì)量問題是職責(zé)劃分問題。改代碼解決不了得改結(jié)構(gòu)。第二個用“畫一條鏈路”的辦法定位耦合。拿一張紙從請求入口開始把經(jīng)過的每個方法畫出來。如果這條線穿過五個以上的類、跨越三個業(yè)務(wù)概念那就是耦合過重。這個動作我做過很多次畫到一半就能看出來問題在哪。第三個修復(fù)數(shù)據(jù)事故之前先想清楚怎么防止它再發(fā)生。線上數(shù)據(jù)錯了第一反應(yīng)是寫腳本修數(shù)這沒錯但修完就完事的話下周還會再來一次。修數(shù)腳本和防重腳本應(yīng)該同時寫。7.2 我自己的月度自查清單每個月我會花半小時過一遍手上的模塊問自己五個問題這個月改得最多的那個文件它的變更來源是幾個如果超過兩個下個月排期拆。有沒有哪個接口的響應(yīng)時間在悄悄變長如果有是有慢查詢還是有外部依賴。有沒有哪個流程的事務(wù)邊界是“順手加的”而不是設(shè)計(jì)出來的有沒有哪個方案是“因?yàn)閯e人都這么做”而選定的如果有補(bǔ)一份估算。有沒有哪個模塊我已經(jīng)不敢在沒測試的情況下改了最后一問最靈。當(dāng)你對某個模塊產(chǎn)生“不敢動”的恐懼時那地方一定有問題而且問題通常不是技術(shù)難度是結(jié)構(gòu)混亂。注意事項(xiàng)以上所有做法都有一個共同前提——你得先承認(rèn)自己的代碼會爛。抱著“我這套設(shè)計(jì)能撐十年”的心態(tài)什么原則都救不了。原則的作用是讓系統(tǒng)爛得慢一點(diǎn)讓修補(bǔ)的成本低一點(diǎn)僅此而已。最后分享一個我自己一直在用的笨辦法每次做完一個模塊我會在文件頂部寫三行注釋——這個模塊負(fù)責(zé)什么、它在什么情況下會被修改、它依賴誰。三行寫不出來說明這個模塊我自己都沒想清楚那就別急著提交先想明白。這個習(xí)慣堅(jiān)持了幾年最大的收獲不是代碼變好看了而是每次需求來的時候我能在一分鐘內(nèi)判斷出這次改動會波及哪里、要不要提前拆。這種“心里有數(shù)”的感覺比任何設(shè)計(jì)模式都值錢。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
免费综合亚洲中文| 99re99在线视频| 久久精品国产99久久,亚洲日韩久久日本一区一区三区 | 久久人人舔人人爽舔人人av片| 天天综合,91综合永久| 美国三级日本三级久久99| 五月亭亭六月丁香| 欧美五区| 51国产午夜精品视频| 天美传媒国产原创中文字幕亚洲欧美另类| 精品高清牛人盗摄一区二区三区中文字幕A片免费在线观看 | 搞中出视频在线观看| 欧美97| www.色婷婷| 久久国产精品视频| 日本伦理一区二区| 中文字幕精品一区欧美| 美骚妇av高清在线| 久久99综合| 99精品无码| 久久男女激情视频网站| 97亚洲色图| 能看的av| 久久69| 黄色网址久久精品欧美喷水| 中文字幕乱码在线| 伊人青青一区成人视频在线观看区| 伊人麻豆传媒| 天堂日本亚洲欧美| 欧美性生活免费网| 欧美激情专区| 亚洲高清内射| 国产日逼视频| 久久大香蕉97| 91啪9色| 久久精品国产精品一区| 人人澡人人干| 久久亚州高清| 园内精品自拍视频在线播放| 超碰欧美97资源| 少妇滛荡视频| 日本一区二区中文字幕久久| 中文在线久久字幕| 亚洲图片欧洲图片aⅴ| 91美女国产在线| www.婷婷六月天| 日韩肏逼视频| 天天夜夜rb| 九久久九精品视频| 久久婷婷综合国际产色怕| 国产精品另类| 亚洲综合贴图91 | 不卡中文字幕aⅴ在线| 色色99| 玖玖玖玖精品国产剧情| 夜草网站| 欧美成人国产精品| 亚洲色图久久精品蜜| 国产精品第一区第一页| 变态另类专区| 中文字幕精品亚洲熟女| 91麻豆天美国产欧美| 国产午夜激片Av毛片不卡| 91中出视频| 亚欧中文字幕在线视频| 九九色精品| 成人小说另类在线| 亚洲丝袜诱惑| 亚91网| 中国小夫妻勾搭露脸淫荡对白| 五月天大香蕉| 国产女人和拘做爰视频| 亚洲加勒比久久日本道| 亚洲一区中文字幕| 中文字幕人乱码中文字的预防方法 | 久久啊啊啊视频| 大香蕉丝袜一级片| 中文字幕亚洲热播人妻| 久久久国产av美女私房| 欧美日韩97| 少好三P| 9久久美女首页| 色综合五月天| 大香网伊人久久综合| 久久精品 六十路 熟女 欧美| 蜜桃臀AV在线| 麻豆人妻偷人精品无码视频| 天天看高清麻豆| 超碰调教97| 国产尹人在线视频免费| 亚洲无码?第一页| AA级电影三区| 搡老女人911熟妇老熟女| 天天干夜夜鈤| 欧美成人精品一区二区男人蜜臀| 超碰碰小说97| 亭亭在线资源| 91久久久老司机| 99久久综合| 超碰97资源大奶| 啊啊啊 在线观看| 亚洲欧美中文日韩视频中国语| 日韩欧美成人性爱在线| 亚洲αv一区二区三区| 国产一级不卡在线观看| 国产 日韩 欧美 中文 另类,国产 欧美 另类 制服 变态,高清 日韩 欧美 中文,高 | 男人天堂久久精品| 婷婷色在线| av一区二区三区 中文| 在线观看色视频| 精品无码久久久久久国产浪潮| а√天堂资源官网在线资源| 精品人妻一区二区三区四区石在线| 国产精品在线免费| 超碰色97| 亚洲AV无码秘 蜜桃臀国精产品| 亚洲另类天堂| 精品成人动漫一区二区| 久久久精品视频免费观看| 懂色AV蜜臀无码精品APP| 中国一级特黄大片护士| 欧美九九爱| 丝袜制服字幕在线| 天美传媒Av在线| 艳尻美人妻| 97在线视频观看| 黄页av| 国产传媒日韩欧美| 成人小说另类在线| 超碰在线香蕉| 思思热在线观看| 大香蕉伊人色偷偷在线| 超碰到97情色| 美女啊啊啊啊啊| 精品欧美老熟女一二区| 啪啪AV导航| 干婷婷综合网| 男人天堂.AB| 超碰天天操你比| 天天天做天天天爱天天天爽| 91色香| 1人人看人人摸人人操| 无码高清专| 六月婷婷综合| 97 国产一区| 人乳av| 狠狠爱综合网| 国产强奸超碰AV| 嗯啊啊啊轻点视频 | 伊人大香蕉在线| 一级黄碟在线观看| 91狠狠综合久久| 成年人网站在线免费观看| 伊人久久综合影院| 国产一区二区三区中文字幕| 97伦乱| 性91| 久久久天堂| 自拍偷拍草一草| 大香蕉黄色一区| 欧洲Au麻豆| 久久九九久精品国产尤物|国产精品爽黄69天堂A片潘金莲,国产亚洲精品第一综合 | www.婷婷五月天| 日韩欧美丝袜诱惑| 欧美人黑A片无码免视费| 白嫩国模丰满一二三区| 97频视在线| 人人妻人人玩人人澡人人爽| 国语精品内射在线观看| 第二页中文字幕| 91网站18+| 欧美18老人禁| 青青国产精品在线| 免费视频观看60秒| 色情五月丁香| 加勒比人妻综合| 综合网天天| 日本在线不卡一二区| 国产又大又粗又色生活片亚洲国产精品成人久久久综合免费 | 一级性爱aaaa| 欧洲色综合| 可能人人看人人摸| 国产精品欧美激在线| 91中出视频| 国产又粗又长又爽又色| 精品免费成人久久| 日本片日本片祼观看网站在线看中文版网页在线看 | 日本熟妇人妻中出视频| 亚洲熟女一区| 国产精品嫩草久久久久| 和协影院中文字幕三区| 国产精品懂色tv影视免费观看| 天天插天天操| 中国和日本人色哪个不下载能放| 性做久久久久久免费观看软件| 一道本东京热加勒比一区二区三区| 9久热这里只有精品| 免费观看啪视频| 丝袜美腿射精91| 家庭乱伦国产| 亚欧美综合网。| 亚洲欧洲综合成人av一区| 德国一二三不卡| 100啪啪视频大全| 亚洲男人天堂网久久| 人妻精品一区二区| 有码免费观看| www.色吧5.com| 国产AV人人 夜夜人人澡| 色悠久| 91精品人妻一区二区-全集完整版免费正片国语-B02AV | 精久久久| 丁香婷婷色五月| 国产一区在线看| 综合97久久| 大香蕉懂9| 在线视频 亚洲精品| 亚洲,日韩,欧美,成人播放| 国色综合天| 久啪视频| 日本精品五区| 福利操逼| 屌逼传媒| 亚洲日韩熟女人妻高清在线| 99中文字幕| 欧美人体性爱互联网第一页婷婷日本| 亚洲另类欧美精品| 91美女中出| 激情小说五月天| 久操大香蕉超碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰 | 噜噜瑟| 久久久九九| 三四中文字幕| 91人妻精华帖| 99在线免费视频| 色91综合网| 亚洲图片欧美另类综合免费视频大大香| 欧美日韩中国x| 91天美免费| 欧美精品宗合| 日韩有码免费视频| 射欧美综合| 色香综合天天影视综合 | 成人日韩中文字幕| 99热在线只有精品| 天美91| 精品九九国产无码| 伊人国产视频| 色哟哟AⅤ| 国产在线能看的你懂的| 日韩性爱1级片视频| 丁香婷婷大香蕉| 高树玛利亚无码流出| 亚州综合AⅤ| 久久精品人妻一区二区三区| 欧美九九九| 97干在线视频| 欧美午夜视频免费观看| 欧美午夜精品久久久久久超碰| 一区二区三区视频| 91爱综合| 99xav| 蜜桃臀av一区二区| 91欧美丝袜| 日韩射图| 亚洲A曰本VA欧美VA视频| aaa一级黄片| 日韩欧美偷拍美女视频| 桑老女人九区| 欧美亚洲自拍另类人妻| 啊啊啊啊好爽好舒服一区二区易域| 高颜值美女口爆高潮浪叫| 日韩探花精品在线视频| 久久9亚洲| 中文字幕av一区二区三区人妻少妇| 97欧美视频| 91蜜桃婷婷狠狠久久综合9色| 91美女视频直播| 欧美一区二区三区成人性生活| 啊啊啊啊啊啊啊啊在线观看| 色综合久| 欧美综合色,www| 欧美精品23| 好看的91视频| 欧美日产国产在线成人第一区| 亚州中文字幕超碰97| 曰韩中文人妻视频| 少妇同性| 婷婷五月丁香五月| 亚洲av青草久久一区二区| 999九九精品| 成人三级片无码| 久久久无码精品人妻二区| 亚洲最大AV网| 伊人国产视频| 亚洲人妻av| 精品日韩人妻视频| 啊啊啊啊免费视频| 加勒比久久av| 91丝袜美腿网站| 久久精品国产亚洲AV高级北京| 天天色综合影视网| 97精品国产97久久久久久户外免费| 亚洲成人免费中文字幕| 欧洲久久一二线| 试看60秒| 91国产丝袜足交精品视频| 国模吧 一区二区三区| 97爱| 日本不卡在线二区三区| SS久久| 九九九久千久久激情蜜桃在线看| 国产精品久久久久无码AV会牛| 91丨国产丨白浆秘 洗澡动漫| 六月婷婷一区二区三区| 天天内射| 国产精品久久久蜜臀| 俺去久久| 久久精品无码专区| 国产探花精品在线| 大香蕉92| 国产东北女人在线视频| 99re99视频在线免费观看| 天天日日夜夜| 精品人妻一区二区三区-国产精品| 欧美激情综合| 伊人青青一区成人视频在线观看区| 中文字幕精品一区二区精品| 日本在线一二| 亚洲熟女国产综合另类| 久久水蜜臀亚洲AV无码精品| 精品视频97| 亚洲综合性网址| 九九九九九九视频| 蜜臀久久99精品久久久久久成人小说 | 中文字幕 人妻不满 在线视频| 超碰人人妻| 亚洲av夫妻操穴网| 亚洲污污网站| 91欧美色| 欧美国产成人在线| 亚洲熟女偷拍在线观看| 蜜臀久久99精品久久久久久| 免费人成毛片乱码| 精品人体无圣光凹凸| 日本五十路熟女一区二区| 久久婷婷热| 天天看特黄的免费网站| 久草线上视频免费看| 在线二区不卡| 老熟妇一区二区三区…| 免费一级视频特黄色大片| 欧美亚洲第1页| 91欧美性| 国内偷拍精品一区二区| 99只有精品| 精品国产国产AV| 91白嫩| 精品亚洲黄色片 国产精品导航一区二区| a一区二区三区乱码在线| 国产丝袜视频| 中文在线久久字幕| 91久久| 97香蕉碰碰人妻国产欧美| 国产精品久久发布| 日韩一级二级三级免费看完整版国语版| 一区二区影视| 东亚亚洲无码高清| 婷婷五月天久久精品视频一区二区三区| 国产亚洲精品美女| 男人的天堂2019| 五月丁香综合啪啪| 狠狠干2020| 日韩三级在线观看网站| 夂久色| 无码视频一区二区| 熟妇xxxxx性春色| 长长久久88视频| 亚洲免费精品一区| 久草免费在线视频| 国产精品久久久久av| 青青操在线亚洲视频观看欧美在线| 久久中文字幕在线观看| 婷婷亚洲综合| 中文字幕熟女人妻丝袜丝| 中文字幕五月婷婷免费| 麻豆国产av网| 亚洲 暴爽 AV人人爽日日碰| 嗯啊不要在线观看嗯啊| 婷婷丁香人妻 | 国语对白露脸XXXXXX | 操日韩第| 成人久久无码www| 五十路熟女人妻一区二区在线观看 | 蜜桃臀AV在线| 人摸人人操人| 欧美性天天影院| 精品一区二区在线针对华人免费观看这里只有精品免费观看 | 九九操久久国产免费视频| 全球成人中文在线| 黄久在线| 婷婷激情五月天小说网| …中文字幕亚洲乱,97人妻无码费视… | 青青草在线视频美女| 国产操逼逼网| 色香综合天天影视综合 | 日韩99精品视频综合区| 一区二区三区日韩欧美| 少妇厨房愉情理伦片bd在线观看 | 特级毛片特黄久久免费看| AV在线资源| 波多野结衣一级视频| 91综合在线| com 首页 18岁 禁区 女优 免费 精选 同城 | 强奸乱伦中文字幕AV| 乱码人妻一区二区三区| 91强热人妻| 亚洲精品国产熟女久久久| 黄片免费久久久久久久| h色99999| 色婷视频| 欧美色网| 黑人粗大V S日韩女优视频| 久久久久9| 99只有精品| 亚洲熟女性高潮久久久| 久草新在线| 亚洲情色1区| 国产精品嫩草久久久久| 精品女同一区| 亚洲宗合电影| 亚洲一卡2卡3卡4卡乱码网站 | 久久一二三四五六七八九区区区| 日本伦乱九九九综合| 美女淫穴| 久操热| 欧美97av| 最新av在线| 色色婷婷五月天| 五月亭亭六月丁香| 蜜桃网熟妇| 人妻久热在线| 国产精品三级视频网站| 人人人摸人人| 97资源久久| 久久天天躁日日躁狠狠躁| 中文字幕成人| 国模不卡| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师黑人潮喷一 | 国产女同性恋视频| 深爱激情五月天| 欧美综合国产精品久久丁香| 欧美日韩小说| 77国产精品| 97中文超碰| 国产精品久久久久久无码红治院| 日本天天干天天操一区| 久久久精品一区二区| 91久操| 亚洲视频1区| 日韩熟女精一区二区三区不卡| 999综合网| 91激情网| 欧美丝袜激情| 亚洲熟妇自偷自拍另欧美| 中国一级操逼视频| 久久久久久久9| 午夜经典| 超碰无码五月97| 99久久com免费视频′| 成人免费福利在线观看| 亚洲欧美高清无码| 色色毛片| 人妻少妇久久中文字幕一区二区 麻豆| 99日免费视频中文字幕| 超碰碰97| 中文字幕片| 亚洲另类综合欧美| 手机看av网站在线看| 大香焦A片| 国内精品嫩模A∨私拍小视频| 欧美色图片色哟哟| 操死我了啊啊啊| 超碰中文字幕人妻草一区| 高树玛利亚无码流出| 97视频在线免费看| 日本韩国一本产品小视频日本韩国一本产品久久久产品小视频日本韩国一本产品久 | 亚洲最大91网| 日本三级大片| 夂久色| 色一情一乱一乱一区91Av| 亚洲中文日韩精品| 亚洲成人性爱在线观看| 青娱乐日韩无码| 牛牛aV| 国产精品自在自拍视频| 日本一级性爱| 亚洲无码太久| 中文字幕乱在线伦视频中文字幕乱码在线 | 蜜臀操逼黄色视频操的好爽| 国产福利电影| 大香蕉久| 男人的天堂一区三区| 天堂中文日本在线观看| 秋霞曰韩R级| 婷婷丁香在线| 夜夜嗨AV一区天天| 美女啊啊啊啊啊啊啊| 六月婷激情福利天堂69| 97综合国产精品高潮久久| 欧美色图私拍91| 久久久久9999妇女| 久久视频少妇美女| 91美女视频直播| 视频不卡中文字幕| 美女刺激久久国产欧美| 久久女女| 欧美亚洲尤物久久| 国产丝袜一区二区三区| 欧美一区二区情色| 五月综合色| 亚洲男人的天堂V| 97欧美精品综合| 欧美国产视频| 欧美日韩亚洲少妇寂寞影院正在播放| 久久久久女教师免费一区| 欧美熟妇色| 狠狠91| 精品久久久久av影院| 视频分类 国内精品| 婷婷爱五月| 国产大片精久久久久久| 丝袜视频网国产90| 中文字幕丰满人妻日本| 秋霞成人一级在线观看| 一区二区三区机械有限公司| 久偷拍| 免费精品AB| 国产日韩久久| 手机在线A片| 五月天婷婷影院| 日本一片一区| 国产精品丝袜在线| 免费公开人人操| 欧美午夜精品久久久久久3D| 天天α片| 国产白丝精品在线观看| 国产高清无码一区二区三区四区皇冠| 91女人的网站| 97超级色碰碰| 黄色操人| 天天操夜夜操| 国产精品久久久久久9999| 亚洲伊人成综合成人网| 久久精品三级影视| 美欧老女人97| 少妇久久久久久久| 成人在线视频网| 日本精品国产视频| 男人的天堂1024| 黄色一区二区秘书性感| 一区麻豆 高清中文字幕| 四虎免费在线播放| 91精品女厕偷拍视频| 啊啊啊啊啊操我视频| 热热色青青草| 性色生活片久久毛片婬片免费放女人一级毛片| 免费观看欧美日韩操逼视频| 五月天精品| 亚洲熟女性高潮久久久| 欧美AB在线观看| 九九九九亚洲| 99色视频| 一二三区视频在线观看| 亚洲欧综合另类无码一区| 婷婷综合在线观看| 亚洲春色一区二区三区| 日韩免费人妻色情网站| 亚洲精品 欧美97色色| 欧美日韩在线视频网站| 在线啊啊啊啊| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师黑人潮喷一 | 天天谢天天干| 国内精品久久国产,www香蕉久久五月丁香,亚洲欧美日韩精品永久在线,日本精品一 | 国产偷拍网站| 欧州色图区| 国产综合久久久麻桃个| 超碰在线91| 春色综合网| 99自拍视频在线| 激情内射| a级理论午夜日本| 天天干人妻视频| 囯产操逼片| 射丝袜大香蕉| 欧美黄色片在线播放| 狠狠图片青青草| 性暴力欧美猛交在线直播| 国产精品大屁股999| 秋霞成人一级在线观看| 天天看特黄的免费网站| 欧美日韩不卡a片| 操亚州| 在线观看AV片| 91美女视频电影| 久久精品国产亚洲AV成人直播| 91女优在线观看 | 97一区二区三区视频| 国产亚洲精品无码三区| 久久99草| 99色视频| 高潮精品| 蜜桃视频一区二区三区| 1769精品一区二区三区| 亚洲色图欧美一区二区不卡| 绯色AV粉色AV蜜臀AV| 亚洲成aⅴ人片不卡无码| 五月天伊人| 欧美亚洲另类在线蜜桃| 后入人妻无码| 好淫网一二三视区| 亚洲日韩美国人妻| 97亚洲色图| 天堂av2019| 日本人妻中文字幕| 96国产精品| 九九热九九热| 最好看的中文字幕在线2018| 哈哈操电影| 日本精品88888888| 亚乱色| 青草精品视频日本久久久久网站在线| 日han少妇无码| 日韩成人精品视频自拍| 97日韩| 日本国产二线女色| 中文高清一区二区的| 精品成人无码| 清纯唯美第一页| 夜夜嗨绯色| 亚洲无码99| 国产午夜福利电影免费在线观看| 无码二级三级| 久久久久久久久久久999| av一区二区三区 中文| av亚欧| 四虎在线视频| 亚洲诱惑| 久7色| 激情综合久久| 乱伦图一区| 欧美超碰在线| 亚洲激情深爱文学小说网站| 精品网站99999| www.91色综合| 无码免费精品高清| 91成人高清在线观看| 久久日韩肥臀| 美性中文综合网| 色五月69夫妻| 小少妇| 一个人免费HD91视频| 蜜臀久久99精品久久久久久无删减 | 网页导航五月天免费一二三区| 久这精品中文在线观看视频| 九一国产精品| 日日黄色三级网站| 色综合中文字幕不卡| 99久久网站| 女人被添高潮免费视频| 人人玩人人添人人澡免费| 久久久四区| 国产中文字幕在线观看| 亚洲涩图欧美| 天天天天天超碰| 久草视频制服诱惑| 人妻天天爽夜夜爽精品2| 五月婷婷激情网| 日日操丁香五月天| www.黄色在线| 超碰在线观看av不卡| 国产精品久久久吖| 亚欧免费观看视频| 无码人妻精品酒店| 天天久久| 亚洲av成人精品一区| 亚洲综合97| 精品久久97观看在线视频| 久久精品国产97欧美精品亚洲 | 96麻豆精品一区二区三区| 懂色影视久久| 亚欧性爱无码| 国产精品久久久吖| 国产美女在线精品免费看| 91天天看| 亚洲无码日韩电影| 欧美色网络| 欧美综合天堂| 亚洲无码 国产无码| 91丝袜在线观看| 99久久精品国产系列| 97久久久| 超碰在线人妻中文字幕| 欧美呦呦性爱| 久久精视频美日韩在线视频| 免费A V在线播放| 亚洲强奸乱伦影视网| 色久桃花影院在线观看| 中文字幕aⅴ在线视频| 久草网站免费在线观看| 亚洲第一无码播放立川理惠| 亚洲精品精品一区二区| 国产精品极品美女视频| 欧美,日韩,亚洲视频| 免费A V在线| 色婷婷综合网| 春色校园综合网| 97超碰资源网| 天天干夜夜鈤| 亚洲资源一区| 国产91影院| 人人看人人爰人人操| 啪啪免费| 五月丁香综合激情| 96精品久久久久中文字幕| 天美欧美国产| 蜜桃传媒视频第一区入口在线看| 天天日天天操天天射河南省| av无线看| 人妻中文字幕日韩电影| 啊啊啊操一区| 北条麻妃性愛视频| 久久爽爽精品| 亚洲 日本 不卡| 综合影院永久入口国产| 国产成人免费观看在线视频| 亚洲综合春色| 日韩无码久久熟女一级片| 中出20p| 久久精品国产精品一区| 天天做天天爱夜夜爽毛片试看| 成人性爱视频在线看| 日韩欧美成人综合在线| 91在线页| 97久久精品国产| 中文字幕精品三级久久久| 日韩大香蕉| www.91理论| baisiav| 欧美综合色图片| 青青久久艹| 青娱乐国产精品| 国产精品交换一区二区| 少妇专区一二三四五| 熟妇女伦乱视频视频| 日韩乱伦AⅤ| 丁香五月影院| 日日妻色网| 亚洲国产精品无石码久久| www.大香| 日韩精品区二区三区不卡| 天天操狠狠日夜夜干超大胆开放com大香蕉视频在线观看 | 日本久久天堂| 国产精品丝袜久久亚洲不卡| 午夜操一操| ?亚洲伊人伊成久久人综合网| 久久综合女优| 五月婷亚洲精品天堂| 国产 日韩 另类 视频一区爱| 色好看av| 蜜臀久久99精品久久久电影| 综合五月婷婷| 校园春色 亚洲| 搡老人老9丨女老熟人| 色哟哟-国产专区| 精品一级| 夜夜草网站| 欧美少妇高潮久久91| 成人国产视频在线观看| 日本在线一二| 亚洲色婷婷综合久久久久中文| 92人人操人人| 91男同| 超碰人妻天天干| 内射中出日韩在线观看视频| 天堂综合网| 国产亚洲精品一区二区三区| 欧美综合97www| 久 久无码人妻AV| 久久婷婷五月天| 久久婷婷一区| 熟女突然公开看18禁影片| 亚州欧美一区| 不卡一区二区日本视频| 亚洲91综合| 久久精品国产亚洲AV高级北京| 亚洲综合99999| 国产精品不卡一区二区三区av| 久久久久精| 国内一区二区免费| 一区久久久二区| 美女天天干| 中文字幕55555| 天天射天天| 亚洲av热热色| 综合97| 亚洲自拍另类丝袜综合| 国产精品视频内谢女人| 激情五月婷婷| juliaann丝袜| 97AV爱| 亚洲色系另类精品国产| 欧美久久久| 玖玖爱免费观看视频| 欧美日日人人天天| 大香蕉综合网| 亚洲激情片| 国产欧美成人精品| 欧美 亚洲 偷拍自拍| 亚洲国产精品成人久久蜜臀| 日韩乱码Av| 99久久久久久亚洲精品不卡| 99精品丰满人妻无码| 午夜男人一级A片7777| 男人的天堂VA| 久久色一区| 国产乱伦亚洲色图高清无码| 久久久99久9| 中日韩久久久| 97视频播放| 亚洲97p| 免费视频a级毛片免费视频| 男人精品区| 色偷综合| 后X久久| 国产亚洲禁久一区二区| 97欧美| 大肉棒导航| 婷婷色播婷婷| 亚洲熟伦熟妇AV无码春色| 九9热伊人| 日韩专区数据列表-第3230页-精品国产一区二区三区香蕉 久久99熟女人妻中文字 | 涩亚洲欧洲| 看看小穴| 老司机射| 欧美一级在线观看成人| 国产亚洲色婷婷99精品91| 日本色婷婷| 91在线免费精品视频| 九9热伊人| 手机不卡视频不卡在线一二三区| 成人性爱av.com| 97在线观看视频| 免费看污网站| 立川理惠加勒比无码| 91av熟女人妻| 欧美伊人电影| 碰超人人在线一区二区三区| 麻豆天美久久91| 玖玖玖玖精品国产剧情| 啪啪啪东京| 精品视频一区二区| 美女91在线观看| 成人黑料社久久| 久久久久久亚洲Av无码精| 清纯唯美综合| 久操影视| 五月天久久婷婷亚洲 | 亚洲色图自拍| 青青草亚洲一区| 九九激情网| 亚洲一区二区三区欧美日韩| 国产在线观看91精品一区| 亚洲丝袜综合| 亚洲久久天堂| 蜜臀aV午夜一区二区三区| n1038 一二三区| 91N欧美| 色婷网| 国产精品色片一区二区| 99国产在线 精品 视频| 视频一区二区免费在线| 四季av一区二区凹凸精品小说| 伊人网在线观看| 蜜桃精品一区二区三区ww| 在线啊啊啊啊| 丁香五月av| 久久久国产亚洲精品系列| 天天日天天搞天天干| 国产一区二区三区高清视频| 少妇被c 黄 免费观看| 国产精品天堂| 蜜臀aV午夜一区二区三区| 伊人网在线视频| 99亚洲人人| 看看小穴| 一个人在线看的黄色电影网站| 亚洲18禁| 熟女人妻av在线资源,黄色的资源| 色色色色电影网| 韩国一级婬片A片AAAAA| 狠狠爱综合| 大香蕉综合在线| 黄色av一区二区在线| 在线性黄高清免费视频| 人人操肉肉| 亚一综合久久久久久久久久| 18禁中文字幕| 手机看av网站在线看| 日韩成人精品视频自拍| 日韩成人精品| 久久人人爽爽人人爽人人片αV| 一级人妻性爱视频| 亚洲综合另类| 欧美精品精品一区二区| 丰满人妻一区二区三区四区| 久操国产在线| 国产99999| 男女啪啪啪18禁网站| 国产v片在线免费观看| 五月丁香六月综合缴清无码 | 精品 码产区一区二-1080P高清在线www-B029AV| 色五月综合| 吻戏激情性巴克| 啊啊啊97视频| 91久久久视| 久久精品视| 神马久久免费电影观看| 97爱啪| 日韩在线国产字幕| 国产视频一区二区三区在线免费观看 | 99精品热| 日韩一999精品| 日本顶级天天操狠狠操夜夜操中文字幕| 色在线69堂| 亚洲 欧美 第一页 | 91爱看| 亚洲深夜福利| 欧美性爱精品七区| 飘花国产午夜精品不卡| 99爱爱| 综合亚洲情色| 亚洲色婷婷综合久久一区二区三区| 亚洲色交| 欧美强奸乱能| 碰碰在线视频| laoshunv91| 久久久青草青青国产亚洲免观精品高清完整版_97久久综合区小说区图片区,国精品 | 四虎AV影视国产精品亚洲精品| 亚洲鸥美色图| 美女黄色91| 明星性猛交ⅹxxx乱大交| 国产日韩区| 91chinese在线| 国产农村妇女精品1区二区| 色偷偷人人玩人人舔人人操人人摸人人爽 | 无码日韩网站| 欧美白嫩在线放| 国产精品久久久午夜夜伦鲁鲁| 国产精品久久妻无码网站| 中文久久爆乳| 粉嫩小泬久久久一区二区| 久久尹人大香焦视| 人人操人人摸人人看人人干| 超AV色女| 久热这里| 精品一啪| 一区麻豆 高清中文字幕| 欧美第五页| 在线岛国新天堂8| 玖玖综合.com| 欧美精品欧美精品系列 | 国产五码丝袜屁眼| 精品亚洲天堂| 欧美强奸一区二区诱惑| 天天影视色香色欲| 久久久国产护士丝袜美腿一| 老司机午夜精品视频| 日韩一区二区高清在线观看的| 91九九九馒头| 丰满熟女一区二区三区在线播放| japan日本高清乱xxxx| 亚洲最大91网| 亚洲天堂电影网99999| 亚洲国产一区二区入口| 无码一区二区三区四区五区六区七区八区九区十区视频 | 久热这里| 久久久夜夜嗨免费视频| 久久久久网站-538在线视频-欧美永久乱码 | 九九精品99| 日本精品人妻少妇一区二区| 日韩精品9区| 日本免费一级AAA大片器| 91爱综合| 亚洲高清欧美总合| 午夜高清成人在线视频| 日本黄页视频在线观看| 欧美成人A√在线一区二区| 欧美久久婷| 电家庭影院午夜69久久夜色精品国产69乱 | 97久久综合网| 日本精品不卡一二三区| 欧美激情精品久久久| 亚洲最新av无码成人精品区| 尤物视频网 刘玥| 性爱视频免费网址| 久草精品热视| 国产成年女黄特黄| 激情色色| 中文字幕乱亚洲美女精品一区| 九九热AV| 麻豆av一区二区| 狠狠色婷婷| 青青草中出视频| 福利在线黄片| 日韩电影中文字幕| 校园春色 男人天堂| 亚洲色图亚洲| 丁香六月婷婷久久综合| 无码国产精品96久久久久孕妇| 骚货人妻偷情自拍在线视频| 国产精品白领在线观看 | av无线看| 粉嫩久久久极品| 抽插无码高清一区| 91网站18禁| 亚洲熟女国产综合另类| 中文字幕美女91| 天美传媒在线一区| 深夜激情无码| 九九九999久久久网站| 欧美少妇大量自拍视频在线观看| 91精品国产91久久青草| 天天综合香 ld视频| 老熟妇一区二区三区…| 夜夜嗨一区二区三区直播内容| 成人资源中文字幕在线观看天天| 国产午夜在线观看视频| 日韩中文字幕熟妇人妻| 思思久热在线精品66| 亚洲大色堂| 国语对白在线播放视频| 婷婷激情四射| 亚州宗合另类| 91天天爽| 九九色精品| 亚洲天堂欧美| 碰超人人在线一区二区三区| 开心五月深爱五月| 国产二区三区免费视频| 欧美96交| 青娱乐av在线| 日日操丁香五月天| 日韩精品一二三| 色男人色天堂东京热| 日本精品一区二区中文字幕| 亚洲乱码精品一区二区| 2019亚洲男人天堂| 亚洲午夜免费狠狠干| 国产隔壁老王影院在线| 日韩精品一二三| 人人澡人人弄| 婷婷日韩一区二区三区中文字幕在线| 无码免费在线观看黄色片| 激情网色| 青青欧洲黑| 伊人综合色网| 欧美成人四级在线播放| 久久久久亚洲| 欧美色亚洲色| 美欧老女人97| ,国产乱人伦精品一区二区三区| 在线观看国产黄色| 天天射天天操天天干天天吃2018 | 日本操BAV| 亚洲欧美日韩中文播放| 任我爽在线视频免费观看| 97精品国产97久久久久久免费| 天天色天天干天天射| 久久九色| 夜夜性| 强奸熟女一区二区三区| 久久婷婷一区二| 91丨熟女丨丰满熟女| 又大又长又粗又爽又黄| 九七超碰| 国产精品网址| 欧美另类天堂| 东京热精品97综合网| 日本91白丝| 日韩人妻精品久久久久| 嫩草影院在线观看精品| 国产精品亚洲天堂网址| 在线视频97| 国产精品电| 亚洲限制级| 久操 高清| 99热亚洲| 久久精品三级影视| 国产精品自拍欧美在线| 草莓精品视频在线免费观看| 91丝袜美女视频| 99热这里都是精品| 日本一二三免费久久| 中国黄色特级精品一区二区三区片| 四虎免费看黄| wwe 天天干.com| http://qxhbdz.com| 色人久久| www.超碰| 亚洲AV成人无码一二三久久| 操操操五月天婷婷丁香影院| 天天综合网日韩| 国产精品国产精品国产| 大茄子熟女AV导航| 大香蕉99re| 夜夜爽夜夜高潮夜夜爽| 午夜噜噜噜| 国产精品96久久久久久| 99re黄 | 免費黃色視頻觀看一| 黄片www.| 丁香五月av| 国产农村一一级特黄毛片| 啊v视频在线观看| 久久草在线综合视频| 99碰碰| 久久久人妻| 熟妇亚洲一区二区三区| 夜夜狼人妻| 国产传媒美日韩av| 麻豆国产原创AV色哟哟| 欧美日韩黄色片一区二区三区四区人与兽做爱 | 日本人妻一区二区| 九九九九久久久| 日本免费中文一区二区三区四区| 亚洲一区中文字幕久久,果冻传媒一区二区天美传媒 | 97色视频在线| 亚洲男人的天堂在线看| 2017大香蕉国产精品久久| 97资源免费视频| 一二三四区电影| 九九九九九九九九九国产精品 | 大乔未久88一区| 人妻少妇久久中文| 蜜臀网 一区| 色偷偷超碰亚洲| 性高潮久久久| 秋霞午夜成人福利片片| 你懂的在线观看区国产| 波多野结衣一级视频| 色婷婷九月天天综合| 日韩欧美视频青青| 天天弄天天操| 伊人精品视频| 亚洲高清欧美总合| 欧洲在线性爱视频| 国产欧美精选激情视频| 一起草精品人妻| 亚洲城人男人的天堂|