久久亚洲成a人片熟女精品色一区二区三区|国产精品视频第一精品视频|av天堂热无码手机版|亚洲?v无码久久无遮挡|国产精品偷伦视频免费观看国产|麻豆国产自产精品丰满熟妇|av无码av不卡一区二区|久久亚洲精品中文字

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Agent工具調(diào)用權(quán)限控制:從失控案例到分層防護(hù)實(shí)戰(zhàn)

Agent工具調(diào)用權(quán)限控制:從失控案例到分層防護(hù)實(shí)戰(zhàn) 1. Agent 權(quán)限控制的核心命題為什么工具調(diào)用會(huì)失控1.1 從一次真實(shí)的翻車現(xiàn)場(chǎng)說(shuō)起去年年底我?guī)鸵粋€(gè)團(tuán)隊(duì)做代碼審查他們的 Agent 系統(tǒng)在測(cè)試環(huán)境跑得好好的上線第二天就出了事。事情本身不復(fù)雜一個(gè)負(fù)責(zé)運(yùn)維巡檢的 Agent被要求“檢查磁盤使用率超過(guò)閾值就清理臨時(shí)文件”。結(jié)果這個(gè) Agent 在調(diào)用清理工具時(shí)把參數(shù)里的路徑從/tmp/拼成了/而工具層沒有任何二次校驗(yàn)直接執(zhí)行了刪除操作。萬(wàn)幸的是那臺(tái)機(jī)器是測(cè)試機(jī)數(shù)據(jù)有備份。這件事讓我徹底意識(shí)到一個(gè)問(wèn)題Agent 的能力上限取決于它被允許做什么而不是它能做什么。工具調(diào)用是 Agent 的手和腳權(quán)限控制就是給這雙手腳劃定活動(dòng)范圍。沒有邊界的 Agent本質(zhì)上就是一個(gè)拿著管理員密鑰的實(shí)習(xí)生你永遠(yuǎn)不知道它下一秒會(huì)點(diǎn)哪個(gè)按鈕。這篇文章想聊的就是這件事Agent 的權(quán)限控制到底該怎么做才能既讓工具調(diào)用順暢又不至于失控。我會(huì)從架構(gòu)設(shè)計(jì)、認(rèn)證授權(quán)、工具層校驗(yàn)、運(yùn)行時(shí)監(jiān)控幾個(gè)維度展開把踩過(guò)的坑和驗(yàn)證過(guò)的方案都攤開講。適合正在做 Agent 開發(fā)、準(zhǔn)備把 Agent 推向生產(chǎn)環(huán)境的同學(xué)參考也適合對(duì) AI Agent 安全邊界感興趣的技術(shù)管理者。1.2 工具調(diào)用失控的三種典型形態(tài)在展開方案之前先把“失控”這個(gè)詞拆開看。根據(jù)我接觸過(guò)的案例工具調(diào)用失控基本逃不出三種形態(tài)。第一種是越權(quán)調(diào)用。Agent 調(diào)用了它本不該調(diào)用的工具。比如一個(gè)只負(fù)責(zé)客服問(wèn)答的 Agent理論上只能調(diào)用知識(shí)庫(kù)檢索和工單創(chuàng)建兩個(gè)工具但因?yàn)楣ぞ咦?cè)表沒有做隔離它意外拿到了數(shù)據(jù)庫(kù)刪除工具的調(diào)用權(quán)限。這種情況在 Agent 框架早期很常見很多框架默認(rèn)把所有注冊(cè)的工具都暴露給所有 Agent。第二種是參數(shù)污染。Agent 調(diào)用了正確的工具但傳入了危險(xiǎn)的參數(shù)。上面那個(gè)刪除臨時(shí)文件的例子就是典型。Agent 本身沒有惡意它只是對(duì)自然語(yǔ)言的理解出現(xiàn)了偏差把“清理臨時(shí)文件”理解成了“清理文件”。參數(shù)污染是最難防的一類因?yàn)楣ぞ弑旧硎呛戏ǖ膯?wèn)題出在輸入上。第三種是調(diào)用鏈?zhǔn)Э亍蝹€(gè)工具調(diào)用都沒問(wèn)題但多個(gè)調(diào)用串起來(lái)就出了問(wèn)題。比如 Agent 先調(diào)用“讀取配置文件”拿到數(shù)據(jù)庫(kù)連接串再調(diào)用“執(zhí)行 SQL”把數(shù)據(jù)導(dǎo)出來(lái)最后調(diào)用“發(fā)送郵件”把數(shù)據(jù)發(fā)到外部地址。每一步單獨(dú)看都合規(guī)但組合起來(lái)就是一次數(shù)據(jù)泄露。這種形態(tài)最隱蔽也最考驗(yàn)權(quán)限系統(tǒng)的設(shè)計(jì)深度。理解了這三種形態(tài)后面的方案設(shè)計(jì)就有了靶子。權(quán)限控制不是簡(jiǎn)單地加個(gè)開關(guān)而是要針對(duì)不同形態(tài)分別設(shè)防。2. 權(quán)限模型選型RBAC、ABAC 還是能力令牌2.1 三種主流模型的適用場(chǎng)景對(duì)比給 Agent 做權(quán)限控制繞不開權(quán)限模型的選擇。業(yè)界常用的有三種RBAC基于角色的訪問(wèn)控制、ABAC基于屬性的訪問(wèn)控制、以及能力令牌Capability Token模式。這三種不是互斥的實(shí)際項(xiàng)目中往往是組合使用但理解各自的適用場(chǎng)景很重要。模型核心思想優(yōu)勢(shì)劣勢(shì)適合場(chǎng)景RBAC按角色分配權(quán)限簡(jiǎn)單直觀易管理粒度粗難應(yīng)對(duì)動(dòng)態(tài)場(chǎng)景Agent 數(shù)量少、角色固定的系統(tǒng)ABAC按屬性動(dòng)態(tài)判斷粒度細(xì)靈活規(guī)則復(fù)雜性能開銷大多租戶、動(dòng)態(tài)環(huán)境能力令牌令牌即權(quán)限最小權(quán)限天然隔離令牌管理復(fù)雜高安全要求的工具調(diào)用RBAC 的思路是給 Agent 分配角色角色綁定權(quán)限。比如“客服 Agent”角色只能調(diào)用知識(shí)庫(kù)和工單工具“運(yùn)維 Agent”角色可以調(diào)用監(jiān)控和重啟工具。這種模型的好處是管理簡(jiǎn)單新增一個(gè) Agent 只需要分配角色。壞處是粒度太粗同一個(gè)角色下的所有 Agent 權(quán)限完全一樣沒法做細(xì)粒度區(qū)分。ABAC 的思路是根據(jù)屬性動(dòng)態(tài)判斷。屬性可以包括 Agent 的身份、調(diào)用的工具、傳入的參數(shù)、當(dāng)前時(shí)間、請(qǐng)求來(lái)源 IP 等等。比如規(guī)則可以寫成“只有當(dāng) Agent 屬于運(yùn)維組、調(diào)用的工具是重啟服務(wù)、且目標(biāo)服務(wù)在預(yù)定義白名單內(nèi)時(shí)才允許調(diào)用”。這種模型靈活度極高但規(guī)則一多就難以維護(hù)而且每次調(diào)用都要做規(guī)則匹配性能是個(gè)問(wèn)題。能力令牌的思路是權(quán)限隨令牌走。Agent 在調(diào)用工具前先向授權(quán)中心申請(qǐng)一個(gè)令牌令牌里明確寫了“允許調(diào)用哪個(gè)工具、允許傳什么參數(shù)、有效期多久”。工具層拿到令牌后校驗(yàn)校驗(yàn)通過(guò)才執(zhí)行。這種模型天然符合最小權(quán)限原則因?yàn)榱钆剖桥R時(shí)的、限定范圍的。缺點(diǎn)是令牌的申請(qǐng)和校驗(yàn)增加了調(diào)用鏈路需要額外的基礎(chǔ)設(shè)施支撐。2.2 我的選型建議分層組合實(shí)際項(xiàng)目中我傾向于分層組合用 RBAC 做粗粒度隔離用能力令牌做細(xì)粒度控制ABAC 用在特殊場(chǎng)景的動(dòng)態(tài)判斷上。具體來(lái)說(shuō)第一層用 RBAC 把 Agent 按職能分組每組只能看到自己組內(nèi)的工具注冊(cè)表。這一層解決的是“越權(quán)調(diào)用”問(wèn)題讓客服 Agent 根本看不到數(shù)據(jù)庫(kù)工具的存在。第二層用能力令牌控制單次調(diào)用的參數(shù)范圍Agent 調(diào)用工具前必須申請(qǐng)令牌令牌里限定了參數(shù)的白名單或正則約束。這一層解決的是“參數(shù)污染”問(wèn)題。第三層用 ABAC 處理跨工具的調(diào)用鏈比如檢測(cè)到短時(shí)間內(nèi)連續(xù)調(diào)用“讀取敏感數(shù)據(jù)”和“對(duì)外發(fā)送”兩類工具時(shí)觸發(fā)人工審核或直接阻斷。這一層解決的是“調(diào)用鏈?zhǔn)Э亍眴?wèn)題。這個(gè)分層方案不是拍腦袋想的而是從實(shí)際故障中倒推出來(lái)的。每一層對(duì)應(yīng)一類失控形態(tài)職責(zé)清晰互不干擾。下面幾章我會(huì)把每一層的實(shí)現(xiàn)細(xì)節(jié)展開講。3. 認(rèn)證與授權(quán)把好工具調(diào)用的第一道門3.1 Agent 身份認(rèn)證的三種方式權(quán)限控制的前提是身份認(rèn)證。你得先確認(rèn)“你是誰(shuí)”才能判斷“你能做什么”。Agent 的身份認(rèn)證和傳統(tǒng)用戶認(rèn)證有相似之處但也有特殊性Agent 是程序沒有交互界面認(rèn)證過(guò)程必須自動(dòng)化。目前主流的 Agent 身份認(rèn)證方式有三種。第一種是靜態(tài)密鑰每個(gè) Agent 分配一個(gè) API Key調(diào)用工具時(shí)帶上。這種方式實(shí)現(xiàn)簡(jiǎn)單但密鑰一旦泄露就是災(zāi)難而且密鑰輪換麻煩。第二種是雙向 TLS 證書Agent 和工具服務(wù)各自持有證書通信時(shí)互相驗(yàn)證。這種方式安全性高但證書管理成本大適合內(nèi)部服務(wù)間調(diào)用。第三種是短期令牌Agent 通過(guò)身份憑證向授權(quán)中心換取短期令牌令牌有效期通常幾分鐘到幾小時(shí)。這種方式兼顧了安全性和靈活性是我最推薦的做法。短期令牌的具體流程是這樣的Agent 啟動(dòng)時(shí)用預(yù)置的身份憑證比如一個(gè)長(zhǎng)期有效的簽名密鑰向授權(quán)中心發(fā)起認(rèn)證請(qǐng)求。授權(quán)中心驗(yàn)證憑證后簽發(fā)一個(gè)短期令牌令牌里包含 Agent 的身份標(biāo)識(shí)、可調(diào)用的工具列表、有效期。Agent 后續(xù)調(diào)用工具時(shí)都帶上這個(gè)令牌工具層校驗(yàn)令牌的有效性和權(quán)限范圍。令牌過(guò)期后Agent 重新申請(qǐng)。這個(gè)流程的好處是即使令牌被截獲攻擊窗口也只有幾分鐘。而且授權(quán)中心可以隨時(shí)吊銷令牌實(shí)現(xiàn)即時(shí)權(quán)限回收。3.2 工具側(cè)的授權(quán)校驗(yàn)邏輯認(rèn)證解決了“你是誰(shuí)”授權(quán)解決“你能做什么”。工具側(cè)的授權(quán)校驗(yàn)我建議做成一個(gè)獨(dú)立的中間件所有工具調(diào)用都必須經(jīng)過(guò)它。這個(gè)中間件的校驗(yàn)邏輯分三步。第一步是令牌有效性校驗(yàn)。檢查令牌是否過(guò)期、簽名是否合法、是否在吊銷列表中。這一步是基礎(chǔ)不通過(guò)直接拒絕。第二步是工具權(quán)限校驗(yàn)。檢查令牌里聲明的可調(diào)用工具列表是否包含當(dāng)前被調(diào)用的工具。這一步解決越權(quán)調(diào)用問(wèn)題。這里有個(gè)細(xì)節(jié)工具列表建議用精確匹配不要用通配符。我見過(guò)有團(tuán)隊(duì)為了省事寫成db.*結(jié)果 Agent 能調(diào)用所有數(shù)據(jù)庫(kù)相關(guān)工具包括刪除表的。精確匹配雖然配置麻煩點(diǎn)但安全邊界清晰。第三步是參數(shù)范圍校驗(yàn)。檢查傳入的參數(shù)是否在令牌聲明的范圍內(nèi)。這一步解決參數(shù)污染問(wèn)題。參數(shù)校驗(yàn)的規(guī)則可以靈活設(shè)計(jì)比如路徑參數(shù)必須以某個(gè)前綴開頭、SQL 參數(shù)必須是 SELECT 語(yǔ)句、數(shù)值參數(shù)必須在某個(gè)區(qū)間內(nèi)。校驗(yàn)規(guī)則建議寫在工具的定義里和工具代碼放在一起這樣新增工具時(shí)不容易漏掉。注意參數(shù)校驗(yàn)不要只做字符串匹配要考慮編碼繞過(guò)。比如路徑參數(shù)../../etc/passwd這種單純匹配前綴是攔不住的需要做路徑規(guī)范化后再校驗(yàn)。3.3 授權(quán)管理的工程實(shí)踐授權(quán)管理本身也是個(gè)工程問(wèn)題。我見過(guò)不少團(tuán)隊(duì)權(quán)限配置散落在各個(gè)工具代碼里改一個(gè)權(quán)限要翻十幾個(gè)文件最后沒人敢改權(quán)限就越積越大。我的做法是把權(quán)限配置集中管理。建一個(gè)獨(dú)立的權(quán)限配置文件或權(quán)限服務(wù)所有工具的可調(diào)用角色、參數(shù)約束、調(diào)用頻率限制都寫在這里。工具代碼啟動(dòng)時(shí)從權(quán)限服務(wù)拉取配置運(yùn)行時(shí)按配置校驗(yàn)。這樣改權(quán)限只需要改一處而且可以做版本管理和審計(jì)。權(quán)限配置的格式我推薦用結(jié)構(gòu)化數(shù)據(jù)比如 YAML 或 JSON。下面是一個(gè)示例展示了一個(gè)數(shù)據(jù)庫(kù)查詢工具的權(quán)限配置tool: db_query allowed_roles: - data_analyst - ops_engineer param_constraints: sql: type: string pattern: ^SELECT\\s.*$ max_length: 2000 timeout: type: integer min: 1 max: 30 rate_limit: max_calls_per_minute: 10 max_calls_per_hour: 100這個(gè)配置里allowed_roles限定了哪些角色可以調(diào)用param_constraints限定了 SQL 必須以 SELECT 開頭且長(zhǎng)度不超過(guò) 2000rate_limit限定了調(diào)用頻率。工具層拿到這個(gè)配置后逐項(xiàng)校驗(yàn)即可。集中管理還有個(gè)好處是方便做審計(jì)。所有權(quán)限變更都有記錄出了問(wèn)題可以追溯。我建議權(quán)限配置的每次修改都走代碼審查流程不要允許直接在生產(chǎn)環(huán)境改配置。4. 工具層防護(hù)在離危險(xiǎn)最近的地方設(shè)卡4.1 工具注冊(cè)表的隔離設(shè)計(jì)工具注冊(cè)表是 Agent 獲取可用工具列表的地方。很多 Agent 框架默認(rèn)把所有注冊(cè)的工具暴露給所有 Agent這是越權(quán)調(diào)用的根源。正確的做法是按 Agent 身份隔離工具注冊(cè)表。具體實(shí)現(xiàn)上工具注冊(cè)表應(yīng)該支持按角色或按 Agent ID 過(guò)濾。Agent 啟動(dòng)時(shí)帶著自己的身份憑證向注冊(cè)表請(qǐng)求工具列表注冊(cè)表根據(jù)身份返回對(duì)應(yīng)的工具子集。這樣客服 Agent 拿到的列表里根本沒有數(shù)據(jù)庫(kù)工具它連調(diào)用的機(jī)會(huì)都沒有。這里有個(gè)容易忽略的點(diǎn)工具列表的過(guò)濾要在服務(wù)端做不能在客戶端做。我見過(guò)有團(tuán)隊(duì)在 Agent 端過(guò)濾結(jié)果 Agent 被篡改后直接請(qǐng)求全量列表過(guò)濾形同虛設(shè)。服務(wù)端過(guò)濾才是可靠的。另外工具注冊(cè)表本身也要做認(rèn)證。不是誰(shuí)都能請(qǐng)求工具列表的必須持有有效的身份憑證。這一步和上一章的認(rèn)證機(jī)制打通形成閉環(huán)。4.2 參數(shù)校驗(yàn)的實(shí)戰(zhàn)技巧參數(shù)校驗(yàn)是防參數(shù)污染的核心。前面說(shuō)了要在工具定義里寫校驗(yàn)規(guī)則這里展開講幾個(gè)實(shí)戰(zhàn)技巧。路徑參數(shù)一定要做規(guī)范化。用戶傳入的路徑可能是相對(duì)路徑、可能包含..、可能是符號(hào)鏈接。校驗(yàn)前先用realpath之類的函數(shù)規(guī)范化再檢查是否在允許的目錄下。我一般會(huì)要求路徑必須以某個(gè)絕對(duì)路徑開頭且規(guī)范化后不能跳出這個(gè)前綴。SQL 參數(shù)建議用白名單而非黑名單。黑名單比如禁止 DELETE、DROP很容易被繞過(guò)比如用注釋、大小寫混寫、編碼等方式。白名單只允許 SELECT更可靠。如果業(yè)務(wù)確實(shí)需要寫操作建議拆成獨(dú)立的工具單獨(dú)授權(quán)。數(shù)值參數(shù)要檢查邊界。我見過(guò)一個(gè) Agent 調(diào)用“設(shè)置超時(shí)時(shí)間”工具時(shí)傳了999999999導(dǎo)致服務(wù)線程被長(zhǎng)時(shí)間占用。數(shù)值參數(shù)一定要設(shè)上下界超出范圍直接拒絕。字符串參數(shù)要限制長(zhǎng)度。超長(zhǎng)字符串可能導(dǎo)致緩沖區(qū)溢出或性能問(wèn)題。一般建議限制在合理范圍內(nèi)比如 2000 字符。枚舉參數(shù)要嚴(yán)格匹配。如果參數(shù)是枚舉類型校驗(yàn)時(shí)必須精確匹配不要做模糊匹配。比如action參數(shù)只允許start、stop、restart那就不能接受Start或start帶空格。這些技巧看起來(lái)瑣碎但每一條都是從實(shí)際故障中總結(jié)出來(lái)的。參數(shù)校驗(yàn)做扎實(shí)了能擋掉大部分參數(shù)污染問(wèn)題。4.3 調(diào)用頻率與并發(fā)控制除了單次調(diào)用的校驗(yàn)還要控制調(diào)用的頻率和并發(fā)。Agent 有可能因?yàn)檫壿嬪e(cuò)誤陷入循環(huán)短時(shí)間內(nèi)發(fā)起大量調(diào)用把下游服務(wù)打掛。頻率控制我建議做兩級(jí)單 Agent 級(jí)和工具級(jí)。單 Agent 級(jí)限制每個(gè) Agent 每分鐘、每小時(shí)的調(diào)用總數(shù)防止單個(gè) Agent 失控。工具級(jí)限制每個(gè)工具被調(diào)用的總頻率防止所有 Agent 一起把某個(gè)工具打掛。并發(fā)控制則是限制同時(shí)進(jìn)行的調(diào)用數(shù)。比如數(shù)據(jù)庫(kù)查詢工具同時(shí)最多允許 5 個(gè)并發(fā)調(diào)用超出的排隊(duì)等待。這樣可以避免 Agent 并發(fā)調(diào)用把數(shù)據(jù)庫(kù)連接池耗盡。實(shí)現(xiàn)上頻率控制可以用令牌桶算法并發(fā)控制可以用信號(hào)量。這些在工具層的中間件里實(shí)現(xiàn)即可不需要 Agent 端配合。提示頻率限制的閾值不要設(shè)得太死要留出合理的突發(fā)空間。我一般會(huì)設(shè)一個(gè)基礎(chǔ)速率加一個(gè)突發(fā)上限比如基礎(chǔ) 10 次/分鐘突發(fā)上限 30 次。這樣正常業(yè)務(wù)不受影響異常情況也能兜住。5. 運(yùn)行時(shí)監(jiān)控讓失控在發(fā)生前被攔截5.1 調(diào)用鏈追蹤與異常檢測(cè)前面幾層都是事前的防護(hù)運(yùn)行時(shí)監(jiān)控是事中攔截。Agent 的調(diào)用行為是動(dòng)態(tài)的靜態(tài)規(guī)則不可能覆蓋所有情況需要運(yùn)行時(shí)監(jiān)控來(lái)兜底。調(diào)用鏈追蹤是基礎(chǔ)。每次工具調(diào)用都要記錄誰(shuí)調(diào)的、調(diào)了什么、傳了什么參數(shù)、返回了什么、耗時(shí)多久。這些記錄匯總起來(lái)就能看出 Agent 的行為模式。正常模式下Agent 的調(diào)用是有規(guī)律的比如客服 Agent 大部分時(shí)間在調(diào)知識(shí)庫(kù)檢索。如果突然開始調(diào)工單刪除工具那就是異常。異常檢測(cè)可以基于規(guī)則也可以基于統(tǒng)計(jì)。基于規(guī)則的比如“短時(shí)間內(nèi)連續(xù)調(diào)用敏感工具超過(guò) N 次”基于統(tǒng)計(jì)的比如“當(dāng)前調(diào)用頻率偏離歷史均值超過(guò) 3 個(gè)標(biāo)準(zhǔn)差”。我建議先用規(guī)則規(guī)則覆蓋不了的再用統(tǒng)計(jì)。規(guī)則的好處是解釋性強(qiáng)出了問(wèn)題知道為什么被攔。5.2 敏感操作的二次確認(rèn)機(jī)制有些操作風(fēng)險(xiǎn)太高即使權(quán)限校驗(yàn)通過(guò)了也建議加一道二次確認(rèn)。比如刪除數(shù)據(jù)、修改配置、對(duì)外發(fā)送數(shù)據(jù)這類操作。二次確認(rèn)的實(shí)現(xiàn)方式有兩種。一種是同步確認(rèn)Agent 發(fā)起調(diào)用后系統(tǒng)暫停執(zhí)行通知人工審核審核通過(guò)才繼續(xù)。這種方式安全但慢適合低頻高風(fēng)險(xiǎn)的場(chǎng)景。另一種是異步確認(rèn)Agent 發(fā)起調(diào)用后立即返回“待審核”實(shí)際執(zhí)行在審核通過(guò)后進(jìn)行。這種方式不阻塞 Agent但需要 Agent 能處理異步結(jié)果。我一般建議對(duì)“刪除”和“對(duì)外發(fā)送”兩類操作強(qiáng)制二次確認(rèn)。刪除操作不可逆對(duì)外發(fā)送可能導(dǎo)致數(shù)據(jù)泄露這兩類值得多花點(diǎn)時(shí)間確認(rèn)。二次確認(rèn)的通知渠道可以靈活選擇郵件、即時(shí)通訊工具、工單系統(tǒng)都行。關(guān)鍵是確認(rèn)人要能看到完整的調(diào)用上下文誰(shuí)調(diào)的、調(diào)什么、參數(shù)是什么、為什么觸發(fā)確認(rèn)。信息不全的確認(rèn)請(qǐng)求審核人只能盲批失去了確認(rèn)的意義。5.3 熔斷與降級(jí)策略當(dāng)監(jiān)控發(fā)現(xiàn)異常時(shí)系統(tǒng)需要有自動(dòng)處置能力。熔斷和降級(jí)是兩個(gè)常用手段。熔斷是指當(dāng)某個(gè) Agent 或某個(gè)工具的異常率達(dá)到閾值時(shí)自動(dòng)切斷其調(diào)用。比如某個(gè) Agent 連續(xù) 5 次調(diào)用失敗就暫時(shí)禁止它調(diào)用任何工具等人工介入排查。熔斷的好處是防止異常擴(kuò)散避免一個(gè) Agent 的問(wèn)題拖垮整個(gè)系統(tǒng)。降級(jí)是指當(dāng)系統(tǒng)壓力過(guò)大時(shí)主動(dòng)關(guān)閉非核心功能保住核心功能。比如當(dāng)工具調(diào)用隊(duì)列積壓超過(guò)閾值時(shí)暫停所有非關(guān)鍵工具的調(diào)用只保留核心工具。降級(jí)的好處是保證系統(tǒng)在極端情況下仍能提供基本服務(wù)。熔斷和降級(jí)的閾值需要根據(jù)實(shí)際業(yè)務(wù)調(diào)整。我建議先設(shè)一個(gè)保守的閾值觀察一段時(shí)間后再優(yōu)化。閾值太松起不到保護(hù)作用太緊會(huì)誤傷正常業(yè)務(wù)。6. 常見問(wèn)題與排查技巧實(shí)錄6.1 權(quán)限配置的常見坑做 Agent 權(quán)限控制這些年踩過(guò)的坑不少挑幾個(gè)典型的說(shuō)說(shuō)??右粰?quán)限繼承導(dǎo)致的越權(quán)。有些系統(tǒng)支持角色繼承比如“高級(jí)客服”繼承“客服”的所有權(quán)限。這本身沒問(wèn)題但如果繼承鏈沒管好可能出現(xiàn)“高級(jí)客服”意外繼承了“管理員”的權(quán)限。我的建議是繼承鏈不要超過(guò)兩層且每次新增繼承關(guān)系都要審查。坑二默認(rèn)權(quán)限過(guò)大。很多框架的默認(rèn)權(quán)限是“允許所有”新增工具時(shí)如果不顯式配置權(quán)限就默認(rèn)對(duì)所有 Agent 開放。這是很危險(xiǎn)的。我的做法是把默認(rèn)權(quán)限設(shè)為“拒絕所有”新增工具必須顯式配置允許哪些角色調(diào)用。這樣雖然麻煩點(diǎn)但安全??尤龣?quán)限回收不及時(shí)。Agent 下線了但它的權(quán)限沒回收令牌還在有效期內(nèi)。如果令牌被截獲就能繼續(xù)調(diào)用。我的做法是 Agent 下線時(shí)主動(dòng)吊銷其所有令牌且令牌有效期設(shè)短一點(diǎn)比如 15 分鐘??铀臏y(cè)試環(huán)境權(quán)限和生產(chǎn)環(huán)境混用。測(cè)試環(huán)境的 Agent 權(quán)限往往配得很松方便調(diào)試。如果測(cè)試環(huán)境的憑證泄露攻擊者可能用它去調(diào)生產(chǎn)環(huán)境的工具。我的做法是測(cè)試環(huán)境和生產(chǎn)環(huán)境的授權(quán)中心完全隔離憑證不通用。6.2 排查工具調(diào)用問(wèn)題的思路當(dāng)工具調(diào)用出問(wèn)題時(shí)怎么快速定位我一般按這個(gè)順序排查。第一步看調(diào)用日志。日志里應(yīng)該有完整的調(diào)用記錄時(shí)間、Agent ID、工具名、參數(shù)、返回值、耗時(shí)。先確認(rèn)調(diào)用是否真的發(fā)生了參數(shù)是什么。第二步看權(quán)限校驗(yàn)日志。如果調(diào)用被拒絕了權(quán)限校驗(yàn)日志里會(huì)有原因是令牌過(guò)期、還是工具不在允許列表、還是參數(shù)校驗(yàn)失敗。根據(jù)原因定位問(wèn)題。第三步看 Agent 的決策日志。如果調(diào)用發(fā)生了但結(jié)果不對(duì)可能是 Agent 的決策有問(wèn)題。看 Agent 為什么選擇這個(gè)工具、為什么傳這個(gè)參數(shù)。這一步往往能發(fā)現(xiàn) Agent 的邏輯缺陷。第四步看下游服務(wù)日志。如果工具執(zhí)行了但結(jié)果異常可能是下游服務(wù)的問(wèn)題??聪掠畏?wù)收到了什么請(qǐng)求、處理結(jié)果如何。這個(gè)排查順序從外到內(nèi)逐步縮小范圍。大部分問(wèn)題在前兩步就能定位。6.3 常見問(wèn)題速查表問(wèn)題現(xiàn)象可能原因排查方向解決方案調(diào)用被拒絕提示無(wú)權(quán)限令牌不含該工具權(quán)限檢查令牌的工具列表調(diào)整角色權(quán)限配置調(diào)用被拒絕提示參數(shù)非法參數(shù)校驗(yàn)不通過(guò)檢查參數(shù)校驗(yàn)規(guī)則和實(shí)際參數(shù)修正 Agent 傳參或放寬規(guī)則調(diào)用成功但結(jié)果異常Agent 決策錯(cuò)誤或下游問(wèn)題檢查 Agent 決策日志和下游日志修正 Agent 邏輯或下游服務(wù)調(diào)用頻率超限Agent 陷入循環(huán)或業(yè)務(wù)量突增檢查調(diào)用頻率和 Agent 狀態(tài)修復(fù) Agent 循環(huán)或調(diào)整頻率閾值令牌申請(qǐng)失敗身份憑證無(wú)效或授權(quán)中心故障檢查憑證和授權(quán)中心狀態(tài)更新憑證或修復(fù)授權(quán)中心調(diào)用鏈異常中斷熔斷觸發(fā)或網(wǎng)絡(luò)問(wèn)題檢查熔斷日志和網(wǎng)絡(luò)狀態(tài)排查熔斷原因或修復(fù)網(wǎng)絡(luò)這張表覆蓋了我遇到的大部分問(wèn)題。實(shí)際排查時(shí)先對(duì)照現(xiàn)象找到可能原因再按排查方向逐步確認(rèn)。6.4 幾個(gè)獨(dú)家避坑技巧最后分享幾個(gè)不太常見但很實(shí)用的技巧。技巧一給工具調(diào)用加 trace ID。每次 Agent 發(fā)起調(diào)用時(shí)生成一個(gè)唯一 ID貫穿整個(gè)調(diào)用鏈。這樣排查問(wèn)題時(shí)一個(gè) ID 就能串起所有相關(guān)日志不用在多個(gè)日志文件里翻找。技巧二定期做權(quán)限審計(jì)。每隔一段時(shí)間導(dǎo)出所有 Agent 的權(quán)限配置人工審查一遍??纯从袥]有權(quán)限過(guò)大的、有沒有長(zhǎng)期不用的、有沒有配置錯(cuò)誤的。我一般一個(gè)季度做一次每次都能發(fā)現(xiàn)幾個(gè)問(wèn)題。技巧三用影子模式測(cè)試新權(quán)限。新增或修改權(quán)限配置時(shí)先開影子模式讓新配置只記錄不生效。觀察一段時(shí)間確認(rèn)新配置不會(huì)誤傷正常業(yè)務(wù)后再正式生效。這樣避免配置錯(cuò)誤導(dǎo)致業(yè)務(wù)中斷。技巧四給 Agent 的行為做基線。記錄每個(gè) Agent 的正常行為模式比如常用工具、調(diào)用頻率、參數(shù)分布。當(dāng)實(shí)際行為偏離基線時(shí)告警。這個(gè)基線不需要很精確粗略的統(tǒng)計(jì)就能發(fā)現(xiàn)大部分異常。技巧五保留人工介入的通道。無(wú)論權(quán)限控制做得多完善都要保留人工介入的通道。當(dāng)系統(tǒng)判斷不了時(shí)能轉(zhuǎn)人工當(dāng)系統(tǒng)誤判時(shí)能人工放行。完全自動(dòng)化的權(quán)限控制在遇到新情況時(shí)往往束手無(wú)策。這些技巧都是實(shí)際項(xiàng)目中驗(yàn)證過(guò)的不是什么高深技術(shù)但很實(shí)用。權(quán)限控制這件事細(xì)節(jié)決定成敗把這些細(xì)節(jié)做到位Agent 的工具調(diào)用就能既順暢又安全。我在實(shí)際使用中發(fā)現(xiàn)權(quán)限控制最難的不是技術(shù)實(shí)現(xiàn)而是平衡。控制太松Agent 容易失控控制太緊Agent 又干不了活。這個(gè)平衡點(diǎn)需要根據(jù)業(yè)務(wù)場(chǎng)景反復(fù)調(diào)整。我的經(jīng)驗(yàn)是先從緊的開始遇到阻礙再逐步放寬比一開始就放松要安全得多。畢竟權(quán)限這東西收緊容易放寬難一開始就收緊后面調(diào)整的空間更大。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
中字乱伦AV| 性色av网站| 久操操| 亚洲囯产精品女人久久久| 亚洲中文电影| 91狠狠综| 91操熟妇| 亚洲天天精品| 在线毛片片免费观看| 国产成人无码网站在线视频| 色女免费在线观看视频网址| 熟女色综合久久| 久久粉色| 啊啊啊在线看| 91 亚洲情侣偷拍 久久| 又大又黄国产| 五月天婷婷基地| 亚洲日韩在线a不卡99精品| 天天看片麻豆| 九九无码久久精品视频| 日韩成人大片在线观看| 色天使亚洲综合在线观看| 999 久久久| 色综合天天| 国产午夜精品在线观看| 亚洲一区二区在线观看91| 欧美夜夜骑视频| 成人影 天天操 亚洲| 97日韩超碰超碰中文字幕| 亚洲欧美视| 亚洲国产一区二区三区在线| 色色综合网站| 婷婷五月天网| 日本在线一二| 伊人色综合网电影| 精品国产a∨一区天美传媒| 国产丝袜美腿美女麻豆| 国产激情片在线观看| 国产操逼网站亚洲一级黄色| 蜜桃传媒视频第一区入口在线看| 日韩字幕一区| 中文字幕精品亚洲熟女| 国产精品一区二区亚洲人成毛片| 日本精品五区| 欧美色图 色综合图| 亚洲猛交| 96超碰网| 欧美激情内射| 天天影视之亚洲综合网| 性老妇一区二区三区| 国产suv精品一区二区四区999| 免费试看60秒| 日本幼女18+| 蜜臀99久久国产| 怡红院亚洲怡春院av| 国产亚洲 中文欧美久久| 草草影院在线视频| 久久精品一区| 亚洲少妇免费视频\| 舔舔啊| 伊人大香蕉在线| 天天操夜夜操| 欧美老妇综合网| 大香蕉在线86| 国产女人9999| 风韵犹存大大大大香蕉| 欧美高清91| 国产午夜福利合集| 狠狠干妹子| 日本2020一区二区| 亚洲日韩精品一区二区| 午夜视频久久久久一区| 噜噜噜在线视频| 国产92麻豆天美精品色欲5| 美女91AV| av强奸乱轮| 久久精品国产亚洲AV无码电影| 在线强奷到舒服的无码视频| 99国内精品| 97 视频在线| 日韩专区久久久| 青青操日韩| 精品999一区二区| 色色色热| 曰韩成人免费视频| 大香蕉婷婷| 玖草在线视频| 亚洲欧美另类小说| 97电影院超碰| 伊人97| 日本最新1区2区3区| 9精品在线| 午夜福利合集| 久久久久久久久久久久97| 性爱网站一区二区| 亚洲丝袜诱惑| 99热在线播放| 精品一区二区三区18| 综合久久久久久久久91| 欧美视频在线视频免费va| 翘臀vidoes| 欧美 亚洲 综合 制服 另类| 久热精品色情| 天天综合精品| 亚洲做性| 激情抓乳插进去啪啪啪日韩| 日韩一区二区精品视频| 精品女同一区| 淫荡少妇免费| 97 视频在线| 欧美综合色,www| 国产野战露脸在线播放| 男人的天堂在线2| 蜜桃精品视频一区二区三区| 久操大香蕉超碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰 | 国产又猛又粗又爽又黄| 97碰在线视频| 艾草av| 玖玖久久久| 99re免费| 欧美在线天堂| 这里都是精品在线观看| 日本性感人妻91| 亚洲囯产精品女人久久久| 蜜臀久久久久久999| 欧美天天谢综合网| 伊人网青青| 欧美日韩国产在线| 久久高潮妇女视频| 男人的天堂一区三区| 老熟妇一区二区三区啪啪| 欧美男人的天堂| 凹凸视频在线观看伊人| 91美女中出| 天天看特黄的免费网站 | 91少妇通奸网站| 亚洲一卡二卡在线免费| 男人天堂.AB| 欧美丝袜中文字幕07在线| 国产区91柔拿会所技师| 99热这里只有精品1| 99婷婷| 国产欧洲精品亚洲午夜拍精品| 99re在线视频国产| 日日碰狠狠添天天爽超| 九九九九免费高| 久久久久久久九九九九| 丁香五月天啪啪| 夜夜夜夜久久久久| 国产精品爽爽va在线观看98| 国产四虎在线| 欧美综合 站| 无码高清专| 99久在线精品99re8| 插日本熟女视频| 大香蕉十区| 91精品久久久久五月天精品| 人人摸人人入| 99热免费精品| 热思思免费视频| 色九月| 色九九九综合| 1区2区3区视频| 欧美色婷婷| 777超碰| 欧美国产精品久久九九| 国内偷自视频区视频综合 | 欧美裸体美女日麻屄| 亚洲人综合19| 一起草高清无码| 久久久久亚洲?V片无码V| 玖玖玖玖精品国产剧情| 国产一级作爱毛片| 精品制服美女中文一区二区三区| 嗯嗯嗯不要不要免费视频| 久久精品店| 成人性爱av| 精品九九| 欧美性色综合网| 色综合久久av| 国产精品黄色三级av| 日韩精彩视频| 一区二区首页| 天天摸,夜夜摸| 亚洲综合影院| 欧美日韩精品久久久久东北老熟妇| 亚洲成人福利电影免费| 日韩免费簧片| 91天堂| 青青草日本中文字幕| 亚洲天堂7777| 影音先锋少妇| 亚洲国产精品9999在线观看| 亚洲欧美碰碰| 97久操| 男女91| 久久99视频| 欧美1区二区三区公司| 夜夜久久久| 亚洲视频二区| 九九99久久| 久久国产乱子伦精品免费女人| 99re视频这里只有精品| 国产精品丝袜久久亚洲不卡| 真实高潮91| 国产黄色小视频网站| 97中文综合| 天天综合网合集91| 天天久久久久久| 亚洲诱惑| 啊啊啊97视频| av中亚| 中国黄色特级精品一区二区三区片| 欧美在线干| 日韩A优精品在线观看| 一起草高清无码| 在线观看啊啊啊啊啊| 9精品久久| 久久久九九网站| 91足交| A V视频日本| 日韩黄色片子| 啊啊啊啊操死我| 好湿好紧视频| 国产乱子伦久久精品综合一区二区三| 91熟女网| 国产美女销魂在线观看不卡| 深夜激情无码| 唐山老熟妇露脸啪啪叫| 亚洲狠狠入| 久草毛片| 久久天天躁日日躁狠狠躁| 天综合网| 亚洲av热热色| 96AV久久久| 亚洲欧美精品91| 久久五月份| 国产av尤物| 丁香五月天视频| 青青草亚洲一区 | 蜜乳AV.COM| 久久精品国产欧美日韩亚洲欧美日韩中文久久国产一区 | 综合激情二| 亚洲精品免费中文字幕| 超碰欧美在线欧美| 乱操9999| 欧美熟女逼久久久久久| 秋霞鲁丝午夜无码一区二区三| 人妻无码后入| 欧美色色色| 99999久久久久9国产精品| 婷婷亚洲五月***久久| 久久婷婷综合国际产色怕| 极品尤物在线观看| 欧美性爱一内片一区二区三区| 欧美九九99久久精品| 日日夜夜草草草| 亚洲欧美91√| 成人三级片一区二区三区视频| 久久久久97| 亚洲**2021在线观看| 久久久99久9| Aa东京男人的天堂| 不卡中文字幕aⅴ在线| 黄色高清无码无码破解免费暗网| 夜夜草天天| 免费少妇一区二区| 色欲久久综合| 四季AV综合网址| 婷婷九月国产| 秋霞一级鲁丝片A片| AV不卡在线| 国产在线76页| 欧洲亚洲综合| 另类TS人妖一区二区三区| 强奸乱伦资源| 丁香五月天久久精品视频一区二区三区| 九九综合网| 啊啊啊好多水| 九九在线精品| 精久久久| 亚洲免费成人在线高清无码视频| 欧美精品自慰系列寂寞少妇| 人人澡综合涩| 国产精品免费久久久久久久久久 | 一区二区三区 日韩欧美| 婷婷六月天| 大香蕉青青9| 久热伊人| 国人欧美精品一区二区| 女人爽到高潮久久久| 龙兴卡官方查询| 日韩天天综合| 久久艹逼视频| 96精品一区| 日本色色视频网站| 一区二区精品更新提醒| 天堂无码| 爱爱动态120秒| 97干在线视频| 99这里只有精品| 欧亚韩国999| 国产精品不卡一区二区三区av| 深夜激情无码| 加勒比东京热五月天天堂网| 久久av一级av少妇av高潮| 曰韩操B| 99999久久久久9国产精品| 嗯嗯啊啊好疼| 青娱乐欧美激情一区二区| 嗯啊不要啊在线| 淫荡网址| 超碰人人乐97| 97色碰| 色婷婷综合久久久久中文国产精品一区中文字幕,国产福利电影一区二区三区 | 亚州欧美在线| 大香蕉久| 四虎AV在线播放| 午夜AV人气不卡| 91夜色chaopeng| 好属操| 激情小说五月天| 国产欧美一区二区| 白丝被操91| 97精品国产97久久久久久| 91丝袜美女视频| 亚洲无码国产精品久久| 无毛精品| 亚洲资源站| 亚洲天堂资源| 岛国片在线观看视频亚洲| 久久中文色图| 看一级黄色视频| 熟妇国产免费一区| 色呦呦呦在线观看视频| chaopen97久久| 午夜高清成人在线视频| 久操 高清| 一二区在线观看视频| 97亚洲色图| www99热| 色欲av国内精品久久久久久| 亚洲交性| Sekablack无码一区| 久久精品国产亚洲妲己影视| 好一吊区二区| 久久久久性熟视频| 高潮的A片激情扒开一区| 九九国产| 日韩亚洲美女一区久久| 成人26uuu| 伊人午夜福利视频| 99热aaa| 夜夜影视四色| 欧洲在线性爱视频| 高清无码学生妹高潮| 欧美久久草熟女| www.av家庭乱伦| 96精品一区| AND人妻系列| 一级性爱aaaa| 大香蕉强奸乱伦| 99福利社| 成人一区二区三区四区| 日韩pv中文| 久久久久白虎| 吊色| 丁香婷婷激情五月天无毒不卡| 探花一区在线| 亚洲啪啪视频免费| 国产久久久久久| 欧美色图片欧美色图| 91久热这里只有精品| 亚洲色图亚洲无码强奸乱伦| 多毛小伙内射老太婆| 亚洲色欧美| 亚州,欧美在线| 天天操人人操骚逼网站| 亚洲有薄码区久久在线一区| 久久一区二区三区入口| 蜜桃色色网站视频三区| 亚洲AV色图一区| 大香蕉 222| 亚洲国产精品有声| 久久日本熟女精品一区| 欧美躁死她一区二区| 亚洲精品国产熟女久久久久久| 久久久久99999| 伊人在线大香蕉视频久久| 久久麻豆一区二区| 亚洲日本韩国在线| 久久亚洲av成人无码国产| av在线观看不卡网站| 日韩福利电影网| 在线97视频| 在线视频资源| 久久久久九九九| 精品九区| 午夜精品久久久久久久久久久久久| 97精品网站| 久久一本大香蕉| 99热这里只有精| 神马视频久久久久久| 深爱五月婷婷| 久久大香蕉手机高清| 淫色网综合| 九一亚洲国产免费| 亚洲一区二区 麻豆传媒| 自拍盗摄一区| 欧美午夜视频| 另类专区加勒比| 玖玖资源视频一区二区三区| 五月天婷婷社区| 熟女少妇一区二区三区| 欧美乱欲| 九九精品99| 亚一综合久久久久久久久久| 精品偷拍13p欧美dodk视频| 亚洲天堂7777| 亚洲国产中文字幕| 亚洲天堂电影网99999| 日韩91网| 色操逼网| 青娱乐日韩无码| 老熟女91av| 色网综合网| 久久91| 亚洲成aⅴ人片不卡无码| 入口操逼网站| 久久婷婷色| 亚洲中文字幕97久久精品少妇| 久9久9久9久9久9久9| 国产h片在线观看视频| 草草影院在线视频| 哈哈操电影AV| 少妇熟女视频一区二区三区| 久久超碰97| 无码丰满熟妇一区二区浪潮AV| 蜜臀久久久99久久久久 | surenchaopeng| 国产精品suv一区| 亚洲色图殴美色图激情乱伦| 床上啊啊啊一区二区三区| 天天爽天天| 最新精品久久蜜桃 | 99精品视频在线观看| 啊操爽品善一区二区三区| 干干干天天| 99国产精品人妻人伦| 人人色人人射人人妻| 男人成人黄色视频在线观看免费下载| 老熟女网站| 亚欧日韩成人| 久久久精品日本一道| 丰满人妻一区| 秋霞无码av鲁丝片一区| 久久一区,青青青青草视频在线播放| 久久精品一区| 在线色导航| 欧美日日操| 九九九九一区| 丝袜足交视频| 国产肏逼网站| 精品国产av一区二区三区四区入口| 91熟女丨老女人| 亚洲欧美日韩二区视频| 亚洲精品蜜桃久久久一区二区三区| 亚洲性综合| 懂色中文一区二区三区| 男人天堂站| 国产97亚洲| 成人福利视频网| 亚洲熟女乱色一区二区三区久久久| 激情五月天中文字幕色| 小草精彩毛片| 精品国模无码| 美女的肌被草喷水视频| 久久有码视频| 国产女人成人精品视频| 97精品视频在线播放| 亚洲天天综合| 婷婷色香| 国产精品一区二区久久精品| 五月天激情小说| 超碰97 线线 在现| 嗯嗯不要 视频| 亚洲AV无码成人精品久久| 加勒比久久av| 欧美日韩国产三级黄色| 久久久草草精品| 国产欧美亚洲精品a第2页| 九草九九九| 日本久久天堂| 天天做天天爱| 色偷偷色偷偷欧美日韩| 亚洲成人av电影在线| 色踪合AV| 国产热RE99久久6国产精品首| 91色婷婷综合久久中文字幕二区| 女优视频第10页| 日韩亚洲97| 秋霞欧美性爰视频| 大香蕉欧美| 91丝袜美女| 麻豆国产精品午夜视频| 求求你操操我| 韩国一级婬片A片AAAAA| 色噜噜国产精品视频一区二区| 大香蕉男女超碰精品在线| 色综合V| 久久大陆| 久超碰在| 人人看欧美性爱| 蜜臀久久99精品久久久久久成人小说 | 午夜精品久久久| 男女香蕉一区二区| 久久大香蕉手机高清视频| 1769国内精品视频| 日本一区二区电影网站| 性videos欧美熟妇hdx| 九九成人精品| 九九综合久久| 精品国产91内射久久| 欧美综合色综合| 人妻在线臀日韩| 色色香蕉| 91色综合| 日本三级精品| 神马影院午夜福利久久久| 久久人妻四季| 少妇高潮99p| 激情五月天插| 97在线免费看视频| 国产女人9999| 日韩专区数据列表-第3230页-精品国产一区二区三区香蕉 久久99熟女人妻中文字 | 视频黄色国产一级| 97在线视频免费| 一区二区三区男女操逼黄色小电影| 高清无码久操视频| 欧美色亚洲色| 亚洲伊人久久精品影院| 丰满翘臀美女影院视频| 日本精品一区二区中文字幕| 国产色产精品在线观看| 99re这里只有精品2| 欧美少妇性乱| 亚洲综合另类欧美久久久| 簧片免费看视频| 一区操逼| 午夜美女诱惑电源网| 国产1727欧美| 日日干男人的天堂| 东北女人的毛片| 玖玖爱综合| 国产亚洲一黄| 九九英色视频| 天美传媒精品一区二区| 超碰色综合| 国产在线强奸视频| 日韩欧美丝袜诱惑| 日韩激情啪啪| 美女操逼福利视频| 亚洲国产av中文字幕久久| 亚洲色图欧洲| 色五月AV| 91亚洲在线| 久久精品一区二区三区四区五区| 欧美成人贴图| 国语精品对白| 熟妇人妻丰满久久久久久久无码| 9美女超碰在线免费观看| 最新中文字幕av| 超碰色男人操熟女| 亚洲操逼网| 久久精品亚洲婷婷| 骚妻少妇精品性色无码四色A V| 欧美一级专区免费大片| 综合久久99亚洲人妻中文在线| 欧亚第一综合网| 亚洲男人天堂网久久| 伊人97色天使| 国产青视频| 噜噜噜久久亚洲精品色情| 亚洲综合贴图91 | 麻豆性爱视频在线播放| 97超级欧美| 欧美 熟女 日韩| 欧美天堂亚洲电影院一区在线播放| 女人的天堂大香蕉网| 亚洲熟妇极品| 日本男人插女人的逼黄色| 亚州综合AⅤ| 加勒比少妇AV婷婷六月天超碰超碰| 欧美色图99| 天天夜夜rb| 国产乱伦搜索结果91P| 91精品国产91综合久久蜜臀| 狠狠操官网| 91快色色色色色| 另类小色呦| 97天天摸天天碰| 亚洲第一页欧美| 欧洲亚洲天堂精品| 91成人精品| 亚洲无码精品AV久久久| 夜草网站| 日韩成人电影AV| 午夜精品99久久久久传媒| 亚洲色欲一区二区三区| 久9久9久9久9久9久9 | 欧美图片偷拍| 五月天亚洲网| 国产免费一区2区3区| 国模艳艳啪啪一区| 国产激情片在线观看| 欧美久久草熟女| 欧美图片色五月天| 激情小说图片亚洲首页| 丁香五月婷婷啪啪| 91天天c| 蜜臀一区二区三区亚洲最新章节在线观看 - 高清蜜臀一区二区三区亚洲全集播放 | 好屌色综合| julia国产在线 | 韩日性爱av| 夜夜操二区| 久久久久人| 欲色综合| 亚洲少妇综合在线播放| 欧美黑人与女人91~| 亚洲精品乱码久久久久久蜜桃麻豆 | 久久一区二区三区四区五区| 8050午夜少妇无码| 国产中文福利| 操逼操逼操| 爱我干综合| 国产第二页| 先锋激情∨在线视频播放| 黑丝内射一区二区三区| 欧美日韩亚洲国产中文永久天天看| 91综合在线| 日本网色| 国产精品久久久亚洲第一牛牛_在线观看| 美日韩男女操屄视频| 95人妻爽爽人人做人人澡 | 欧洲性爱无码区| 精品视频日日夜夜| 最新AV在线| 极品色www影院| 国产精品电| 久操网线| 尤物视频偷拍免费| 麻豆啪啪啪视频| 国产蜜臀在线| 亚洲国产成人高清在线| 天天综合网AV91| 亚瑟国产精品久久无码| 欧美日韩国产电影| 久久久久久久伊人精品| 天堂在线一区二区| 亚洲乱色熟女一区| 极品内射| 欧美性爱三区二区| 91草草草| 播播亚洲小说亚洲| 骚熟女AV网| AV天天在线观看| 999 久久久| 揉揉日日日日| 91色综| 国产品精品自在在线午夜免费| 黄污污污污| 亚洲高清自拍| 天天日日舔舔| 日韩性爱小视频| 亚洲情色一区三区| 十八禁黄色| 91一区二区| 久久产精品一区二区三区电影| 欧美综合骚| 偷拍色图| 嫩草一区二区在线观看| 97久久精品不卡| 欧美日韩第一页| 射丝袜高跟鞋99| 国产亚洲性生活视频播放| 国产成人精品无码久久| 国产热av| 在线 亚洲 网爆 自拍| 91视频综合网| 殴美日韩m| 黄色区免费观看中文字幕| 九九五月天| 天天淫人人妻日日色| 国产丝袜美女在线一区| 啊啊啊啊啊啊啊啊啊在线观看| 欧美系列在线一区二区| 欧美第一页| 激情文学 亚洲图片| 337p大胆噜噜噜噜噜91Av| 亚洲最新Av| 毛片麻豆91糖心精品毛情片| 99久久婷婷国产综合精品草原| 亚洲成人在线高清| 后入综合久久| 这里是精品| 99日免费视频中文字幕| 亚洲无套久久嗯嗯| 啊啊啊啊啊啊啊啊视频| 精品一久久久| 五月婷婷丁香中文字幕| a片自拍直播视频| 少好三P| 欧美碰碰综合色| 丁香色婷婷| 极品色| 黄色视频特级毛片| 久久国产AⅤ| 久久天天性久久伊人| 91亚洲图片| 97香蕉碰碰人妻国产欧美| 亚洲欧美综合图片| 在线不卡视频| 亚洲色图欧美色图日韩色图| 国产亚热在线久久| 九七色图| 精品一区二区2| 久久久久9999妇女| 黄色欧美性爱视频| 青草草免费网站av| 超碰97中文| 啊灬啊灬啊灬啊灬高潮奶出了免费视 | 亚洲天堂中文字| 国产97在线视频| 97在线/亚洲| 亚洲色图伊人网| 夜夜嗨AV蜜臀av| 日本天天吊| 中出91| 欧美十八禁在线看| 黄色免费网页无码| 1级午夜影院费免区| 欧美天天综合网| 伦理第一页| 韩日欧亚a级| 人妻色情天天操| 国产免费一区| 亚洲青青草| 素人美腿视频网站| 九九精品美女高溯喷水| 欧美亚性天堂| 色婷婷视频| 国内自拍 日韩激情 99| 国产 丝袜 欧美中文 另类| 福利风月五月天影院| 吻戏激情性巴克| 91久久99久久91熟女精品| 亚洲图片婷婷五月天| 人妻性爱一区二区| 日韩激情无码影院| 亚洲成人免费中文字幕| 97人人操人人摸| 口爆吞精在线观看| 亚洲AV永久无码一区仙野| 全免费a敌肛交毛片免费| 国产午夜福利合集| 另类小说综合网| 国产精品久久妻无码网站| 欧美性xxxxx狂欢| 精品国产无码中文| 91N综合网在线| 国产67194| 熟女人妇一区二区三区| 日本丝袜人妻内射| 好色美女九七第一页| 农村妇女一级二级三级视频| 人妻81p| 久久只有精品一区二区三区| aⅴ日韩成人电影av在线免费看av大全 | 成年女人黄网站| 性吧在线视频| 九久精品| 欧美一区二区情色| 疯操AV| 亚洲国内精品成人不卡| 伊人热综合| 最新欧美色网| 色香av| 欧美日韩成人| 超碰人妻久久人妻中文97| 白丝av| 国产高清1234区| 酒色综合网| 亚洲不卡不卡中文字幕不卡| 久夜操| 天天色天天干天天爱| 五十路二区在线| 久久中文字幕一区不卡| 青青草久久一区网| 日韩人妻少妇 一区二区三区| 五月天久久婷婷亚洲| 青草成人免费视频一com| 丁香色五月 97干| 一卡二卡在线播放| 97天堂| 蜜桃臀一区二区aV| 国产精品久久久久无码AV会牛| 日日摸日日碰| 亚洲熟女中文字幕在线| 九七超碰人人乐| 少妇高潮99p| 热热色91| 久久极品一区二区| 翔田千里爆乳巨臀无码| 青青草白白色| 岛国黄色大片网站| 九九九九九九综合| 99热伊人| 中国AAAAAA黄色片| 欧美 综合 亚洲| 亚洲操人| 九九九九九九九九九国产精品| 色综合中文字幕不卡| 国产成人无码a| 九九九九九九免费视频| 九九99久久| 日韩电影在线观看网址| 一本大道综合伊人精品热热| 一级毛片久久久久久久女人18| 成熟熟女国产精品一区二区| 丁香五月激情婷婷| 国产一国产一级毛片古装| 久久久18禁| 日本理论在线| 中文字幕 国产 精品| 国产97视频免费观看| 91久久久久久| 亚洲国产一级黄色视频| 久久精品免视看国产成人﹣蜜臀av一区. 久久精品免视看国产成人,蜜臀av一区 | 伊人影院综合是一个与深夜成人在线| 97在线播放 | 狠狠爱综合| 免费操逼91| 久久少妇人妻| 欧美日韩情色一区二区| 91久久精品中文字幕| 1024精品在线| 校园春色亚洲无码| 国产伦精品一区二区三区视频女| 啪啪视频亚洲第一| 久久线上视频免费看| 久久久久久久 九九九九九九九| 性影在线视频| 看日韩黄片| 久久久免费视频18| 婷婷五月天久久精品视频一区二区三区 | 997色在线| 久久伊人在线五区| 3p国产欧美99热| 国产成年精品高清在线观看91| 中文字幕熟女人妻丝袜丝| 热久久九九热| 涩五月婷婷| 久久久久久久九九九九九九| 精品传媒在线一区| www. 男人天堂成人在线| 九九热免费视频| 日日操丁香五月天| 成人小说视频在线精品欧美| 99操逼| 呦女网站| 亚洲欧洲日产国产综合网| 欧美激情五月天| 99久久精品无码一区二区| 欧美色www亚洲国产阿娇要播| 欧美日本视频一区| 精品一久久久| 97色诱| 亚洲有薄码区日本系列中文字幕| 激情视频网址| 亚洲色图殴美色图激情乱伦| 午夜男女爽爽爽影院视频| 人人妻人人玩人人澡人人爽| 黑白配性爱AV成| 骚女高跟AV在线| 青青欧洲黑| 99999久久久久9国产精品| 丰满美女一级毛片在线播放| 一区二区三区高清 | 91无人区卡一卡二卡三乱码入口最新版:能让用户有更多选择的选择-经典说说-爱 | 国产精品2020| 婷婷五月天福利| 国产曰批免费观看久久久| 一区AV| 人妻干天天| www.男人的天堂| 997色在线| 久久视频,这里只有精品 | 26UUU欧美激情一区二区| 国内外内射高清视频| 日日躁夜夜躁狠狠躁超爽| 久操电影网| 欧美激情精品| 99999亚洲| 久久精品无码专区| 久久精品店| 97香蕉网| 激情熟女12P| 国产东北女人在线视频| 天天看天天在线精品| 亚洲图片欧美色| 尻女朋友一夜| 97超碰热线| 青青草日本无码| 久久精品视频久久久| 日日夜夜骚| 欧美日韩亚洲五月天婷婷| 91丨精品丨国产丨丝袜| 福利天天都操| 97chaopengongkai| 麻豆久久精品亚洲精品88 | 强上我不卡卡| 99热在线不卡| 亚洲少妇激情一区二区三区| 国产外初女出血视频| 少妇内射视频| 欧日韩一二三f区| 色婷婷一区二区三区久久| 亚洲欧美另类激情小说| 制度丝袜99| 精品超碰国产| 久久婷婷五月| 欧中日成人免费影视| 亚洲九九爱| 日天天九九天堂666| 97这里只有精品| 久久首页| 国产av尤物| 日本一区99| 极品美女嘿咻| 亚洲中文字幕熟女| av网页一区二区三区| 操91| 欧美性综合| 欧美人妻制服| 无遮挡一级毛片视频免费的| 黄色av片三级三级三级免费看| 猛交交| 欧美情色男人的天堂| 免费精品AB| 天天射天天操天天干天天吃2018 | 欧美激情一区| av无码av无码专区| 欧洲天天在线| 精品久久9| 天天操天天插| 熟女人妻一区二区三区| 欧美99| 日韩午夜国产| 亚洲精品欧洲色| 天天综合网91| 探花精品视频| 青青草白白色| 亚洲人妻久久| 亚洲高清无码AAA久久久精品| 丰满少妇人妻久久久久久| 91N综合网在线| 成·人免费午夜在线观看| 久久久久久国产精品免费网站| 91蜜臀在线久久久久| 天美传媒av 在线| 久久久久久久久久久久久女过产乱-少妇高潮一区二区三区喷水-成人AV | 亚洲男人的天堂在线看| 亚洲影视综合| 99自拍视频在线观看| 久久九七| 神马久久久久| 婷婷五月综合在线| 公司1区2区3区精产精| 97综合国产| 1769国内精品视频| 亚洲综合有玛| 熟妇人妻精品一区二区| 91香蕉国产尤物视频| 欧美成人一区二区三区在线播放| 欧美内射少妇| 亚州性色| 欧美精品自慰系列寂寞少妇| 91撸色网 玖玖网 欧美| 男人天堂网站| 天天插天天射| 老熟乱一区二区三区四区| 日本激情免费大片| 大乔未久88一区| 日本熟女不卡视频| 夫妻四区五区六区| 欧美激情高清性猛交| 国产尤物AV尤物在线观看不卡| 婷婷美人网| 欧美亚洲高清| 操迟操逼在巾线Fre看| 亚洲情色在线| 免费的黄片有限公司| 亚州综合电影| 日韩一级久久毛片| 国产成自自拍在线观看| 97超碰久久| 岛国视频免费在线观看| 在线黄色污污网站| 欧美不卡在线一区二区| 欧美性,色九九| 久久精品一区二区一8| 日韩美女久久一区二区三区| 亚洲成a人v欧美综合天堂下载| 丝袜六区| 欧美精品一二三| 殴美牲| 97爱爱| 中文字幕91综合| 人妻夜夜爽天天爽三区麻豆AV网站| 91网站18在线观看| 天天激清| 亚洲中文字幕有码视频一区二区三区| 亚洲精品国产拍免费91在线| 六月激情网| 夜夜嗨一区| 久久人妻丝袜一区二区三| 中文字幕欧美丝袜07资源| 91精品电影18| 国产JDAV无码视频在线观看| 欧美亚洲第1页| 亚洲字幕一区二区| 天操天操夜操夜月操月年年操操| 日本道久久综合色色| 少妇高潮一区二区三区在线| 99久久com免费视频′| 情色五月天就去干| 亚洲日韩一区电影| 天天射天天操天天干天天吃2018| 91天天综合网,天天综合网| 欧美日韩国产三级黄色| 中文无线日韩一区| 国产玖玖| 在线人成亚洲视频免费观看| 裸体1区| 国产福利在线视频网站| 日韩欧美麻豆| 综合熟女| 无码动漫av中文字幕| 97视频新免费| 日本三级中国三级99人妇网站| 欧美亚洲天堂| 日韩欧美丝袜诱惑| 一区二区亚州激情久婷婷欧美 | 欧美在线啊啊啊| 日韩乱伦AⅤ| 日日骚网站| 亚洲中文字幕妇伦久久| 巨爆乳一区二区爆乳区| 天堂亚洲欧美| 男人久久精品| 粉嫩av在线一区二区| 亚洲国产97| 天天拍天| 一区二区偷拍拍视频| 亚洲啪AⅤ永久无码| 欧美熟妇精品黑人巨大91| 操人妻逼91| 天天日B狠狠操| se吧提供国产乱老熟视频胖女人| 色97欧美| 自拍欧美| 一品道视频一区二区三区| 国产精品亚洲天堂网址| 色图四区| 久久久久久九九九九九九| 97干在线看| 91粉嫩萝控精品福利网站_精品影音先锋国 | 91视频成人福利网站在线一区| 囯产乱伦一区二区三女| 五月天久久综合网| 欧美综合第一页| 啊啊啊啊啊啊啊在线| 花野真衣| 成人午夜视频免费播放| 一本大道不卡一二三区| 欧美天天弄| 可乐操亚洲蜜911| 综合av影片| 五十路熟女工口 | 欧美午夜视频免费观看| 91美女视频| 亚洲天天更新| 208天天久久九九九| 日本黄页视频在线观看| 97色97好| wwe 天天干.com| 日韩精品一区二区三区四虎影视| 男女激情黄色网址| 色色香蕉| 精品无码久久久久久国产浪潮| 熟女熟妇一区二区三四区| 久久一二三四不卡 | 69XX一中文字幕人妻91| 91青青草| 青草一区二区| 久久精品成人| 精品久久久一本一道| 骚女高跟AV在线| 大香蕉在线视频重口味毛片在线| 天美国产精品| 亚洲天堂女优在线| 日韩素人无码一区二区三区三州| 首页中文字幕中文字幕免费| 蜜臀一区二区三区在线| 日韩精品在线视频,日韩精品……| 久久久久久久九九九九| 超碰超碰超碰超碰的大鸡吧操黑丝袜 | 操逼逼福利视频| aaaa黄片| 国产一区二区在线电影| 强奸乱亚洲| 色色五月婷婷| 志村玲子视频一区二区| 精品一区二区人妖| 日韩不卡a级视频专区| 精品国产精品一区二区| 丁香六月婷婷久久综合| 超碰免费在线| 欧美在线视频99| 91狠狠色丁香婷婷综合久久| 99热18| 精品一区二区三区蜜桃臀赵总 | 91在线免费精品视频| 1769一区| 日本三级A片网站com| 370p日韩欧美亚洲精品| 欧美亚洲| 中日高清无码操逼视频| 亚洲国产欧美日韩人妻日中文| 欧美黄色手机在线观看| 园内精品自拍视频在线播放| 夜夜影视四色| 亚洲高清欧美总合| 成人短视频在线观看| 久久久国产三级黄色片| 女人的久久久| 99国产天美| 亚洲少妇激情一区二区三区| 乱伦系列一区二区| 亚洲清纯综合| 亚洲伊人久久精品影院| 欧美天天射| 久久华人网| rion磁力链接| 99热这里只有精| 97久久国产精品| 美女爽到高潮91| 中文字幕在线免费观看 | 九九九九欧美| 超碰 国产熟女精品一区|