久久亚洲成a人片熟女精品色一区二区三区|国产精品视频第一精品视频|av天堂热无码手机版|亚洲?v无码久久无遮挡|国产精品偷伦视频免费观看国产|麻豆国产自产精品丰满熟妇|av无码av不卡一区二区|久久亚洲精品中文字

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

移動(dòng)邊緣計(jì)算卸載算法實(shí)戰(zhàn):MECOptimalOffloading代碼庫解析與復(fù)現(xiàn)

移動(dòng)邊緣計(jì)算卸載算法實(shí)戰(zhàn):MECOptimalOffloading代碼庫解析與復(fù)現(xiàn) 簡介移動(dòng)邊緣計(jì)算的卸載算法實(shí)現(xiàn)包面向研究邊緣計(jì)算任務(wù)卸載的開發(fā)者與算法工程師重點(diǎn)解決計(jì)算任務(wù)在本地與邊緣服務(wù)器之間如何分配的問題以降低時(shí)延和能耗、提升服務(wù)質(zhì)量。壓縮包共18個(gè)文件以9個(gè)Python腳本為主體涵蓋卸載策略實(shí)現(xiàn)、測試與結(jié)果分析另含4張結(jié)果圖、2個(gè)最優(yōu)解結(jié)果文件及說明文檔整體約77KB目錄清晰便于快速上手。目前已有2524人學(xué)習(xí)下載。資源提供了多種優(yōu)化思路的代碼實(shí)現(xiàn)如貪心、遺傳、粒子群以及深度強(qiáng)化學(xué)習(xí)等并配有測試模塊、最優(yōu)解保存與結(jié)果可視化可幫助讀者理解任務(wù)相關(guān)性、網(wǎng)絡(luò)帶寬與能量效率的權(quán)衡也便于在此基礎(chǔ)上擴(kuò)展自己的策略。適合課程設(shè)計(jì)、論文實(shí)驗(yàn)或入門移動(dòng)邊緣計(jì)算算法研究。1. 移動(dòng)邊緣計(jì)算的卸載算法一個(gè)能直接復(fù)現(xiàn)的開源代碼庫移動(dòng)邊緣計(jì)算MEC把云計(jì)算能力下沉到網(wǎng)絡(luò)邊緣終端設(shè)備把計(jì)算任務(wù)卸載給附近的邊緣服務(wù)器這在物聯(lián)網(wǎng)、5G通信和車聯(lián)網(wǎng)場景中直接決定了服務(wù)時(shí)延的上限。卸載算法的核心問題是哪些任務(wù)留在本地、哪些卸載到邊緣、卸載任務(wù)如何分配信道和算力資源才能在帶寬受限、服務(wù)器負(fù)載波動(dòng)、任務(wù)實(shí)時(shí)性要求各不相同的條件下把延遲和能耗的加權(quán)和降到最低。MECOptimalOffloading-master 正是圍繞這個(gè)核心研究問題搭建的開源代碼庫里面包含環(huán)境模擬、多種卸載策略實(shí)現(xiàn)和實(shí)驗(yàn)結(jié)果輸出模塊并且預(yù)留了深度強(qiáng)化學(xué)習(xí)的擴(kuò)展空間。對正在做邊緣計(jì)算課程設(shè)計(jì)、算法性能對比或想從零搭建卸載仿真平臺的開發(fā)者來說這套代碼提供了能直接復(fù)現(xiàn)基準(zhǔn)算法、改參并二次開發(fā)的路徑。2. 卸載決策的基礎(chǔ)任務(wù)特征、網(wǎng)絡(luò)條件與目標(biāo)函數(shù)2.1 卸載決策的數(shù)學(xué)模型與目標(biāo)函數(shù)任務(wù)卸載問題的建模方式?jīng)Q定了后續(xù)算法的設(shè)計(jì)空間。常規(guī)做法是把卸載決策定義為一個(gè)帶約束的組合優(yōu)化問題每個(gè)任務(wù)只能選擇本地執(zhí)行或卸載到邊緣服務(wù)器執(zhí)行決策變量是一個(gè)二元向量0 表示本地1 表示卸載同時(shí)還有一個(gè)連續(xù)變量表示任務(wù)上傳時(shí)分配到的帶寬比例或者任務(wù)可以被切分后部分卸載的比例。目標(biāo)函數(shù)通常取延遲和能耗的加權(quán)和延遲由本地計(jì)算時(shí)間、上傳傳輸時(shí)間、邊緣排隊(duì)時(shí)間和邊緣計(jì)算時(shí)間四段組成能耗由本地計(jì)算能耗和無線傳輸能耗兩段組成。權(quán)重系數(shù)根據(jù)業(yè)務(wù)場景調(diào)整電池供電的移動(dòng)設(shè)備把能耗權(quán)重調(diào)高車聯(lián)網(wǎng)這類實(shí)時(shí)性敏感的場景把延遲權(quán)重調(diào)高。約束條件是建模的另一半。每個(gè)任務(wù)有一個(gè)最大允許延遲deadline任何卸載決策的總延遲一旦超過它決策就是無效的多個(gè)任務(wù)共享上行信道分配給各任務(wù)的帶寬相加不能超過信道容量邊緣服務(wù)器的計(jì)算能力有限同一時(shí)刻能處理的 CPU 周期數(shù)有上限服務(wù)器排隊(duì)等待時(shí)間必須被顯式建模。這三類約束把問題從簡單的排序問題變成了真正的組合優(yōu)化難題卸載算法存在的意義也正在于此。表卸載問題建模的核心參數(shù)參數(shù)符號典型范圍說明任務(wù)數(shù)據(jù)量D0.110 Mbit決定上傳傳輸時(shí)間任務(wù)計(jì)算量C0.5100 Mcycles決定本地與邊緣計(jì)算耗時(shí)最大延遲T_max0.011 s超時(shí)則決策無效上行帶寬B550 Mbps共享資源需分配邊緣算力S550 GHz影響邊緣排隊(duì)時(shí)長權(quán)重系數(shù)α、β01αβ1延遲與能耗的平衡實(shí)際建模時(shí)α 和 β 的取值直接決定算法偏好。如果只調(diào)低能耗權(quán)重算法會傾向于把所有任務(wù)推到邊緣服務(wù)器以節(jié)省終端電量代價(jià)是邊緣排隊(duì)延遲飆升反過來只調(diào)高延遲權(quán)重終端本地 CPU 會被過度使用能耗上升。一個(gè)可接受的初始設(shè)定是 α0.6、β0.4先把結(jié)果跑出來再根據(jù)實(shí)驗(yàn)數(shù)據(jù)迭代調(diào)整。2.2 經(jīng)典優(yōu)化算法選型貪心、遺傳與模擬退火的適用邊界有了數(shù)學(xué)模型下一步是選算法。貪心算法是最直接的基線策略——把任務(wù)按某個(gè)啟發(fā)式指標(biāo)排序依次決定是否卸載。常見的啟發(fā)式指標(biāo)是緊迫度數(shù)據(jù)量與截止時(shí)間的比值或者“本地計(jì)算時(shí)間 減去 預(yù)計(jì)卸載時(shí)間”的差值。貪心算法的計(jì)算復(fù)雜度在 O(n log n)處理幾百個(gè)任務(wù)毫無壓力適合作為對比實(shí)驗(yàn)的基準(zhǔn)線。但貪心只著眼當(dāng)前任務(wù)不考慮多個(gè)任務(wù)之間的帶寬競爭在任務(wù)密集到達(dá)時(shí)通常拿不到最優(yōu)解。遺傳算法把一個(gè)卸載方案編碼成個(gè)體一個(gè)長度為任務(wù)數(shù)的 0/1 向量用適應(yīng)度函數(shù)評估方案整體質(zhì)量再通過選擇、交叉、變異迭代更新種群。它的優(yōu)勢在于不依賴目標(biāo)函數(shù)的梯度信息能跳出局部最優(yōu)劣勢是收斂較慢且每次迭代要評估整個(gè)種群任務(wù)數(shù)超過 300、種群規(guī)模到 50 時(shí)單輪迭代就要做一萬多次方案評估運(yùn)行時(shí)間明顯拉長。模擬退火則是用溫度參數(shù)控制隨機(jī)接受劣解的概率溫度高時(shí)跳躍范圍大溫度低時(shí)逐步收斂到穩(wěn)定解。它比遺傳算法占內(nèi)存少適合中等規(guī)模100200 個(gè)任務(wù)的卸載決策但溫度衰減曲線需要反復(fù)調(diào)參——降溫太快會早早陷入局部最優(yōu)降溫太慢則運(yùn)行時(shí)間成倍增加。三個(gè)算法的選型邊界可以粗略劃定任務(wù)數(shù)少于 50、對實(shí)時(shí)性要求極高時(shí)用貪心任務(wù)數(shù)在 50200 且需要近似全局最優(yōu)時(shí)用模擬退火任務(wù)數(shù)超過 200、能接受分鐘級離線計(jì)算時(shí)用遺傳算法。MECOptimalOffloading 代碼庫的 algorithms 目錄也正是按這一思路組織的每個(gè)算法獨(dú)立成文件方便替換和批量對比。2.3 深度強(qiáng)化學(xué)習(xí)的引入狀態(tài)空間與獎(jiǎng)勵(lì)設(shè)計(jì)經(jīng)典優(yōu)化算法的共同短板是場景參數(shù)一變就得重新求解難以應(yīng)對邊緣網(wǎng)絡(luò)中任務(wù)到達(dá)的動(dòng)態(tài)變化。深度強(qiáng)化學(xué)習(xí)被引入后問題的表述方式變成了馬爾可夫決策過程智能體在每個(gè)時(shí)隙觀察系統(tǒng)狀態(tài)輸出卸載決策環(huán)境反饋延遲與能耗并折算出獎(jiǎng)勵(lì)值智能體通過與環(huán)境持續(xù)交互學(xué)習(xí)最優(yōu)策略。狀態(tài)空間的構(gòu)建直接影響訓(xùn)練效果。常見的狀態(tài)元組是 (channel_gain, task_size, required_cpu_cycles, server_load, battery_level)其中信道增益反映當(dāng)前無線環(huán)境質(zhì)量任務(wù)大小和所需計(jì)算周期描述任務(wù)特征服務(wù)器負(fù)載和電量決定卸載收益。五個(gè)特征通常做 min-max 歸一化避免量綱差異讓神經(jīng)網(wǎng)絡(luò)訓(xùn)練不穩(wěn)定。獎(jiǎng)勵(lì)函數(shù)的設(shè)置建議在任務(wù)完成時(shí)給正獎(jiǎng)勵(lì)延遲超限或卸載失敗時(shí)給負(fù)獎(jiǎng)勵(lì)獎(jiǎng)勵(lì)本身可以稀疏但不能缺失。動(dòng)作設(shè)計(jì)上離散動(dòng)作卸載/不卸載配合 DQN 結(jié)構(gòu)實(shí)現(xiàn)最簡單如果任務(wù)是可切分的連續(xù)卸載比例配合 DDPG 或 PPO 效果更好。訓(xùn)練中常遇到的一個(gè)陷阱是延遲和能耗的量綱差距過大——延遲是 0.1 秒量級能耗是 1 焦耳量級獎(jiǎng)勵(lì)函數(shù)如果不做縮放網(wǎng)絡(luò)學(xué)到的策略會被數(shù)值更大的那項(xiàng)主導(dǎo)。解決方案是在獎(jiǎng)勵(lì)里給延遲和能耗各乘一個(gè)縮放系數(shù)讓兩個(gè)量綱落在相近的數(shù)值區(qū)間。2.4 任務(wù)依賴約束從獨(dú)立卸載到DAG調(diào)度上面討論的都是任務(wù)相互獨(dú)立的情況但真實(shí)應(yīng)用里很少有這么干凈的場景。一個(gè)視頻分析任務(wù)可以拆成數(shù)據(jù)預(yù)處理、特征提取、結(jié)果融合三個(gè)階段后一個(gè)階段必須等前一個(gè)階段完成才能開始。把每個(gè)階段看作一個(gè)子任務(wù)它們之間的先后關(guān)系就構(gòu)成一個(gè)有向無環(huán)圖DAG。DAG 約束下子任務(wù) A 在本地執(zhí)行、子任務(wù) B 依賴 A 的輸出且被卸載到邊緣時(shí)B 的啟動(dòng)時(shí)間必須加上 A 的完成時(shí)間和 A 到邊緣服務(wù)器的結(jié)果傳輸時(shí)間。這種跨設(shè)備依賴讓卸載決策的搜索空間急劇擴(kuò)大貪心算法基本失效。常見處理方式是按 DAG 的層次順序遍歷先決策入口節(jié)點(diǎn)再逐層傳播約束配合遺傳算法或動(dòng)態(tài)規(guī)劃求解。代碼庫里如果包含依賴建模通常在 mecoptimaloffloading 環(huán)境的任務(wù)生成器里能看到一個(gè) tasks_with_dependencies 開關(guān)打開后任務(wù)會攜帶 predecessors 字段算法實(shí)現(xiàn)里就需要判斷前序任務(wù)的完成位置。3. MECOptimalOffloading代碼庫模塊結(jié)構(gòu)與復(fù)現(xiàn)流程3.1 目錄解析algorithms、tests、results 各自負(fù)責(zé)什么打開 MECOptimalOffloading-master 之后根目錄下的 .gitignore、README.md、LICENSE 是工程元文件真正的業(yè)務(wù)代碼集中在 mecoptimaloffloading、tests、algorithms、results 四個(gè)目錄里。mecoptimaloffloading 是主包放的是卸載問題環(huán)境的定義包括任務(wù)生成器、信道模型、邊緣服務(wù)器模擬器和能耗模型algorithms 目錄放各卸載策略的實(shí)現(xiàn)每個(gè)算法一個(gè)文件tests 目錄放單元測試和基準(zhǔn)實(shí)驗(yàn)?zāi)_本results 目錄默認(rèn)存放運(yùn)行結(jié)果輸出。表MECOptimalOffloading 核心目錄職責(zé)目錄/文件職責(zé)定位常見內(nèi)容mecoptimaloffloading核心環(huán)境包定義卸載問題場景任務(wù)生成、信道模型、服務(wù)器模擬、能耗與延遲計(jì)算algorithms卸載策略實(shí)現(xiàn)greedy.py、genetic.py、simulated_annealing.py 等tests基準(zhǔn)實(shí)驗(yàn)與正確性驗(yàn)證run_benchmark.py、test_constraints.py 等results結(jié)果輸出目錄按算法和場景命名的 CSV、日志文件拿到代碼庫后建議先讀 tests/test_constraints.py這個(gè)文件驗(yàn)證算法輸出的決策是否滿足 deadline、帶寬和服務(wù)器容量三類約束。如果這些測試沒過說明算法決策本身就有問題后續(xù)跑出來的指標(biāo)沒有參考價(jià)值。3.2 環(huán)境準(zhǔn)備與依賴安裝我習(xí)慣先建一個(gè)干凈的虛擬環(huán)境再裝依賴。這套代碼基于 Python 3 編寫核心依賴是 numpy 和 pandas如果深度強(qiáng)化學(xué)習(xí)模塊被啟用還會依賴 stable-baselines3 或 tensorflow。安裝的常見流程如下cd MECOptimalOffloading-master python -m venv .venv source .venv/bin/activate # Windows 下是 .venv\Scripts\activate pip install numpy pandas python -m pytest tests/ -v上面命令的邏輯是先創(chuàng)建虛擬環(huán)境隔離依賴然后安裝數(shù)值計(jì)算和數(shù)據(jù)處理相關(guān)的包最后用 pytest 跑一遍 tests 目錄下的全部測試。如果測試全部通過說明環(huán)境和源碼匹配如果某個(gè)測試失敗優(yōu)先檢查 numpy 版本是否過新導(dǎo)致接口行為變化再檢查缺失的依賴。首次跑測試建議關(guān)注“多少 passed、多少 failed”而不是直接看細(xì)節(jié)。3.3 快速運(yùn)行一個(gè)基準(zhǔn)實(shí)驗(yàn)tests 目錄下通常有一個(gè)基準(zhǔn)實(shí)驗(yàn)入口腳本用于在指定任務(wù)數(shù)量、帶寬和服務(wù)器算力下運(yùn)行某個(gè)算法并輸出結(jié)果。常見調(diào)用方式是傳入算法名和場景參數(shù)python -m tests.run_benchmark --algorithm greedy --num-tasks 100 --bandwidth 20 --server-cpu 10參數(shù)說明--algorithm 選擇算法greedy 表示貪心genetic 表示遺傳sa 表示模擬退火--num-tasks 是任務(wù)數(shù)量決定問題規(guī)模--bandwidth 是上行信道帶寬單位是 Mbps--server-cpu 是邊緣服務(wù)器計(jì)算能力單位是 GHz。運(yùn)行完成后results 目錄下會生成該算法對應(yīng)的結(jié)果文件通常包含每輪實(shí)驗(yàn)的總延遲、總能耗、卸載任務(wù)數(shù)量、平均任務(wù)完成時(shí)間等字段。剛拿到代碼庫時(shí)優(yōu)先跑默認(rèn)參數(shù)確認(rèn)流程通順再把 --num-tasks 從 50 逐步增加到 200觀察運(yùn)行時(shí)間的增長趨勢。這個(gè)操作能快速判斷代碼庫在當(dāng)前機(jī)器上的可用性也為后面做多算法對比提供了基線數(shù)據(jù)。結(jié)果文件是 CSV 格式的話可以直接用 pandas 讀進(jìn)來做分組聚合。3.4 核心算法代碼走讀以貪心卸載策略為例algorithms/greedy.py 是理解整個(gè)代碼庫的入口。它的核心結(jié)構(gòu)通常是按啟發(fā)式指標(biāo)對任務(wù)排序然后依次決定是否卸載實(shí)現(xiàn)如下import numpy as np def greedy_offloading(tasks, bandwidth, server_cpu, deadline_weight0.7): 貪心卸載決策按緊迫度排序逐個(gè)決定是否卸載。 tasks: list of dict, 每個(gè)任務(wù)包含: task_id, data_size(Mbits), required_cpu(cycles), deadline(s) bandwidth: 上行信道帶寬(Mbps) server_cpu: 邊緣服務(wù)器算力(GHz) deadline_weight: 排序時(shí)任務(wù)緊迫度的權(quán)重 decisions [] # 緊迫度 data_size / (deadline * required_cpu) # 值越大表示任務(wù)越“急”優(yōu)先處理 sorted_tasks sorted( tasks, keylambda t: t[data_size] / (t[deadline] * t[required_cpu]), reverseTrue ) local_load 0.0 # 本地排隊(duì)總計(jì)算量 edge_load 0.0 # 邊緣排隊(duì)總計(jì)算量 for task in sorted_tasks: local_time task[required_cpu] / 1.0 local_load # 本地算力 1GHz upload_time task[data_size] / bandwidth edge_time task[required_cpu] / server_cpu edge_load if upload_time edge_time local_time: decisions.append((task[task_id], 1)) # 卸載到邊緣 edge_load task[required_cpu] / server_cpu else: decisions.append((task[task_id], 0)) # 留在本地 local_load task[required_cpu] / 1.0 return decisions這段代碼的邏輯分三步先按“緊迫度”對任務(wù)排序貪心排序的核心是讓 deadline 更緊、計(jì)算量更大的任務(wù)優(yōu)先決策再依次估算每個(gè)任務(wù)的本地預(yù)計(jì)完成時(shí)間和邊緣預(yù)計(jì)完成時(shí)間最后選預(yù)計(jì)耗時(shí)較短的一側(cè)執(zhí)行。local_load 和 edge_load 兩個(gè)變量分別記錄排隊(duì)累積的任務(wù)量模擬了本地和邊緣的排隊(duì)效應(yīng)這是容易漏掉的部分——很多簡化版貪心只算單任務(wù)耗時(shí)不考慮排隊(duì)導(dǎo)致大批量任務(wù)時(shí)決策失真。理解了這個(gè)貪心實(shí)現(xiàn)再看 genetic.py 和 simulated_annealing.py 就輕松很多它們的差異只在決策搜索方式上任務(wù)模型、時(shí)間估算、結(jié)果記錄都是共用同一套環(huán)境邏輯。這也是卸載代碼庫的常見設(shè)計(jì)環(huán)境與算法解耦環(huán)境負(fù)責(zé)模擬與計(jì)算算法只負(fù)責(zé)搜索決策。3.5 擴(kuò)展一個(gè)新算法從接口設(shè)計(jì)到接入基準(zhǔn)測試要在這個(gè)代碼庫上驗(yàn)證自己的卸載策略關(guān)鍵是對齊基準(zhǔn)實(shí)驗(yàn)的調(diào)用約定。常見做法是新建一個(gè)文件實(shí)現(xiàn)一個(gè)入口函數(shù)然后在 run_benchmark.py 的算法選擇分支里加入新算法名。示例如下# algorithms/my_algorithm.py import numpy as np def offloading_decision(tasks, bandwidth, server_cpu, params): 自定義卸載算法入口返回 [(task_id, decision)] 列表。 params 是外部傳入的字典可以用 params.get(threshold, 0.5) 這種方式讀取自己的超參。 decisions [] # 這里實(shí)現(xiàn)你的算法邏輯 return decisions接入基準(zhǔn)測試的步驟一般是先在 run_benchmark.py 里加一個(gè) if 分支把 --algorithm my_algorithm 映射到上述函數(shù)再跑一遍 tests 目錄下的約束測試確認(rèn)返回的決策滿足 deadline 和帶寬約束最后用一個(gè)固定的小規(guī)模任務(wù)集對比同參數(shù)下新算法和貪心算法的輸出。整個(gè)過程不涉及環(huán)境模擬部分的修改改動(dòng)集中在 algorithms 和 run_benchmark.py 兩個(gè)文件如果代碼庫支持注冊機(jī)制改動(dòng)會更小。4. 避坑指南卸載算法實(shí)現(xiàn)中的常見問題與排查4.1 隨機(jī)種子不固定多次實(shí)驗(yàn)結(jié)果對不上現(xiàn)象同一命令連續(xù)跑兩遍results 里的總延遲差 15% 以上深度強(qiáng)化學(xué)習(xí)曲線每次形狀都不一樣。原因卸載仿真里的隨機(jī)性來源很多——任務(wù)生成時(shí)的到達(dá)間隔和任務(wù)大小是隨機(jī)的信道增益每個(gè)時(shí)隙在波動(dòng)遺傳算法的初始種群和變異操作同樣依賴隨機(jī)數(shù)。常見誤區(qū)是只調(diào)了 random.seed 忘了 numpy.random.seed導(dǎo)致部分隨機(jī)源還在震蕩。解決實(shí)驗(yàn)?zāi)_本開頭統(tǒng)一固定所有隨機(jī)源并把種子作為命令行參數(shù)傳入import random import numpy as np def fix_seed(seed42): random.seed(seed) np.random.seed(seed)固定種子之后同一命令在同一環(huán)境下應(yīng)輸出完全一致的結(jié)果。需要留意的是不同 Python 或 numpy 版本的隨機(jī)數(shù)算法可能有差異所以對比實(shí)驗(yàn)必須在同一解釋器環(huán)境下進(jìn)行否則即使種子相同結(jié)果也可能對不上。4.2 遺傳算法任務(wù)規(guī)模一大就內(nèi)存溢出現(xiàn)象num-tasks 從 100 加到 300遺傳算法腳本直接報(bào) MemoryError進(jìn)程被系統(tǒng)殺掉。原因常見的是用列表套列表存儲整個(gè)種群每個(gè)個(gè)體是一個(gè)長度為任務(wù)數(shù)的 0/1 列表再加上適應(yīng)度緩存和多輪迭代的中間副本內(nèi)存占用成倍膨脹。另一個(gè)隱藏問題是評估適應(yīng)度時(shí)逐個(gè)體調(diào)用 Python 循環(huán)臨時(shí)數(shù)組反復(fù)創(chuàng)建垃圾回收跟不上。解決用 numpy 的二維 0/1 矩陣承載整個(gè)種群替代列表套列表評估適應(yīng)度時(shí)做向量化計(jì)算用矩陣運(yùn)算替代 for 循環(huán)適當(dāng)縮小種群規(guī)模并提高迭代次數(shù)上限。定位內(nèi)存熱點(diǎn)用 memory_profiler 逐函數(shù)分析重點(diǎn)看哪個(gè)環(huán)節(jié)的臨時(shí)數(shù)組占用最大。4.3 強(qiáng)化學(xué)習(xí)訓(xùn)練不收斂卸載率來回震蕩現(xiàn)象DQN 訓(xùn)練了 5000 個(gè) episode獎(jiǎng)勵(lì)曲線沒有穩(wěn)定上升卸載率在 0.20.8 之間來回跳不同隨機(jī)種子下測試表現(xiàn)差異很大。原因三個(gè)常見原因。第一狀態(tài)特征未歸一化信道增益在 1e-3 到 1 之間波動(dòng)、任務(wù)大小在 0.1 到 100 之間波動(dòng)未歸一化的狀態(tài)輸入讓 Q 網(wǎng)絡(luò)訓(xùn)練極不穩(wěn)定第二獎(jiǎng)勵(lì)函數(shù)中延遲的單位是秒、能耗的單位是焦耳數(shù)值差距跨了幾個(gè)量級網(wǎng)絡(luò)被數(shù)值更大的獎(jiǎng)勵(lì)項(xiàng)主導(dǎo)第三經(jīng)驗(yàn)回放池容量開得太大舊策略產(chǎn)生的經(jīng)驗(yàn)長期占主導(dǎo)新策略學(xué)不動(dòng)。解決對狀態(tài)空間的每個(gè)特征做 min-max 歸一化獎(jiǎng)勵(lì)函數(shù)里給延遲和能耗各乘一個(gè)縮放系數(shù)讓兩部分的量級接近經(jīng)驗(yàn)回放池容量控制在 1000050000 條之間小批量大小選 32 或 64。改完這三處多數(shù)不收斂問題都能明顯改善。4.4 能耗模型參數(shù)與文獻(xiàn)數(shù)據(jù)對不上現(xiàn)象用代碼庫默認(rèn)參數(shù)跑出的單任務(wù)能耗是 0.02 焦耳目標(biāo)論文里同場景是 0.5 焦耳差了 25 倍。原因能耗模型通常按“傳輸功率 × 傳輸時(shí)間 本地計(jì)算功率 × 計(jì)算時(shí)間”計(jì)算但不同文獻(xiàn)對傳輸功率、信道增益公式、本地 CPU 有效開關(guān)電容的取值完全不同。比如傳輸功率有的取 0.1W有的取 1W本地計(jì)算功率有的按 P κ·f3 計(jì)算有的直接給固定值。代碼庫默認(rèn)參數(shù)大概率對應(yīng)原作者的實(shí)驗(yàn)配置直接套進(jìn)自己的場景必然失真。解決先確認(rèn)目標(biāo)文獻(xiàn)的能耗公式和參數(shù)取值再把能耗模型里的常量替換成對應(yīng)數(shù)值。比較穩(wěn)妥的做法是把傳輸功率、信道帶寬、CPU 頻率全部做成命令行可配置參數(shù)跑實(shí)驗(yàn)前單獨(dú)驗(yàn)證能耗模型的輸出是否落在合理區(qū)間。4.5 所有任務(wù)都卸載到邊緣本地算力閑置現(xiàn)象實(shí)驗(yàn)結(jié)果里卸載率始終接近 1.0邊緣服務(wù)器負(fù)載打滿但本地 CPU 完全空閑總延遲反而比全本地方案更高。原因目標(biāo)函數(shù)里延遲和能耗的權(quán)重設(shè)置不平衡——能耗權(quán)重過高、帶寬又充裕時(shí)算法傾向于把所有任務(wù)都推到邊緣服務(wù)器來節(jié)省終端電量忽略了邊緣排隊(duì)延遲另一種可能是約束條件里漏掉了邊緣服務(wù)器每時(shí)隙的處理上限排隊(duì)只有計(jì)算時(shí)間、沒有排隊(duì)等待時(shí)間卸載看起來總是更快。解決檢查權(quán)重系數(shù)把延遲權(quán)重調(diào)高或者引入帶寬競爭懲罰項(xiàng)同時(shí)確認(rèn) edge_load 的疊加邏輯是否正確邊緣排隊(duì)延遲有沒有被算進(jìn)總延遲。如果問題依舊可以手動(dòng)構(gòu)造全本地、全卸載、混合三個(gè)方案分別輸出總延遲做對比看算法有沒有明顯違背直覺的決策。5. 驗(yàn)證卸載算法的有效性從仿真到指標(biāo)分析的完整流程5.1 單算法驗(yàn)證跑通基準(zhǔn)場景先固定一個(gè)簡單場景任務(wù)數(shù) 50、帶寬 20 Mbps、服務(wù)器算力 10 GHz用貪心算法跑通整個(gè)流程。這一步的目的不是看性能而是確認(rèn)環(huán)境模擬、算法執(zhí)行、結(jié)果落盤三個(gè)環(huán)節(jié)沒有斷裂。驗(yàn)證標(biāo)準(zhǔn)是 results 目錄下生成了完整的 CSV 文件文件里每一行有總延遲、總能耗、卸載任務(wù)數(shù)且沒有 NaN 或明顯越界值。5.2 多算法對比控制變量與結(jié)果匯總接下來做批量對比。用兩層嵌套循環(huán)遍歷算法名和任務(wù)規(guī)模其他參數(shù)保持不變for algo in greedy sa genetic; do for tasks in 50 100 200; do python -m tests.run_benchmark \ --algorithm $algo \ --num-tasks $tasks \ --bandwidth 20 \ --server-cpu 10 \ --seed 42 done done腳本跑完后用 pandas 匯總所有結(jié)果文件import pandas as pd import glob dfs [] for f in glob.glob(results/*.csv): dfs.append(pd.read_csv(f)) df pd.concat(dfs) summary df.groupby([algorithm, num_tasks]).mean() print(summary)看到匯總表之后重點(diǎn)關(guān)注兩個(gè)趨勢任務(wù)數(shù)增長時(shí)各算法的總延遲和總能耗是否同步增長遺傳算法相比貪心的優(yōu)勢是否隨規(guī)模擴(kuò)大而體現(xiàn)如果遺傳算法在 50 個(gè)任務(wù)時(shí)反而比貪心差很可能是收斂條件設(shè)置太早需要增大迭代次數(shù)。5.3 參數(shù)敏感性分析一個(gè)批量復(fù)現(xiàn)的小技巧驗(yàn)證算法有效性不能只看一個(gè)帶寬值。帶寬從 5 Mbps 變到 50 Mbps卸載收益完全不同。我常用的做法是單獨(dú)寫一個(gè)循環(huán)腳本把 bandwidth 作為外層變量algorithm 作為內(nèi)層變量固定 seed跑完后再把同一算法在不同帶寬下的曲線畫在一起。觀察卸載率隨帶寬的變化是否符合直覺帶寬小時(shí)卸載率低、帶寬充足時(shí)卸載率升高。如果曲線是亂跳的基本可以判定是約束條件沒寫全或者隨機(jī)源沒固定。從那以后我每次拿到新的卸載算法代碼庫都會先固定種子、跑通三個(gè)算法的基準(zhǔn)實(shí)驗(yàn)再控制變量逐步放寬任務(wù)規(guī)模確認(rèn)這些基礎(chǔ)驗(yàn)證都通過之后才會放心地在這個(gè)庫上做自己的策略改進(jìn)。希望幫到你。本文還有配套的精品資源點(diǎn)擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
亚洲欧美日韩国产丝袜自拍中文| 蜜臀久久99精品久久久久久久久| 夜夜 中文视频rt| 小情侣高清国产在线视频| 97丝袜亚洲在线播放| 欧美视频边做饭边橾| 久草免费在线视频| 校园春色中文字幕AV| 九九热在线精品视频| 色网站导航大全| 亚洲男人的天堂V| 亚洲成人福利电影免费| 91性高朝久久久久久久久| 久久↗↗| 欧美 日韩 国产传媒| ?亚洲伊人伊成久久人综合网| 婷婷激情四射| 人妻夜爽夜夜爽| 日韩 欧美 校园一区| 国产小视频91| 日本欧美一区二区三区免费| 国产自产自拍| 欧美探花网| 久九九九| 综合久久2017| 日本幼女18+| 国产丝袜美腿美女麻豆| 中文字幕亚韩| 99在线无码精品秘 入口黑人| 毛片99-全集电影手机免费观看完整-B029AV| 无码99| 色色色色日本| 欧美福利视频啊啊啊啊| 亚洲欧洲激情卡通另类文学四射小说网站 | 精品一区二区麻豆| 高树玛利亚无码流出| 国产高清免费不卡av| 综合网91| 国内伊人久久久久久网站视频| 青青草玖玖爱| 欧美激色| 伊人少妇久久久| 精品久久久av| 久久97超碰香蕉| 中文字幕啊啊啊在线观看视频| 无码乱人伦中文视频| 国产日韩欧美操逼视频| 香蕉热人人精品| 久久精品人人做人人看| 精品无码不卡视频| 一级性爱啪啪视频| 先锋影音av先锋一区| 超碰97欧美| 国产人人干| 91欧美巨乳| 999熟女精品| 麻豆人妻偷人精品无码视频| 99操逼| 九九九精品美女| 997色在线| 色色97爱| 国产精品ⅴ无码大片在线看.| 中文字幕免费看| 天堂亚洲精品久久老牛| 日韩电影免费网站麻豆视频| 日产精品久久久一区二区| 91热色| 人妻无码一区二区三区久久99| 搞中出视频在线观看| 超碰1024久久| 97超碰中文| 尤物视频网 刘玥| 一本大道久| 精品少妇99| 精品人妻一区二区免费蜜桃视频| 小说区 图片区色 综合区| 啊啊啊啊操死我| 青春草莓视频在线观看网址| 色婷婷九月| renqi久久久久久久久久久久| 玖色av| 色欲天香天天综合网-成年人三级片网站-欧美乱妇狂野-日韩国产专区-久久久久久 | 伊人色综合网电影| 亚洲最大的黄色电影网站。| 亚洲资源网| 九九热re99re6在线精品| 色在线视频导航| 国产精品久久久 | 国产福利小视频高清在线观看| 国产原创剧情在线丝袜| 男人下部插入女人下部 | 夜色97| 蜜臀久久久99久久久久 | 五月天激情综合网| 亚洲天天影视综合网| 亚洲极品| 国产精品一区二区久久精品| 亚洲免费看片| 日本高清熟女久久一区| 欧美色图亚洲激情| 午夜电影在线观看无码专区| 九九九影院| 亚洲丝袜综合| 亚洲国产欧美中日韩成人综合视频| 嗯啊免费视频| 欧美日韩欧美| 日韩去日本高清在| 日韩啪啪啪视频| 97亚洲精品超碰| 99e久久国产精品| 一级免费啪啪片| 99re69| 易易A毛视频| 操逼逼一区视频| 午夜丁香婷婷| 欧美美女视频| 亚洲AV免费在线观看| 欧美精品系列| 欧美性爱视频免费一区一A| 特级大荫道BBwBBwBBW| 精品日日人妻| 人人插人人搞人人操| 亚洲五区熟女| 澳门黄片一香蕉视频| 激情丁香五月| 亚洲自拍97| 色欲av一区二区三区蜜芽| 久99久视频精选| 又黄又硬又粗又长国产视频| 日韩探花精品在线视频| 成人A片男人的天堂| 精品无码欧美三级| 嗯啊免费视频| 国产一区二区三区白丝| 欧美熟女丝袜| 岛国视频免费在线观看| 91 国产丝袜在线播放-百度| 欧美一区二区三区蜜桃| 亚欧美综合网。| 国产成人超碰在线| 不卡一区视频| 日韩av一级黄片| 国产情色在线| 日韩在线观看字幕精品| 亚洲双插| 婷婷五月花| 精品国产乱子伦一区二区三区,精品一| 人人操人人uiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiii | 欧美九一精品久久久熟妇| 久操网址| 色综合1991| 精品性爱一区二区| 麻豆一区二区三区在线看 | 蜜桃久久久久久| 家庭乱伦麻豆| 精品无码一二三四区| 黑人美精品 A片| 制服丝袜第二页| 26uuu国产成人综合| 久久久久96| 国产无套粉嫩白浆在| 深爱伊人影院| 天天干2区3区| 亚洲最新a在线观看| 亚洲高清综合网| 99re这里只有精品3| 中文字幕日韩人妻视频| 久久久一区二区三区麻豆| 婷婷四五区| 1000部熟女视频在线观看| 亚洲免费97免费| 26UUU欧美日本| 色色综合97| 国产小u女在线观看| 国产又粗又长又大的视频| 亚洲城人男人的天堂| 亚洲综合另类小说色区亚洲成av人片在www | 久久同城AV| 91校园春色长篇| 激情天天视频| 91美女精品| 欧美精品 - 91爱爱| 69精品久久久久中文字幕| 91亚洲影视| 97久久久精品| 天天综合亚在线| 丝袜美腿av女优在线| 亚州色图片在线色| 久久久久久久久久久久久久久性生活视频 | 久久这里只精品免费福利| 土豪酒店各种姿势玩弄极品幼稚| 福利风月五月天影院| 亚洲欧洲日韩国产自在线| 黄骗免费网站| 清纯唯美综合| 久草毛片| 国模久久在线| 本道在线| 国产高清不卡视频| 久热久一区二区三区| 一区二区娱乐网站| 97精品熟女少妇一区 | 天天躁日日躁AAAAXXXX国产| 国产精品噜噜噜日日日| 欧美同性恋 的搜索结果 - 91n| 亚洲成人色情五月天丁香花| 天堂资源欧美| 91女网站| 一区二区首页| 日本精品人妻少妇一区二区| 久久女人一区二区三区| 天天弄天天操| 日本高清电影欧美色图| 99热这里只有精品9| 亚洲性爱无码乱伦av| 亚洲日韩视频二区| 日韩av不卡在线看| 91国产美女丝袜足交精品视频| 中国少妇啪啪视频| 黄片免费久久久久久久| 91天天综合日韩欧美| 一本一道久久综合久久| 熟妇女伦乱视频| 欧美92| 狠狠入| 999国产精品999久久久久久| 欧美国产操逼| 亚洲性图91| 成人在线永久| www.高清无码诱惑一区.com| 天天享受天天看| 女一区二区| 欧美超碰96| 色哟哟的毛片| 亚洲另类久操网| 嗯啊不要啊啊在线观看视频| 啊嗯好大视频在线观看| 男人把坤坤插入女人的下体| 是还免费视频1727我| 人妻激情在线视频| 9九九国产| 日本亚洲嫩草影院啪啪| 测评在线观看AV| 18禁止看精品中文字幕| 国产福利影视| 综合久久婷婷| 97欧美精品综合| 日本久久综合| 无套后入双马尾| 亚州男人天堂| 亚洲精品美女久久久久久久久| 亚洲国产欧美中文永久| 欧美在线官网| 日日日大屁股骚女人精品| 中文字幕av片| 国产精品九九九| 肉嘟嘟www视频在线观看高清| JULIA一区二区三区在线播放| 国产日本熟女顶级一区二区三区视频| 综合 青草 伊久久 影院 综合| surenchaopeng| 夜夜国自区| 国产精品不卡高清在线观看| 久久久久久AⅤ无码免费肉站 | 日本www操操操| 超碰久热| 97se综合| 蜜臀久久99精品久久久| 国产亚洲精品av一区| 99自拍视频在线观看| 亚洲熟妇丝袜在线观看| 超碰综合97在线| 曰韩中文人妻视频| 欧美性生活综合| 91 丝袜在线| 放黄片放3级黄片没穿衣服| 人人看欧美性爱| 欧美熟爽综合| 久久久久久综合久久伊人蜜月| 五月天久久综合网| 色九九九九久| 婷婷五月天色网| 91操操操操| 激情久久av一区av二区av| 欧美页片| 亚洲成人黄色在线观看| 男人天堂2019亚洲| 一卡二卡三卡| 午夜福利免费精品视频| 蜜臀亚洲综合一二三四区| 亚洲日韩天堂| 久久久激情| 91超碰在线播放| 岛国A V在线免费看| 少妇蜜汁| 国产女同在线观看视频| 97九色人妻| 日本布卡一区二三区| 国产探花精品在线| 亚洲黄色网址| 国产精品久久久久久片| 裸体美女久久久| 日韩有码 一区二区三区| 日韩美一区| 日本 情色 1区| 人、人、摸,人、人、草| 伊人久久大香线蕉亚洲五月天,青草青草欧美日本一区二区,欧美日产欧美日产国产 | 亚洲色人妻综合| 嗯嗯啊啊啊好爽| 操逼操网| 青青操日韩| 大香蕉综合| 97爱b| 翔田千里爆乳巨臀无码| 国产第11页| 超碰国产精品久| 国产精品久久久久久久AV大片| 亚洲精品一二三四区| 亚洲影院成人| 嫩草 人人网精品| 色吧5亚洲| 久噜噜| 国产在线精品偷| 青青草华人在线欧美在线| 国产超碰| 俄罗斯及免费在线看| 色噜噜国产在线| 一起草三级AV电影在线观看 | 日本女人久久久| 婷婷久草一区二区三区| 永久电影三级在线观看| 日韩无码AB| 91操人| 日本二区不卡| 97色97好| 五月丁香激情综合网| 亚洲丝袜诱惑| 四虎免费视频| 91麻豆天美国产欧美| 另类图片欧美激情综合| 黑丝少妇麻豆| 黄色av一区二区在线| 东京热天堂网| 亚洲成人妻日韩在线| 国产激情综合| 51久久夜色精品国产麻豆| 夜夜操中文字幕| 九九亚洲| 中文字幕日本久久| 国产亚洲色停停久久99精品91| 久久骚少妇| 色噜噜狠狠色综合日日| 乱伦一区二区三区‘| 中文字幕乱妇免费视频| 97频视在线| 欧美亚洲综合色| av天堂天堂av日韩| 欧美国产婷婷久久| 第45页一区二区| 深田咏美亚洲精品福利社| 亚洲天天操| 综合久欧洲| 人妻嗯啊啊在线播放| 自拍视频一区在线观看| 人乳av| 久久久国产精品人妻丝袜| 97最新在线播放视频| 精品视频在线观看精品| 亚洲人妻精品一区二区| 懂色影视久久| 好舒服视频| 少妇诱惑视频| 四虎影视在线| 国产 日韩 欧美 人妻 熟女 中文 69人妻精品一区二区绯色 | 狠狠91| 欧美性爱一区二区三区| 日本熟女中文字幕一区| 狼狼色丁香久久婷婷综合五月| 天天色欧美| 97精品一区| 欧美在线综合| 久久伊人青青草| 熟女色图在线| 夜夜操夜夜爽夜夜高潮| 国模限制级电影| 亚洲成av人片色午夜乱码| 人人操人人摸人人看人人插| 欧美成人免费在线观看| 男女一进一出视频久久| 精品一区二区三区麻豆| 日韩欧美蜜桃精品久久中文字幕久久| 老女人91| 岛国天天午夜影院传媒网| 亚洲欧美日韩国产丝袜自拍中文| 亚洲AV小说| 亚洲性爱高潮影院| 麻豆视频test| 亚洲成人精品久久久| 久草视频制服诱惑| 少妇内射www在线观看视频| 日韩国产十八禁| 久久超碰免费的| 5252色欧美在线| 欧美天堂日韩三级国产传媒| 成人A片男人的天堂| 欧美天堂超碰97| 麻豆一区在线| 人妻无码视频一区二区三区久久| 日本不卡免费二区| 鸥美中出| 操日韩第| 国产高清精品福利| 色啪网| 中文字幕在线观看AV| 婷婷五月天久久精品视频一区二区三区| 玖玖人人爱| 亚洲成人一二三区| 天天干夜夜肏| 熟妇女伦乱视频| 国产精品免费久久久久久久久久| 激情黄色片在线观看| 在线岛| 日本在线视频导航| 97天天爽| 中文字幕乱偷人妻久久艾草网| 无码九九| 国内亚洲高清无码| 国产AV久久久蜜爱影集| 亚洲色图20p| 激情小说亚洲视频| 97碰久久| 色色色欧美| 国产农村一一级特黄毛片| 偷拍欧美激情| 亚洲文学偷乱拍啪啪啪啪| 极品肉射| 久久精品中文字幕无码l| 女人爽到高潮潮喷18禁网站| 96AV久久久| 日韩青久久| 三男一女不戴套的A片| 黄在线| 青青草原人妻| 久久久久幕乱码| 精品国产一区二区三区在线播出| 色五月婷婷五月天| 色香综合天天影视综合| 欧美Ⅴ性爱| 亚洲色图欧美视频| 欧美色日本| 久久久日本电影| 丰满精品人妻少妇久久字幕| 啊啊啊啊啊啊啊啊视频| 激情视屏国产乱伦强奸| 青春草A| 成人小电影网站tex| 老司机深夜影院18未满| 国产精品乱人伊人网| 欧美操逼录像国产黄色国产| 涩涩这里只有精品视频| 亚洲无套久久嗯嗯| 青草地一本线一区二区三区| 色综合久| 啊啊啊啊在线播放| 国产偷拍网站| 综合国产97| 日韩综合97p| 探花一区在线| 女上位精品在线| 国产无码精品高清| 欧美se亚洲| 狠狠操狠狠操操| 99无码视频| 亚洲午夜蜜臀| 最近的最新的中文字幕视频| 大干人妻| 在线国产探花| 97在线播放| 9999免费精彩视频| 熟妇高潮二区三区| 手机看av网站在线看| 青青操视频在线| 国产综合色精品在线观看| 国产熟女少妇一区| 午夜舔阴达高潮视频免费看| 精品国产乱码久久久久久久久1 | 人妻精品一区二区全免费| 我要色综合网| 天天色粽合合合合合合合| 日本黄色精品| 中文字幕精品丝袜| AV一区观看| 天天天天天天天天综合| 99久久婷婷丁香| 男人的天堂久久狠| 欧美大香蕉专区网| 亚洲Av诱惑| 熟妇在线视频一区二区| 黄片视频观看| 日韩电影天堂视频一区二区| 欧美v亚洲v日韩v最新在线二区| 亚洲天堂电影网| 蜜乳av一区二区| 成人久久久精品| 丝袜熟女一区二区三区| 超碰97日韩| 超碰亚洲欧美日韩无| 99国产在线 精品 视频| 国产精品乱码久久| 亭亭在线资源| 人妻密肉在线观看| 国产99 中文字幕日韩小视频| 伊人久久亚洲色欲综合网站| 长长久久88视频| 亚洲日本激情| 国产伦精品一区二区三区在线观| 久久一区二区蜜桃| 热久久九九热| 婷婷久久五月| 日韩成人在线性爱视频| 大香蕉性欧美| 欧美熟妇精品黑人巨大一二三区| 国产99久久99热这里只有精品15 | 亚洲国产精品无码AV久久| 亚熟hd视频在线| 午夜丁香婷婷| 国产精品久久久久久久AV大片| 91视频综合在线| 五月婷婷丁香六月| 欧美大香蕉同搞| 久久久久96| 色91综合网| 亚洲高清在线| 插穴性爱视频在线观看| 9精品久久久久| 人妻爽爽啪视频| 人妻久久久久久久久久久久久久久| 国产色综合亚洲色综合吹潮| 噜噜噜噜久久久精品免费| 午夜精品久久久99| 久久久久久亚洲精品中文字幕人妻| 国产成人亚洲精品无码古代早漏男| 久久αⅴ| 天天干夜夜鈤| 懂色av中文字幕| 精品美女在线视频| http://qxhbdz.com| 91在线精品| 亚洲男人久久综合天堂| 超碰91在线| 久久久久久99999国产精品| 91人妻视频| 丁香五月天婷婷姐| 欧美后进式| 亚洲Av无码成人精品国产| 亚洲欧美日韩免费电影| 中文字幕日韩精品久久| 97香蕉网| 亚洲色天| 青青在线视频日韩欧美| 日本熟妇人妻一区二区三区| 欧美人妻一区二区| 男人天堂免费| 天天热精品| 嗯,啊。舔我逼| 欧美视频激情久久久久久| 天堂日本亚洲欧美| 丝袜性亚洲| 免费农村成人少妇人妻Aa一区二区视频 | 国产日韩精品suv| 2021国产成人精品久久| 人人操人人93| 天堂69亚洲精品中文字| 国产兽交视频在线播放| 欧美大香蕉久| 久久久久久电影| 欧美黄色片在线播放| 亚洲欧美色图小说| 欧美探花网| 日韩成人高清一区二区| 激情小说图片亚洲首页| 自拍偷拍草一草| xxxx网站亚洲精品| 色噜噜人妻丝袜a∨先锋影 | 国产精品免费视频人成| 国产极品一区二区三区三州| 色青青久久影视| 国产伦精品一区二区三区在线观| 亚洲一区二区麻豆影院| 亚洲天堂另类小说男人| 欧美在线55555| 国产一区二区在线播放,久久亚洲精品中文字幕第一区,亚洲精品在线中文字幕视频 | 91中文在线| www黄片免费看com| 99精品视频在线观看| 久草精品热视| 91精品国久久久久久无码| 超碰伊人在线| 91性网| 亚欧高清| 一本一道vs波多野结衣| 丁香五月婷婷色| 亚洲熟女综合| 9997se| 天天看天天日天天操| 久思思热视频在线观看| 欧美成va视频网站| 97天天综合网| 欧美性爱超碰97| a男人的天堂久久一级A毛片| 欧美国产伊人久久久久| 久久久99久9| 综合91网| 国产成年女黄特黄| 最新啪啪视频| 快点操死我| 一本色道久久综合狠狠操| 超碰色综合| 国产呦精品一区二区三区下载| 天天影视网综合少妇| 亚州综合色图| 欧美日本成人一区二区| 亚洲精品人妻吞精av| 国产一区二区三区不卡手机在线| 久男人久久| 无码不卡亚洲成?人片| 最新日产中文在线麻豆| 久久做97| 国产女人视频三四五区| 精品性爱一二三区| 免费观看欧美日韩操逼视频 | 五月天久久综合网| 综合熟女| 好色美女九七第一页| 大香蕉乱级| 99无码视频| 欧美91色| 国产探花精品在线| 欧美老妇综合网| 国产在线激情| 午夜欧美女人操逼| 久久久久国产| 免费日韩黄片| 亚洲综合113页| 久久久久久久9| 综合久久婷婷| 丰满欧美放荡少妇在线| 乱伦av麻豆| 欧美情色贴图| 日本成人A片免费看| 性色avv| 国产精品视频在线观看| 开心婷婷五月| a v网站在线播放| 欧美熟爽综合| 亚洲天堂久久| 少妇毛片久久| 日韩中文字幕二区| 成人羞羞视频国产| 久草五月| 蜜臀AV一区二区三区激情综合| 97就爱干| 国产亚洲性生活视频播放| 國產尤物AV尤物在線觀看| 另类亚洲一区二区三区| 久久人妻熟女一区二区| 久久人妻少妇| 蜜臀在线网站| 日韩丨制服丨中文|在线| 韩国三级一线观看久| 亚洲图片欧美另类综合免费视频大大香| 神马精品视频| 久热婷婷| 黄色片大香蕉| 国产女人与拘做受视频免费| 襙一襙| 欧美碰碰综合色| 乱操9999| 粉嫩av一区二区三区四季| 欧美激情视频一区二区三区不卡| 九热视频| 开心五月激情网| 男男H黄动漫啪啪无遮挡网站| 超碰色综合| 亚洲精品少妇| 丰满人妻一区二区三区免费 | 天天影视射综合网| 色播五月丁香| 丁香五月天堂| 色色丁香| 色色热| 啊啊啊啊啊在线观看网址| 日产狠狠干| 蜜臀av在线播放一区二区三区| 欧美性生活综合| 柠檬AV导航| 亚洲精品啪视频| 欧美日韩性爱视屏免费看了| av一区二区三区 中文| 国产精品免费美女视频| 福利在线黄片| 色婷婷影视| 婷婷五月色| 日韩AV一区二区三区四四| http://qxhbdz.com| 日本免费一区二| wwe 天天干.com| 一级黄碟在线观看| 9999九九九久久久| 精品无人区麻豆乱码1区2区图片| 高颜值美女口爆高潮浪叫| 精品制服美女中文一区二区三区| 综合色欧美| 综合网天天| 无码人妻精品一区二区三区99不卡| 国产福利电影| 日韩一区二区三区四区五区| 五月丁香婷婷综合| 91久久精品国产| 亚乱色| 99色视频| 激情露脸爱| 一区二区三区色综合| 国内精品久9| 日韩超碰97| 51久久夜色精品国产麻豆| 成人三一级一片aaa| 日韩精品1区2区中文字幕| 亚洲天堂99| ss久久| 蜜桃臀一区二区aV| 91欧洲国产成人久久精品网站| 亚洲精品乱码线路中文字幕| 91丨熟女丨丰满熟女| 91色艳| 国产视频小说| 97碰碰色| 国产毛片在线| 久久人人爽人人爽人人片Ⅴ| 中文字幕 一区二区 亚洲无码| 超碰98综合网| 亚洲熟妇A V黑人| 最好看的中文字幕在线2018| 1024人妻| 五月天久久婷婷亚洲| 97超碰精品图片| 亚洲精品成人动漫在线| 婷婷天堂站| 99色日| 亚洲欧美另类图片| 3028国产精品| 91碰碰| 97人妻人人躁人人玩人人| 被窝影院午夜看片无码| 欧美 亚洲 偷拍自拍| 美女的肌被草喷水视频| 亚洲欧美国产精品久久久久久久| 操www| 98一区二区精品| AV高清一区| 色姑娘综合网| 色香蕉影院| 老熟女中文字幕高清| 大象AV在线| 91精品久久久久久77777| 国产盗摄美女如厕大神作品在线观看| 黄色工厂这里只有精品| 色噜噜人妻丝袜a∨先锋影| 国产精品熟妇一区二区三| 无码人妻精品酒店| 99热最新| 成人开心网在线视频| 免费一级a毛片久久久久久鸭绿欲| 亚洲 欧美 91| 国产一二三福利视频网| 人人操人人大香蕉| 欧美 亚洲 综合 制服 另类| 先锋影音av先锋一区| 久久精品99| 免费视频观看60秒| 国内毛片免费h片在线| 熟妇国产免费一区| 欧美大香蕉同搞| 花野真衣| 香蕉综合网| 五月丁香啪啪| 性感美女啊啊啊在线| 无码区蜜乳| a男人的天堂| 精品国模无码| 成人色女网| 国产真乱mangent| 欧美超碰96| 日韩三级伦理中文字幕| 激情五月天色色| 国产91美女视频| 色五月网址| 久久啊啊| 中文伊人大香蕉视频| 97在线视频观看| 色九月综合| 91人妻最真实刺激绿帽| 日韩图区| 精品v日韩欧美国产| 91在线一起| 亚洲成人在线播放| 好吊色综合| 亚洲不卡av在线| 欧美巨大性舒爽顶到了| 人妻精品一区二区全免费| AA级电影三区| 久久人妻无码毛片A片麻豆| 99精品久久久久久久婷婷| 亚洲国产精品久久久久婷婷老年| 日本在线视频导航| 美女黄站| 日韩AV一区二区三区三州三州| 亚洲精品国产熟女久久久久久| 亚州Av天美传媒| 久久香蕉网| 97在线观看免费视频| 人人澡综合涩| 国模无码一区二区三区在线| 麻豆天美在线| 蜜桃久久久久久久| 另类TS人妖一区二区三区| 超碰综合97在线| 天天爽爽爽爽| 久久久久久久九九九九九九| 精品无码一区二区三区| 麻豆人妻精品一区二区| 久久精品国内Av熟女高清| 天天操天天7| 98色网| 午夜操逼不卡| 日韩国产九九精品一区二区三区毛片| 色综合网1| 综合网亚洲| 丝袜美腿射精91| 激情色播| 蜜乳Av成人片网站| 99少妇| 天堂精品小草| 色5月婷婷| 人人 操人人 操人人| 欧美天天综合站| 国产热RE99久久6国产精品首| 香港澳门日本三级网站| 欧美九一精品久久久熟妇| 澳门人妻久久| 少妇滛荡视频| 亚洲无码国产精品久久| 青青草公开在线免费不卡视频| 女同性恋一区二区三区精品视频| 日本黄 R色 成 人网站| 亚欧毛片基地国产毛片基地| 欧美激情高清性猛交| 按摩中文字幕| 最新中文字幕在线亚洲| 人妻9117c| 2017天天插| 久久久精品久久| 欧美色图中文字幕| 美女黄色一级A视频| 无码黑人精品一区二区三区三| w w w.久久精品| 日日干日日摸| 亚洲日韩东京热一区| 少妇毛片久久| 欧洲色| 亚洲精品三区在线观看| 亚洲电影中字一区二区| 亚洲男人的天堂va亚洲男人社| 97干综合网| 精品一久久久| 蜜奶av| 亚洲 欧美 91| 九九AV| 蜜乳AV色欲AVAV无码| 人人操人人插人www| 1000部熟女视频在线观看| 午夜精品久久久久久久久久久久久 | 老熟女阿 国产91| 精品一国2| 亚洲精品欧洲精品| 国产夜夜艹| 殴美,日韩国产伦精品| 狠狠操天天干| 色综合九九| 色牛牛AV| 日韩欧美国产高清视频| 国产精品免费美女视频| 国产一区二区a毛片| 国产成人精品必看 | 国产懂色精品国产av| 国产亚洲精品农村妇女 | 大香蕉92| 91美女国产在线| 精品久久九| 亚洲涩涩| 日韩淫色网| 国产一区二区三区,在线观看观看| 嗯嗯,好大,好爽,好骚| 大香蕉在线视频15| 久久久久骚| 中美日韩毛片| 日日做夜狠狠爱欧美黑人| 精品少妇人妻| 国产成人五月天丁香花| 97天堂| 亚洲精品国产无码高清| 精品一区二区成人| 欧美成人性爱视频大全| 色蜜AV| 青青草在线视频欧美| 天天激色| 97亚洲精品超碰| 中文字幕第9页萱萱影音先锋| 尤物黄色在线观看网站| 精品伊人久久久大香线蕉小说| 99热综合| 久久精品一区| 黑人综合色| 九九碰九九爱97超| 日日噜噜夜夜狠狠视频无| 日本123区操B视频| 国产原创自拍| 一区,二区,三区网站| 日韩精品9999| 人人搡人人肉久久精品| 果冻传媒A片一二三区| 亚洲黄色电影| 国产精品人妻无码久久久互動交流 | 97超碰大| 亚洲精品久久久久毛片A片拉屎 | 亚洲精品久久久久毛片A片拉屎| 秋霞免费无码视频日韩A片| 天天色天天干天天射| 国产精品老师| 国产精品久久久久久夜夜夜| 黑人与人妻| 欧美成人精品一区二区男人蜜臀 | 2020中文字幕在线| 男女啪啪网站免费视频| 亚洲九月丁香| 国产精品久久久久绯色| 色欲久久99精品久久| 日本精品中文字幕视频| 亚洲精品视频在线播放| 欧美精品偷拍| 麻豆视频一区二区| 久久精品国产亚洲AV无码做| 蜜桃色色网站视频三区| 91劲爆| 在线观看不卡一区二区三区| 91GD.COM| 亚洲成人妻日韩在线| 2020久久免费视频| 国产福利精品最新在线| 亚洲天堂情色| 天天射夜夜操| 亚洲色综合| 美女丝袜激情小说| 亚洲一区操| 六月婷激情福利天堂69| 亚洲 欧美 日韩另类 麻豆| 大香蕉www.超碰| 性感女人网页在线观看视频| 有码专区最新中文字幕有码| 亚洲欧综合另类无码一区| 国产二区三区免费视频| 六月婷婷激情| 欧美草草高清日韩视频| 久久久免费的精品| 伊人伊人LD| 18禁无码永久免费无限制| 99热亚洲天堂| 亚洲欧美高清| 狠狠久久亚洲欧美专区| 91情色在线| 国产女人成人精品视频| 蜜桃臀一区二区aV| 欧美少妇性爱网站| 九九自拍伦理| 中国一级操逼视频| 久久超碰98| 涩涩涩综合| 五十路熟女工口 | 一区在线精品中文字幕| 国内精品999| 亚洲超碰97| 日韩99神马视频播放片在线播放| 中文字幕第2页| 91黑丝在线播放| 94色色电影网| 欧美激情总合网| 操一操摸一摸| 成人综合网 欧美| 男女日B国产| 精品久久久久久久久久久久| 超碰国产精品无码| 动漫av中文| 亚洲成人一区二区精品| 天天干1区2区在线| 欧美在线播放aaaa| 九九九九精品精| 玖玖97综合| JIZZJIZZ亚洲女人被躁| 性生活无遮挡纯毛片在线看| 久久中文字幕一区不卡| 午夜福利在线合集| 爆操无码| 青草成人免费视频一COm| 亚洲图片 91| 久久这里只精品免费福利| 日日夜夜青青草母狗| 人人看欧美性爱| 啊啊啊男女| 蜜臀久久99精品久久综合| 国产综合日韩伦理| 麻豆一区在线| 亚洲经典啪啪| 久久色网| 国产亚洲色婷婷99精品91| 蜜乳AV网址| 午夜啊啊| 中文乱码99| 亚洲超碰AV| 国产一二三在线视频五十路| 在线视频一区二区传媒| 18禁的网站在线| 欧美色综合网| 97国伦国色| 首页中文字幕中文字幕免费| 亚洲男人天堂2017| 久久男人网| 六月激情婷婷| 亚洲色婷婷久久91| 色情婷婷久久五月天| 欧美九9 9 9| 国产超碰AV在线精品| 天天操福利视频综合网站| 日韩乱码Av| 91人妻素女| 日本不卡二区| 亚洲交换| 丝袜综合色图| 2024人人操人人摸| 18啪啪手机免费性爱| 一区二区三区一亚洲中文字幕、综合区灬| 欧美精品在线观看| 韩日无码在线观看| 手机看片91人妻| 男人的天堂三级| 日日干夜夜操视频h| 91丨九色丨大屁股| 欧美黄色大片在线观看| 97超碰美女| 强奸乱亚洲| A片大香蕉在线| 久久大香蕉97| 热热热热日日漂亮永久永久国产日| 超碰免费在线| 亚洲国产精品成人无码久久久 | 91亚洲情色| 国产精品久久久久久9999| 日产国产精品中文久久婷婷| 秋霞视频一区二区| 日韩精品在线观看观看| 日韩成人高清一区二区| 亚洲色婷婷综合久久久久中文| 亚州色图欧美| 精品一区96| 人妻熟女午夜精品在线| 精品区国产区一区二区三区| 综合国产影视三级| 精品视频一二三中文| 色网亚洲人| 欧美熟女逼久久久久久| 9999亚洲电影| 91九色丨国产丨爆乳| 96精品在线| a网站免费观看| 3p国产欧美99热| 韩国午夜理伦三级好看| 日韩黄色av中文字幕| 久96热在线观看视频| 亚洲丝袜少妇在线| 9久9久| 午夜操操操| 老鸭窝日丰县女人| 99热日| 久操网在线| 久久日本熟女精品一区| 日少妇亚洲版| 久久111| 超碰午夜在线| 色盈盈影院| 欧美在线伊人色| 特级大荫道BBwBBwBBW| 欧插网站| 中文字幕一区 二 区 三 四 五 区日 日 骚 | 亚洲国产无码精品首页久久久| 激情小说成人日本无码一| 99精品欧美一区二区三区桃色| 一级毛片久久久久久久女人18| 91精品微拍福利| 日韩激情毛片一级久久久| 日日操免费视频| 强奸乱伦AV网址| 大黄片做爱的大的| 国内毛片婷婷六月色| 狠狠操夜夜| 自拍偷拍 日韩无码| 欧美久久伊人| 久久精品亚洲婷婷| 精品人妻少妇| 色97欧美| 综合网亚洲在线| 日日不卡av| 九九热九九| 欧美18老人禁| 国产精品99精品视频网站| 日本一区视频在线观看| 蜜乳AV一区| 色综合网1| 1024香蕉视频| 国产日本熟女顶级一区二区三区视频 | 精品人妻中文字幕4399| 99久久e免费热视| 免费毛片在线播放| 国产精品交换一区二区| 久久久不能久久久久| 啊啊啊不要啊啊受不了了视频在线 | 在线观看十八禁| 91视频成人福利网站在线一区 | 一本大道综合伊人精品热热| 日韩中文字幕宗合在线| 偷拍亚洲情色| 久久久中文| 波多野42部无码喷潮在线观看| 亚洲蜜桃V妇女| 日本免费中文一区二区三区四区| 天堂资源欧美| 狠狠爱AV| 青娱乐啪啪视频| 国产精品ⅴ无码大片在线看.| 欧美性爱视频免费一区一A| 天天天天操| 国产成自自拍在线观看| 久久久青草青青国产亚洲免观精品高清完整版_97久久综合区小说区图片区,国精品 | 无码 黑人一区二区三区| 国产1769在线| 日本不卡高清免v欧美日韩在线观看| 91久久久视| 91欧美www| 人人贴人人摸| 97色色色| 超碰98综合网| 麻豆成人AV|