久久亚洲成a人片熟女精品色一区二区三区|国产精品视频第一精品视频|av天堂热无码手机版|亚洲?v无码久久无遮挡|国产精品偷伦视频免费观看国产|麻豆国产自产精品丰满熟妇|av无码av不卡一区二区|久久亚洲精品中文字

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

BP神經(jīng)網(wǎng)絡(luò)多輸入多輸出回歸與SHAP可解釋分析實戰(zhàn)

BP神經(jīng)網(wǎng)絡(luò)多輸入多輸出回歸與SHAP可解釋分析實戰(zhàn) 簡介這份資源面向需要掌握多輸入多輸出回歸建模與模型可解釋性的機(jī)器學(xué)習(xí)學(xué)習(xí)者和工程人員提供一套基于MATLAB的完整實現(xiàn)方案。內(nèi)容圍繞BP神經(jīng)網(wǎng)絡(luò)展開覆蓋回歸預(yù)測、SHAP可解釋分析以及新數(shù)據(jù)預(yù)測三大環(huán)節(jié)配套Excel格式的多輸入多輸出數(shù)據(jù)集可直接替換數(shù)據(jù)復(fù)現(xiàn)實驗。壓縮包共8個文件包含4個m腳本、3個xlsx數(shù)據(jù)表和1個txt說明文件整體約55KB腳本分別承擔(dān)主流程回歸、SHAP值計算、新樣本預(yù)測與核心函數(shù)封裝等職責(zé)數(shù)據(jù)表則提供訓(xùn)練與待預(yù)測樣本。已有92人學(xué)習(xí)關(guān)注。讀者可借此理解BP網(wǎng)絡(luò)在多輸出任務(wù)中的搭建與調(diào)參思路掌握SHAP方法對特征貢獻(xiàn)的量化解釋流程并學(xué)會將訓(xùn)練好的模型遷移到新數(shù)據(jù)上完成預(yù)測適合作為課程設(shè)計、論文實驗或工程原型的參考模板。1. 從一張“黑箱”預(yù)測表說起B(yǎng)P神經(jīng)網(wǎng)絡(luò)多輸入多輸出回歸到底在解決什么你手里有一批實驗數(shù)據(jù)輸入是 6 個工藝參數(shù)輸出是 3 個性能指標(biāo)領(lǐng)導(dǎo)要你“建個模型既能預(yù)測新樣本又能說清楚哪個輸入影響最大”。這時候單輸出模型要訓(xùn) 3 次每次還得單獨調(diào)參改一個輸入維度就得全部重跑。BP 神經(jīng)網(wǎng)絡(luò)多輸入多輸出回歸就是沖著這個場景來的一個網(wǎng)絡(luò)同時吐出多個目標(biāo)值共享隱含層特征訓(xùn)練一次搞定多目標(biāo)。但純 BP 的預(yù)測結(jié)果沒人敢信因為它是黑箱——SHAP 可解釋分析就是那把撬開黑箱的螺絲刀用博弈論里的 Shapley 值給每個輸入特征分配貢獻(xiàn)度讓你能對著圖說“第 3 個輸入對第 2 個輸出的影響占了 40%”。MATLAB 完整源碼和數(shù)據(jù)意味著你不用從零搭輪子改改數(shù)據(jù)接口就能跑自己的項目。這套組合適合做實驗數(shù)據(jù)回歸、工藝參數(shù)優(yōu)化、多指標(biāo)預(yù)測的工程師尤其是樣本量在幾百到幾千條、輸入輸出維度不超過 20 的場景。下面我把從數(shù)據(jù)組織到 SHAP 解釋再到新數(shù)據(jù)預(yù)測的完整鏈路拆開講中間踩過的坑一并奉上。2. 多輸入多輸出 BP 網(wǎng)絡(luò)的數(shù)據(jù)組織與網(wǎng)絡(luò)搭建2.1 輸入輸出矩陣怎么擺MATLAB 里的行列約定BP 網(wǎng)絡(luò)在 MATLAB 里最容易被數(shù)據(jù)維度搞翻車。feedforwardnet或fitnet默認(rèn)把每一列當(dāng)作一個樣本每一行當(dāng)作一個特征。也就是說如果你有 500 個樣本、6 個輸入、3 個輸出輸入矩陣X應(yīng)該是 6×500輸出矩陣Y應(yīng)該是 3×500。很多人從 Excel 讀進(jìn)來是 500×6直接丟進(jìn)去訓(xùn)練結(jié)果網(wǎng)絡(luò)把 500 個特征、6 個樣本拿去學(xué)訓(xùn)練誤差看著降了預(yù)測全是垃圾。這是血淚經(jīng)驗里排第一的坑。正確的數(shù)據(jù)組織方式如下% 假設(shè) rawData 是 500×9 的矩陣前6列輸入后3列輸出 rawData readmatrix(data.xlsx); % 500×9 X rawData(:, 1:6); % 轉(zhuǎn)置為 6×500每列一個樣本 Y rawData(:, 7:9); % 轉(zhuǎn)置為 3×500每列一個樣本 % 檢查維度 fprintf(輸入維度: %d×%d\n, size(X,1), size(X,2)); fprintf(輸出維度: %d×%d\n, size(Y,1), size(Y,2));這段代碼的核心就兩步讀數(shù)據(jù)、轉(zhuǎn)置。readmatrix是 MATLAB R2019a 之后推薦的表格讀取函數(shù)比xlsread干凈。轉(zhuǎn)置之后size(X,1)是特征數(shù)size(X,2)是樣本數(shù)后面所有操作都圍繞這個約定。如果你用的是.mat文件直接load進(jìn)來后檢查變量名別假設(shè)它一定叫data。提示轉(zhuǎn)置后一定用size打印確認(rèn)別憑感覺。我見過有人轉(zhuǎn)置了兩次等于沒轉(zhuǎn)訓(xùn)練了半小時才發(fā)現(xiàn)。2.2 網(wǎng)絡(luò)結(jié)構(gòu)選型隱含層節(jié)點數(shù)不是越多越好多輸入多輸出 BP 網(wǎng)絡(luò)的結(jié)構(gòu)設(shè)計核心就三個決策幾個隱含層、每層多少節(jié)點、用什么訓(xùn)練函數(shù)。對于輸入輸出維度都在 20 以內(nèi)、樣本量幾百到幾千的問題一個隱含層足夠。理論上有萬能逼近定理撐著兩個隱含層只在函數(shù)復(fù)雜度極高時才需要而且更容易過擬合。隱含層節(jié)點數(shù)的經(jīng)驗公式有好幾個我一般用這個起步nInput size(X, 1); % 輸入維度比如 6 nOutput size(Y, 1); % 輸出維度比如 3 nSample size(X, 2); % 樣本數(shù)比如 500 % 經(jīng)驗公式sqrt(輸入輸出) 調(diào)節(jié)項 nHidden round(sqrt(nInput nOutput)) 5; % 約 8 % 或者用 2*輸入1 起步 nHidden_alt 2 * nInput 1; % 13 % 搭建網(wǎng)絡(luò) net feedforwardnet(nHidden, trainlm); net.trainParam.epochs 1000; net.trainParam.goal 1e-5; net.trainParam.lr 0.01; net.trainParam.showWindow false; % 批量跑的時候關(guān)掉窗口feedforwardnet的第一個參數(shù)是隱含層節(jié)點數(shù)第二個是訓(xùn)練函數(shù)。trainlm是 Levenberg-Marquardt 算法收斂快適合中小規(guī)模網(wǎng)絡(luò)但內(nèi)存占用比trainscg高。如果樣本超過一萬條換trainscg更穩(wěn)。epochs設(shè) 1000 是上限實際訓(xùn)練中如果驗證集誤差連續(xù) 6 次不降trainlm會自動早停這個默認(rèn)參數(shù)是net.trainParam.max_fail 6。goal設(shè) 1e-5 是目標(biāo)誤差別設(shè)太小否則容易過擬合。節(jié)點數(shù)怎么定我的做法是從sqrt(nInputnOutput)5開始跑三次不同隨機(jī)種子看驗證集 MSE 的均值和方差。如果方差大說明節(jié)點數(shù)偏多減 2 到 3 個再試。如果均值高加 2 個。這個過程一般迭代 3 到 4 輪就能找到穩(wěn)定區(qū)間。別用遺傳算法或粒子群去優(yōu)化節(jié)點數(shù)對于這個規(guī)模的問題手動試比自動搜索快。2.3 數(shù)據(jù)劃分與歸一化別讓量綱差異毀了訓(xùn)練多輸入場景下不同輸入的量綱可能差幾個數(shù)量級。比如溫度是 200 到 800壓力是 0.1 到 0.5如果不歸一化梯度下降會被大量綱特征主導(dǎo)小量綱特征幾乎不更新。MATLAB 的feedforwardnet默認(rèn)在訓(xùn)練前自動做mapminmax歸一化把數(shù)據(jù)映射到 [-1, 1]訓(xùn)練后再反歸一化輸出。但這個自動處理有個坑它是在train函數(shù)內(nèi)部做的你拿到的net對象里歸一化參數(shù)存在net.inputs{1}.processSettings里新數(shù)據(jù)預(yù)測時必須手動調(diào)用同樣的歸一化參數(shù)否則預(yù)測結(jié)果完全不對。% 手動劃分訓(xùn)練/驗證/測試集 net.divideParam.trainRatio 0.7; net.divideParam.valRatio 0.15; net.divideParam.testRatio 0.15; % 訓(xùn)練 [net, tr] train(net, X, Y); % 訓(xùn)練集預(yù)測 Y_train_pred net(X(:, tr.trainInd)); % 測試集預(yù)測 Y_test_pred net(X(:, tr.testInd)); % 計算測試集 MSE mse_test perform(net, Y(:, tr.testInd), Y_test_pred); fprintf(測試集 MSE: %.6f\n, mse_test);divideParam的三個比例加起來必須是 1。tr.trainInd、tr.valInd、tr.testInd是訓(xùn)練完成后tr結(jié)構(gòu)體里的索引直接拿來切數(shù)據(jù)最可靠。perform函數(shù)自動處理了歸一化和反歸一化算出來的 MSE 是原始量綱下的。如果你自己手算mean((Y_pred - Y_true).^2)記得先反歸一化否則數(shù)值對不上。注意train函數(shù)每次調(diào)用會重新隨機(jī)劃分?jǐn)?shù)據(jù)想復(fù)現(xiàn)結(jié)果就在train之前設(shè)rng(42)固定種子。3. SHAP 可解釋分析從黑箱里挖出特征貢獻(xiàn)度3.1 SHAP 值在回歸問題里的數(shù)學(xué)含義SHAP 的核心思想來自合作博弈論里的 Shapley 值把每個特征看作一個“玩家”模型預(yù)測值看作“總收益”每個特征分到的收益就是它對預(yù)測結(jié)果的貢獻(xiàn)。對于回歸問題SHAP 值滿足三個性質(zhì)可加性所有特征 SHAP 值之和等于預(yù)測值減去基線值、對稱性兩個貢獻(xiàn)相同的特征 SHAP 值相同、一致性特征貢獻(xiàn)變大時 SHAP 值不會減小。這些性質(zhì)保證了歸因的合理性比簡單的特征重要性排序靠譜得多。對于 BP 網(wǎng)絡(luò)這種非線性模型精確計算 SHAP 值需要遍歷所有特征子集計算量是 2 的 n 次方。實際用的是 KernelSHAP 或 DeepSHAP 近似算法。KernelSHAP 把 SHAP 值計算轉(zhuǎn)化為一個加權(quán)線性回歸問題對每個樣本采樣若干特征子集用模型預(yù)測值擬合。DeepSHAP 則利用神經(jīng)網(wǎng)絡(luò)的反向傳播把 SHAP 值分解到每一層效率更高但要求網(wǎng)絡(luò)結(jié)構(gòu)已知。在 MATLAB 里沒有官方 SHAP 工具箱常見做法有兩種一是調(diào)用 Python 的shap庫通過 MATLAB 的 Python 接口傳數(shù)據(jù)二是自己實現(xiàn) KernelSHAP 的核心邏輯。我一般用第一種因為 Python 的shap庫成熟穩(wěn)定MATLAB 只負(fù)責(zé)訓(xùn)練網(wǎng)絡(luò)和導(dǎo)出預(yù)測函數(shù)。3.2 用 MATLAB 訓(xùn)練網(wǎng)絡(luò)并導(dǎo)出預(yù)測接口要讓 Python 的 SHAP 庫能調(diào)用 MATLAB 訓(xùn)練好的網(wǎng)絡(luò)最干凈的方式是把網(wǎng)絡(luò)導(dǎo)出為可獨立調(diào)用的函數(shù)。MATLAB 提供了genFunction函數(shù)可以把訓(xùn)練好的網(wǎng)絡(luò)轉(zhuǎn)成純 MATLAB 代碼不依賴神經(jīng)網(wǎng)絡(luò)工具箱。% 訓(xùn)練完成后導(dǎo)出網(wǎng)絡(luò)為函數(shù) genFunction(net, bpNetPredict, MatrixOnly, yes); % 測試導(dǎo)出的函數(shù) Y_check bpNetPredict(X); fprintf(導(dǎo)出函數(shù)與網(wǎng)絡(luò)預(yù)測最大差異: %.2e\n, max(abs(Y_check(:) - net(X)(:))));genFunction生成的bpNetPredict.m文件包含了網(wǎng)絡(luò)的所有權(quán)重、偏置和歸一化參數(shù)輸入輸出都是矩陣格式。MatrixOnly設(shè)為yes表示只接受矩陣輸入不接受元胞數(shù)組這樣在 Python 里調(diào)用更方便。導(dǎo)出后一定要用max(abs(...))驗證一下差異應(yīng)該在 1e-10 量級如果大了說明導(dǎo)出過程有問題。接下來在 Python 里通過matlab.engine調(diào)用這個函數(shù)import matlab.engine import numpy as np import shap # 啟動 MATLAB 引擎 eng matlab.engine.start_matlab() eng.cd(rC:\your_project_path, nargout0) # 準(zhǔn)備數(shù)據(jù)X_py 是 numpy 數(shù)組形狀 (n_samples, n_features) X_py np.load(X_for_shap.npy) X_matlab matlab.double(X_py.tolist()) # 調(diào)用 MATLAB 預(yù)測函數(shù) Y_pred eng.bpNetPredict(X_matlab) Y_pred np.array(Y_pred) # 用 KernelSHAP 解釋 # 注意這里需要一個包裝函數(shù)輸入 numpy 返回 numpy def model_predict(X): X_m matlab.double(X.tolist()) Y eng.bpNetPredict(X_m) return np.array(Y).T # 轉(zhuǎn)置為 (n_samples, n_outputs) # 對第一個輸出做 SHAP 分析 explainer shap.KernelExplainer( lambda x: model_predict(x)[:, 0], # 只取第一個輸出 shap.sample(X_py, 50) # 用 50 個背景樣本 ) shap_values explainer.shap_values(X_py[:100], nsamples200)這段代碼的關(guān)鍵點matlab.double把 numpy 數(shù)組轉(zhuǎn)成 MATLAB 能識別的雙精度矩陣model_predict包裝函數(shù)負(fù)責(zé)在 Python 和 MATLAB 之間轉(zhuǎn)換數(shù)據(jù)格式shap.KernelExplainer的第一個參數(shù)是預(yù)測函數(shù)第二個參數(shù)是背景數(shù)據(jù)集背景樣本數(shù)一般取 50 到 100太少會導(dǎo)致 SHAP 值方差大太多計算慢。nsamples200是每個樣本采樣的特征子集數(shù)越大越精確但計算時間線性增長。3.3 SHAP 圖怎么看從 summary plot 到 dependence plotSHAP 分析跑完后核心產(chǎn)出是三類圖summary plot、dependence plot 和 force plot。summary plot 把每個特征的 SHAP 值分布畫成蜂群圖橫軸是 SHAP 值縱軸是特征名顏色表示特征值高低??催@張圖能快速判斷哪些特征重要SHAP 絕對值大、影響方向是什么特征值高時 SHAP 正還是負(fù)。import matplotlib.pyplot as plt # Summary plot shap.summary_plot(shap_values, X_py[:100], feature_names[fX{i1} for i in range(6)]) plt.savefig(shap_summary.png, dpi300, bbox_inchestight) # Dependence plot看第 3 個特征對第 1 個輸出的影響 shap.dependence_plot(2, shap_values, X_py[:100], feature_names[fX{i1} for i in range(6)]) plt.savefig(shap_dependence_X3.png, dpi300, bbox_inchestight)summary_plot的feature_names參數(shù)建議用有物理意義的名稱比如[溫度, 壓力, 流速, ...]別用X1、X2否則圖給領(lǐng)導(dǎo)看的時候還得解釋。dependence_plot的第一個參數(shù)是特征索引從 0 開始。這張圖能看出特征與 SHAP 值的關(guān)系是線性還是非線性如果散點呈現(xiàn)明顯的曲線說明 BP 網(wǎng)絡(luò)捕捉到了非線性效應(yīng)這正是用神經(jīng)網(wǎng)絡(luò)而不是線性回歸的理由。提示SHAP 值有正負(fù)正表示該特征把預(yù)測值推高負(fù)表示推低。summary plot 里如果某個特征的 SHAP 值集中在 0 附近說明這個特征對模型幾乎沒貢獻(xiàn)可以考慮剔除后重新訓(xùn)練簡化模型。4. 新數(shù)據(jù)預(yù)測從單條樣本到批量推理的完整鏈路4.1 新數(shù)據(jù)預(yù)處理的三個必須對齊新數(shù)據(jù)預(yù)測翻車十有八九是預(yù)處理沒對齊。訓(xùn)練時用的歸一化參數(shù)、缺失值處理方式、異常值截斷閾值在新數(shù)據(jù)上必須一模一樣。MATLAB 的genFunction導(dǎo)出的函數(shù)已經(jīng)包含了訓(xùn)練時的歸一化參數(shù)所以只要新數(shù)據(jù)的原始量綱和訓(xùn)練數(shù)據(jù)一致直接調(diào)用就行。但如果你在訓(xùn)練前手動做過缺失值填充或異常值替換新數(shù)據(jù)也得走同樣的流程。% 新數(shù)據(jù)一條樣本6 個輸入 newSample [350, 0.35, 12.5, 80, 2.1, 0.9]; % 直接調(diào)用導(dǎo)出的函數(shù) prediction bpNetPredict(newSample); fprintf(預(yù)測輸出: %.4f, %.4f, %.4f\n, prediction(1), prediction(2), prediction(3)); % 批量預(yù)測100 條新樣本 newBatch rand(100, 6) .* [500, 0.5, 20, 100, 3, 1.5]; % 模擬新數(shù)據(jù) predBatch bpNetPredict(newBatch); fprintf(批量預(yù)測維度: %d×%d\n, size(predBatch,1), size(predBatch,2));注意newSample是 1×6 的行向量轉(zhuǎn)置后變成 6×1 的列向量符合網(wǎng)絡(luò)輸入要求。predBatch是 3×100每列一個樣本的三個輸出。如果新數(shù)據(jù)的某個特征超出了訓(xùn)練數(shù)據(jù)的范圍BP 網(wǎng)絡(luò)會外推但外推可靠性隨超出程度增加而下降。我一般會檢查新數(shù)據(jù)每個特征是否在訓(xùn)練數(shù)據(jù)的 [min, max] 范圍內(nèi)超出 20% 以上的樣本標(biāo)記出來人工復(fù)核。4.2 預(yù)測結(jié)果的置信區(qū)間估計BP 網(wǎng)絡(luò)給出的是點預(yù)測沒有置信區(qū)間。但在工程決策里光有點預(yù)測不夠還需要知道預(yù)測的不確定性。常用做法是集成多個不同初始化的網(wǎng)絡(luò)用預(yù)測值的均值和標(biāo)準(zhǔn)差作為置信區(qū)間的近似。% 訓(xùn)練 10 個不同初始化的網(wǎng)絡(luò) nEnsemble 10; Y_ensemble zeros(nOutput, size(X_new, 2), nEnsemble); for i 1:nEnsemble rng(i * 100); % 不同隨機(jī)種子 net_i feedforwardnet(nHidden, trainlm); net_i.trainParam.showWindow false; net_i train(net_i, X, Y); genFunction(net_i, sprintf(bpNetPredict_%d, i), MatrixOnly, yes); Y_ensemble(:, :, i) feval(sprintf(bpNetPredict_%d, i), X_new); end % 計算均值和標(biāo)準(zhǔn)差 Y_mean mean(Y_ensemble, 3); Y_std std(Y_ensemble, 0, 3); % 95% 置信區(qū)間近似 Y_lower Y_mean - 1.96 * Y_std; Y_upper Y_mean 1.96 * Y_std; fprintf(第一個輸出的 95%% 置信區(qū)間寬度均值: %.4f\n, mean(Y_upper(1,:) - Y_lower(1,:)));這段代碼訓(xùn)練 10 個網(wǎng)絡(luò)每個用不同隨機(jī)種子預(yù)測結(jié)果取均值和標(biāo)準(zhǔn)差。std的第二個參數(shù) 0 表示按 N-1 歸一化第三個參數(shù) 3 表示沿第三維集成維度計算。置信區(qū)間寬度反映了模型在這個樣本上的不確定性寬度大的樣本建議人工復(fù)核。這個方法的計算成本是單網(wǎng)絡(luò)的 10 倍如果訓(xùn)練一個網(wǎng)絡(luò)要 5 分鐘集成就要 50 分鐘適合離線批量預(yù)測不適合實時推理。4.3 把預(yù)測和 SHAP 解釋串成一條流水線實際項目里新數(shù)據(jù)預(yù)測和 SHAP 解釋往往需要一起交付。比如給一批新樣本既要預(yù)測值又要知道每個樣本的預(yù)測主要受哪個特征驅(qū)動。這時候可以把預(yù)測和 SHAP 分析串成一個腳本輸入原始數(shù)據(jù)輸出預(yù)測表加解釋圖。% 完整流水線新數(shù)據(jù)預(yù)測 SHAP 解釋 function [Y_pred, shap_values] predictWithExplanation(X_new, model_path) % 加載導(dǎo)出的預(yù)測函數(shù) addpath(model_path); % 預(yù)測 Y_pred bpNetPredict(X_new); % 導(dǎo)出新數(shù)據(jù)供 Python SHAP 使用 writematrix(X_new, X_new_for_shap.csv); writematrix(Y_pred, Y_pred_for_shap.csv); % 調(diào)用 Python 腳本做 SHAP 分析 system(python run_shap_analysis.py); % 讀取 SHAP 結(jié)果 shap_values readmatrix(shap_values.csv); fprintf(預(yù)測完成SHAP 分析完成\n); end這個函數(shù)把 MATLAB 預(yù)測和 Python SHAP 分析串起來中間用 CSV 文件交換數(shù)據(jù)。writematrix和readmatrix是 MATLAB 里最穩(wěn)定的 CSV 讀寫函數(shù)。system調(diào)用 Python 腳本時確保 Python 環(huán)境里裝了shap、numpy、matlab.engine等依賴。如果 Python 腳本報錯MATLAB 這邊不會自動捕獲建議在system調(diào)用后檢查返回狀態(tài)碼。注意system調(diào)用 Python 時工作目錄要和 Python 腳本里讀寫文件的路徑一致否則會找不到文件。我一般用絕對路徑省得排查路徑問題。5. 避坑與排查多輸入多輸出 BP SHAP 的五個高頻翻車點5.1 訓(xùn)練集 MSE 很低但測試集 MSE 爆炸現(xiàn)象訓(xùn)練完看tr.best_perf是 1e-6 量級但拿測試集一算 MSE 是 0.5差了五個數(shù)量級。原因過擬合。隱含層節(jié)點太多、訓(xùn)練輪數(shù)太多、樣本量太少三者占一個就會這樣。解決先減隱含層節(jié)點從sqrt(nInputnOutput)5減到sqrt(nInputnOutput)再把max_fail從 6 降到 4讓早停更激進(jìn)如果樣本確實少用trainbr貝葉斯正則化替代trainlm它自帶正則項抗過擬合能力強(qiáng)。5.2 SHAP 值全為正或全為負(fù)現(xiàn)象summary plot 里所有特征的 SHAP 值都在零線同一側(cè)看起來每個特征都在推高或推低預(yù)測。原因背景數(shù)據(jù)集選得不對。KernelSHAP 的基線是背景數(shù)據(jù)集的平均預(yù)測值如果背景數(shù)據(jù)集和解釋數(shù)據(jù)集分布差異大SHAP 值會整體偏移。解決背景數(shù)據(jù)集從訓(xùn)練集里隨機(jī)采樣別從測試集或新數(shù)據(jù)里采。樣本數(shù) 50 到 100 之間太少方差大太多計算慢。另外檢查model_predict函數(shù)返回的維度是否和shap_values期望的一致多輸出時只取一個輸出做解釋。5.3 新數(shù)據(jù)預(yù)測結(jié)果全是 NaN現(xiàn)象bpNetPredict(newSample)返回 NaN。原因新數(shù)據(jù)里有 NaN 或 Inf。BP 網(wǎng)絡(luò)的矩陣運算遇到 NaN 會傳播到整個輸出。解決預(yù)測前檢查any(isnan(newSample))和any(isinf(newSample))有的話先填充或剔除。另外檢查新數(shù)據(jù)的量綱是否和訓(xùn)練數(shù)據(jù)一致如果訓(xùn)練時輸入是 0 到 1新數(shù)據(jù)是 0 到 100歸一化后可能超出 [-1, 1] 范圍但不會產(chǎn)生 NaN只會預(yù)測不準(zhǔn)。5.4 MATLAB 和 Python 數(shù)據(jù)交換時維度對不上現(xiàn)象Python 里matlab.double(X.tolist())傳過去后 MATLAB 報維度錯誤。原因tolist()把 numpy 數(shù)組轉(zhuǎn)成嵌套列表matlab.double默認(rèn)按行優(yōu)先解釋而 MATLAB 是列優(yōu)先。如果 numpy 數(shù)組是 (n_samples, n_features)轉(zhuǎn)過去 MATLAB 看到的是 (n_features, n_samples)正好轉(zhuǎn)置了。解決在 Python 里轉(zhuǎn)置一下matlab.double(X.T.tolist())或者在 MATLAB 里再轉(zhuǎn)置一次。我一般約定 Python 端傳轉(zhuǎn)置后的數(shù)據(jù)MATLAB 端不再轉(zhuǎn)減少混亂。5.5 genFunction 導(dǎo)出的函數(shù)預(yù)測結(jié)果和原網(wǎng)絡(luò)不一致現(xiàn)象bpNetPredict(X)和net(X)的結(jié)果差很多。原因genFunction默認(rèn)不包含歸一化參數(shù)或者導(dǎo)出時MatrixOnly設(shè)成了no。解決導(dǎo)出時明確指定MatrixOnly, yes并且檢查生成的.m文件里是否有mapminmax_apply和mapminmax_reverse的調(diào)用。如果沒有說明歸一化沒導(dǎo)出需要手動在genFunction之前設(shè)置net.inputs{1}.processFcns和net.outputs{2}.processFcns確保包含mapminmax。導(dǎo)出后必須用max(abs(...))驗證差異大于 1e-8 就要查。6. 進(jìn)階技巧用 SHAP 交互值定位特征協(xié)同效應(yīng)單特征 SHAP 值只能告訴你每個特征獨立貢獻(xiàn)了多少但多輸入場景下特征之間的交互效應(yīng)往往才是關(guān)鍵。比如溫度高時壓力對輸出的影響可能比溫度低時大得多這種協(xié)同效應(yīng)單特征 SHAP 圖看不出來。SHAP 交互值SHAP interaction values能拆解出每對特征的聯(lián)合貢獻(xiàn)計算量是單特征 SHAP 的 n 倍n 是特征數(shù)6 個特征就是 6 倍還能接受。在 Python 的shap庫里有兩種方式算交互值。一是shap.TreeExplainer自帶shap_interaction_values方法但只支持樹模型。BP 網(wǎng)絡(luò)得用KernelExplainer加shap_interaction_values函數(shù)計算更慢但通用。# 計算 SHAP 交互值只對前 20 個樣本計算量大 shap_interaction explainer.shap_interaction_values(X_py[:20]) # shap_interaction 形狀: (n_samples, n_features, n_features) # 對角線是單特征 SHAP 值非對角線是交互值 # 提取第 0 個樣本的第 2 和第 4 個特征的交互值 interaction_2_4 shap_interaction[0, 2, 4] print(f特征3和特征5的交互 SHAP 值: {interaction_2_4:.4f}) # 畫交互熱力圖 import seaborn as sns mean_interaction np.mean(np.abs(shap_interaction), axis0) sns.heatmap(mean_interaction, annotTrue, fmt.3f, xticklabels[fX{i1} for i in range(6)], yticklabels[fX{i1} for i in range(6)]) plt.title(SHAP Interaction Heatmap) plt.savefig(shap_interaction.png, dpi300, bbox_inchestight)shap_interaction_values返回一個三維數(shù)組第一維是樣本第二維和第三維是特征對。對角線元素就是單特征 SHAP 值非對角線元素是交互值。熱力圖里顏色越深表示交互效應(yīng)越強(qiáng)。如果發(fā)現(xiàn)某對特征的交互值很大說明這兩個特征對輸出的影響不是簡單疊加而是有協(xié)同或拮抗。這時候可以在工藝上重點關(guān)注這兩個參數(shù)的匹配關(guān)系而不是單獨調(diào)一個。我一般會把這個熱力圖和工藝知識對照如果兩個特征在物理上確實有關(guān)聯(lián)比如溫度和壓力在熱力學(xué)上耦合那 SHAP 交互值大是合理的說明模型學(xué)到了真實規(guī)律如果兩個特征物理上無關(guān)但交互值大可能是數(shù)據(jù)里的偽相關(guān)需要檢查采樣過程是否有偏差。最后一個習(xí)慣每次跑完 SHAP 分析我都會把shap_values和原始數(shù)據(jù)一起存成.mat文件命名帶上日期和模型版本。因為 SHAP 計算耗時下次想復(fù)現(xiàn)某張圖不用重跑。這個習(xí)慣幫我省了至少幾十個小時的重復(fù)計算。希望幫到你。本文還有配套的精品資源點擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
樱花蜜乳av| www超碰| 2017大香蕉国产精品久久| 麻豆久久一区二区三区| 麻豆精品A片免费观看| 九月丁香婷婷| 亚洲人妻在线精品| 久草在| 精品伊人久久久大香线蕉小说| 精品一区二区三区四区外站 | 一区二区三区探花在线观看| 999热日韩精品| 精品久久久av| 欧美十八禁在线看| AVE乱伦| 性感美女啊啊啊在线| 中文字幕在线观看丝袜| 九九黄色视频在线观看| 在线 亚洲 网爆 自拍| 日韩欧美中文日韩欧美色| 亚洲在线观看| 天天综和| 午夜呻吟欧美| 啊灬啊灬啊灬好深灬快高潮了动漫-国产字幕国产在线观看-B049AV | 97干在线| 无码78| 大干人妻| 久久超碰av在线| 亚洲另类综合欧美| 日欧操屄视频| 欧美人与性动交a美精品| 欧美欧美啪啪视频| 美女网站黄页| 久久综合久色欧美综合狠狠| 国产美女口爆吞精| 久插综合| 青青草在线成人视频| 日韩午夜精品一区二区三区电影| 亚洲欧美综合区自拍另类| 日本精品五区| 999精品久久久久久久| 97精品中文字幕| 亚洲97p| 天天看少妇| 亚洲成人综合在线| www.久久爱| 亚洲色 国产 欧美 日韩| 中国操逼无码| 99这里只有精品国产| 绯色一区二区三区不卡少妇 | 强奸乱伦大香蕉| 97无码视频在线播放| 日本一区二区不卡| 91色色网站| 精品国产a∨一区天美传媒| 蜜桃狠狠色伊人亚洲综合 | 人妻少妇精品视频一区二区三区| 蜜臀久久99精品久久久久久无删减 | 日韩激情无码影院| 国产精品直播在线观看直播| 日韩欧美性爱电影在线观看| 91啦人妻| 国产黄色在线播放观看| 综合伊人激情| 九月丁香婷婷色| 天天操夜夜操狠很操| 麻花传媒免费网站在线观看| 99综合视频| 色色色色色色色色色色色色色色综合| 日本久久久久久久久| 野狼激情网| 91麻豆天美传媒HD| 天堂av最新电影网| 亚洲色狠| 精品国产一区二区三区四区在线看| 一级性爱视频免费观看 | 久久久新亚洲AV| av在线不卡一区二区三区| 91社操逼| 亚洲AV无码天美传媒一区| 久久久久9久久久久| 一区二区 电影 亚洲| 欧美在线|亚洲| 超碰97丝袜| 国产成人精品无码久久| 九九九久千久久激情蜜桃在线看 | 超碰97亚洲区| 污色区网站| 色色香蕉| 亚洲欧美另类少妇精品| 九九操久久国产免费视频| 日韩有码 一区二区三区| 欧美 亚洲 偷拍自拍| 男人天堂站| 亚洲天堂久久| 白嫩国模丰满一二三区| 国产25页| 国产久久成人| 久久久久久久久久久久久久9999| 操熟女91| 色播丁香| 深夜激情| 120分钟婬片免费看| 美日韩一二三区| 乱抡国产91| 超碰人人妻| 国产综合久| a v网站在线播放| 在线天堂999| 操美女人妻| 亚洲一二三四区机械| 无码人妻系列少妇| 精品区国产区一区二区三区| 老鸭窝黄色视频网站| 色激情综合网站| 丁香五月天社区| 亚洲国产精品久久久男人的天堂| 久久免费少妇| 国产高潮AA片免费看| 天天日天天舔东京热| 亚洲欧美碰碰| 中文字幕永久在线| 一区在线精品中文字幕| 情色av电影| 日本一区二区三区午夜观看| 激情四射五月天| 91搞逼视频| 91超碰碰在线| 久久国产乱子伦精品免费女人| 五月婷婷hd| 日本性爰一道本| 中文字幕一区二区三四五区日日骚| 无码不卡八戒| 精品人妻无码一区二区三区不卡-精品人妻无码一区二区...|精品少妇一区二区三 | 俺去也婷婷| 91人人| 男人干美女| 干干干天天| 久久爱超碰网| 欧美日韩色综合网| 久久同城AV| 乱伦AVxx| A级国产欧美激情在线| 麻豆性爱视频在线播放| 亚洲欧美国产精品久久久久久久| 99热| 黄色小视频日本txt| 搡老女人老熟女91老熟女综合网| 亚洲av总站| 夜嗨影院| se吧提供91精品国产91久久久久久 | 成人性爱美曰韩| 中国少妇啪啪视频| 伊人色综合欧美| 天天影视网综合少妇| 国产日逼视频| 97神马久久| 97在线观看免费视频l| 亚洲一区日韩| 黄色一区二区秘书性感| 伊人网在线点播| 精品网站99999| 天天弄天天操| 人妻系列无码专区中文有码| 日韩熟女操逼| 另类图片综合| 久久久青青草| 久久久女人| 国偷自 一区二区| 欧美午夜精品久久久久久3D| 天天色,天天干,天天干| 性天堂| 超碰色97| 97精品97久久| 久久亚码| 色五月激情AV在线| 亚州中文字幕超碰97| 久久久久久久久久久人妻| 国产成人免费观看在线视频| 国产精品原创巨作?v网站| 天天拍夜夜| 国际精品久久久| 中文无线日韩一区| 懂色AV网| 91第一页| 日韩一级二级三级免费看完整版| 凹凸精品熟女在线观看| 色97干| 青青草一区二区高清无码视频| 午夜福利在线合集| 91精品婷婷国产综合久久| 亚洲国成人情色好看电影| 欧洲综合视频| 天天天天天超碰| 久久九七| 久久九操在线观看| 天天热精品| 久久九九久精品国产尤物|国产精品爽黄69天堂A片潘金莲,国产亚洲精品第一综合 | 啊啊啊啊啊舒服| 天天综合欧美黑人| 欧美啪啪啪91| 成·人免费午夜在线观看| 日躁天天爽爽| 国产强奸乱伦欧美| 日韩黄片影院| 岛园激情| 久久成年精品| 香港久久久| 欧州91高潮| 热99这里有精品综合久久 | 国产黄色小视频网站| 国产精品熟女乱伦| 欧美另类自拍 | 国内三级自拍小视频在线观看| 免费精品99| 亚洲一区二区三区麻豆传媒| 亚洲国产精品久久久男人的天堂| 天天欲望网| 加勒比综合| 在线观看岛国有码| 东京热激情视频一二三区| 香港日本韩国人妇99www.wccm20| 熟女一区二区三区四区| 久久首页| 午夜福利久久久噜久噜久久综合| 啊啊啊啊啊啊啊好爽不要| 99热线麻豆 | 日夜尻逼网| 精品国产Av无码久久久亚洲| 把腿张开老子CAO烂你| 黄色成品网站| 久操在97| 岛国免费视频在线| 色狠狠综合| 人妻熟女一区二区| 激情天天视频| 熟女人妻av在线资源,黄色的资源| 日韩在线97| 美女视频尤物网在线看| 亚洲色综合| 啪啪自拍九九综合| 青青草伊人久久| 狠狠操天天干| 999久久芭蕾| 欧美亚洲图片| 亚洲天堂无码| 久热99999| 成人国产二区三区在线,男女精品。| 婷婷激情五月天小说网| 久久国产99精品72福利| 国产精品久久蜜乳av| 综合自拍| 日韩无码服务区| 亚洲精品a人片在线观看视| 自拍丝袜美腿人妻| 97无码视频在线播放| JULIA人妻风俗店中出电影| 色吧5亚洲| 男女啪啪网站免费视频| 人妻中文字幕精品无码| 99热这里是精品| 色五月网址| 亚洲日韩AV视色| 玖玖综合色| 国产精品3| 啊啊啊啊啊啊在线| 国产黄片在线免费观看| 东京太热久久久| 蜜桃色色网站视频三区| 日韩美女高潮喷水视频| 97久久久久| 国产60页| 极品美女福利在线观看| 十八禁视频网站| 久久久久9久久久久| 中文久久96| 亚洲精品熟妇1区2区3区。| av影片在线观看不卡| 在线免费观看日韩一区| 骚货人妻偷情自拍在线视频| AV高清一区| 超碰九九| 操高情无码| 久久久久久久久久久人妻| 色情婷婷久久五月天| 91色综合| 精品一区二区成人动漫| 亚洲s在线观看| 国产精品毛片| 国内精品a| AV中文在线| 欧美午夜视频| 天天视频网站黄| 风流老熟女一区二区三区l| 老女人爆菊| 欧美色图99| 亚洲小电影免费涩涩成人在线高清 | 欧美成人性爱视频大全| 欧美 亚洲 另类 综合| 性综合网| 怡红院视频在线| 国产2.3.4区| 国产精品一区二区校花| 精品人妻一区二区免费蜜桃| 亚洲日韩天堂| 大色综合网| 欧美精品双插| 无遮挡男女激烈动态图| 91九色精品熟女内射| 久久精品国产久精国产| 久久黄片国产一区二区| 国产天天骚| 人人妻人人澡人人爽久久av| 97色色婷婷| 91视频综合在线| 久久久久久一日韩字幕无码| 91日日| 久久亚洲日韩国产欧| 国产精品嫩草久久久久| 亚洲成人妻日韩在线| 日韩精品资源专区二区| 最新一二三区视频| 天天噜| 超91综合网| 天天日天天看| 中亚av| 亚洲在线91| 97操碰| 啊啊啊慢点| 在线无码操| 极品AV网站在线观看| 制度丝袜99| 人人噜夜夜操| 涩涩这里只有精品视频| 天综合网欧美| 丰满人妻av一区二区三区| 欧美成人色| 天天草夜夜草高潮片| 丁香婷婷激情五月天无毒不卡| 亚洲色欧美| 97国产精品国| 都市久久精品激情亚洲| 性爱欧美五月| 国产91精品福利在线| 国产久久久久影院老熟女| 国产宅男宅女在线观看| 玖玖无码超碰| 国产高清1234区| 激情综合网亚洲| 成人日韩中文字幕| 国产激情在线观看| 蜜臀久久久99久久久久 | 久久成人精品| 午夜a成v人电影| 精品二999| 黄色性爱网网| 大香蕉在线SuP| 丰满少妇乱子伦精品无| 精品国产乱码久久久久久久| 色色色热| 日韩欧美加勒比| 哈哈操电影AV| 久久精品中文字幕无码l| 超碰伊人在线| 99热伊人| 91第一页| 嫩草伊人久久精品| 久久首页| 久久9精品网站| 日韩成人综合网| 国产精品福利视频| 国产成人精品午夜福利| 99热综合| 国产免费黄色一级大片| 97爱啪| 久久天天性久久伊人| AA级电影三区| 少妇熟女视频一区二区三区| 久久人妻办公室视频| 国产欧美在线观看免费观看| 国产欧洲精品亚洲午夜拍精品| 国产尹人在线视频免费| 蜜臀99久| 亚洲无限观看| 人人色97| 色乱二区| 秋霞色色影院| 久久综合久色欧美综合狠狠| 亚洲一卡2卡3卡4卡乱码网站| 看看日B真人视频| 私色综合网| 一级黄色视频网| 97国产精品一区| 大香网伊人久久综合网eew| 大地资源在线观看中文第二页| 午夜性刺激视频免费观看| 强奸熟女一区二区三区| 夜夜爽77777| 亚洲中文一区二区三区| 人妻久久一区二区三区 | 秋霞曰韩R级| 白丝AV| 啊嗯嗯啊好大好爽| 九九热男人天堂| 国产欧美日韩精品中文| 欧美v亚洲v综合v国产v妖精| 久久久精品,3| av久日| 久久侵犯人妻爽爽爽| 国产嫩草精品A88AV在线| 看看小穴| 亚洲综合小说另类图欧美视频激情小说色五月天 | 啪啪视频亚洲第一| 在线a v| 国产主播福利| 丁香五六月啪啪| 大二网站亚洲| 好屌色综合| 另类天堂| 殴美,日韩国产伦精品| 欧美性色欧美| 九草九九九| 好淫网一二三视区| 日韩精品9区| 亚洲精品黑丝| 亚洲骚男同com| 亚洲图片 激情小说| 久久精品国产99国产精品亚洲| 区一二区日韩亚洲乱码av电影| 国产欧美日本亚洲精品| 人妻熟女一区二区三区视频| 91N综合网| 麻豆一区二区AV天美| 天天综合~91| 91福利网在线观看| 欧美躁死她一区二区| 久久亚洲人妻| 久久色一区| www.91色综合| 大香蕉免费中文| 久久精品国产亚洲AV成人直播| 人妻干天天| 91在线免费精品视频| 久热伊人| 亚洲Av诱惑| 久久久三区二区一区| 激情文学 亚洲图片| 亚洲欧美日韩有码| 国产污视频麻豆传媒一区二区| 久久熟女人| 日韩有码一区三区| 夜夜嗨一区二区| 噜噜在线| 嗯嗯啊啊视频在线看| 丁香成人五月天| 97人人模人人爽人人| 欧美亚洲日本视频久久久| 立川理惠无码一区二区| 内射日韩大臀美女| AND人妻系列| 啊啊啊啊啊啊啊在线| 伊人久久久日韩一区| 久久久∴| 久热99| 国产精品麻豆成人av| 国产操逼网站亚洲一级黄色| 精品视频一区二区| 日韩精品资源专区二区| 100啪啪视频大全| 国产三级资源在线观看| 天天色天天干天天射| 黄页网站免费高清在线观看| 在线观看色视频| 乱伦AVxx| 婷婷五月成人| 黄色二级片网站| 91中文精品日韩欧美在线| 欧美页片| 人妻美腿丝袜日韩| 亚洲天堂2020| 日韩偷拍一区二区三区| 中文字幕精品一区二| 嫩呦国产一区二区三区AV| AAAAAAAAA黄片| 中日韩熟女| 色五月婷婷色| 99热综合在线| 超碰中文字幕人妻草一区| 国产后入清纯| 欧综合网| 一本色道久久天天射天天干| 青娱乐国产精品| 欧美日韩亚洲一区二区在线观看| 亚洲AV无码国产成人| 五月综合色| 久久9 9 9精品| 欧美 熟女 日韩| 亚欧中文字幕在线视频| 久久↗↗| 久久久久97| 人人操人人插人www| 精品黑人一区二区| 91狠狠综合久久久久久| 920日本午夜免费| 欧美色图亚州激情| 久久久久久免费电影| 亚洲有薄码区久久在线一区| 欧美日本成人一区二区| 精品亚洲黄色片 国产精品导航一区二区| 国产三级中文有码在线视频| 日本福利社| 偷偷人人精品女女久久| 国产av波波国产精品| 黄色一区二区秘书性感| 日韩无码操逼片| 色综合久久88色综合久久天天| 超踫中文字幕| 成人精品欧洲亚洲| 69一区二区三区| 人人妻人射| 精品视频久久久久九九九九9999| 美女主播色欲91抠b在线播放| 婷婷精品久久av影视| 日本国产欧美一区三区二区| 天天干人妇| 99热精品国产| 性91| 乱伦熟女专区| 加勒比大香蕉视频在线| 激情四射五月天| 91欧美在线| 97国产高清视频在线观看| 国产高清1234区| 黄色大片一区二区密桃丝袜| 好一吊区二区| 国产乱伦性爱区| 男人的天堂2010| 智利AV在线网| 91视频综合| 欧美精品日韩一区二区| 综合网97| 久久免费99精品久久久久久| 久久久久久久久久久久久9999| 日本 情色 1区2区3区| 激情小说日韩无码| 蜜桃色色网站视频三区| 亚洲双插| 操逼视频亚洲| 男人的天堂VA在线| 天天看天天日| 丁香激情五月天| 欧美综合色图片| 亚洲国产高清福利视频| 欧美91精彩| 亚洲精品三区在线观看| 国产农村妇女精品一| 欧美色图91| 51一区二区三区| 黄色乱论网站| 91中文字幕| 亚洲五月丁香花狠狠干一区二区三区| 啊啊啊男女| 久久精品中文字幕无码l| 大香蕉天天看妹子| 日韩 国产 欧美自拍| 熟女丰满人妻一区| 色噜噜狠狠色综无码久久合欧美| 自偷自拍的亚洲视频| 欧美激情久久久久| 免费A V在线播放| 人妻内射一区二区在线视频| 日韩亚洲精品一区二区| 大香蕉宅男伊人| 成人精品久久久午夜福利| 91丝袜美女| 婷婷超| 欧美 中文字幕 一区| 久久视频,这里只有精品| 黄在线| 日韩久草| 日本性爱不卡视频| 啊啊啊啊好大好硬啊啊啊啊啊| 強姦亂倫a| 日本蜜桃| 国产AV久久野战精品| 精品九九九九九九九九九| 国产一级高跟丝袜| 欧美日韩亚洲五月天婷婷| jizzjizz欧美| 天天操狠狠日夜夜干超大胆开放com大香蕉视频在线观看 | 一区二区日韩欧美久久| 天天综合官网| 18一区二区三区| www.yeyecao| 久久久男人的天堂| 欧美成人黄网色网站| 伊人午夜福利视频| 黄色区免费观看中文字幕| 麻豆a'v电影| 九久9精品| 天天欧美| 日本一区二区电影网站| 91在线视频国产网站| 久久天天躁日日躁狠狠躁| 久久精品国产精品一区| 成人A片男人的天堂| 韩国免费播放一级毛片| 天天看片麻豆| 在线国产探花| 久9无限国产| 亚洲宗合电影| 黄色免费网页无码| 国产精品97视频| 97国产超湿| 国产福利视频精品视频| 亚洲性感丝袜诱惑在线观看| www.狠狠操| 亚洲欧洲综合| 极品内射| 欧日a| 欧美日韩亚洲天堂| 国产精品 午夜福利| 操逼1区| 97视频播放| 欧美欲色| 久久曰曰| 日本熟女不卡视频| 国产AV天美传媒一区二区三区| 熟女精品一区二区三区| 国产精品成人久久一区二区三区| 久久久神马影院| 日本欧美成人片AAAA| 一级岛国大片| 嗯嗯嗯啊啊在线观看| 婷婷五月色| 成人精品久久久午夜福利| 伊人久久大香线蕉亚洲五月天,青草青草欧美日本一区二区,欧美日产欧美日产国产 | 91美女国产在线| 另类在线| 青娱乐欧美激情一区二区| 男人的天堂三级| 婷婷日韩一区二区三区中文字幕在线| 人人 操人人 操人人| 视频在线中文字幕| 男人天堂2019亚洲| 精品国产人成在线| 97超碰色| 欧美淫乱视频| 成人热久久精品| h在线看免费版在线看| 亚洲激情综合另类男同| 9 1果冻精品视频| 91 国产丝袜在线放观看| 唐山老熟妇露脸啪啪叫| 亚洲本色精品一区二区久久| 久草在| 91女在线观看| 欧美一区二区三区日韩| 色欲三区| 天天插网| 快播久久人人aV| 97日视频| 曰韩欧美国产传媒麻豆第一区| 国产三区免费在线观看| 69国产对白刺激| 狠狠躁伊人中文字幕| www.男人天堂| 激情文学 国产一二三aV| 五月色网| 欧美成人性爱视频免费观看| 亚洲人妻中文在线视频| 一区二区三区看视频| 欧美一区二区三区黄色影视| 99re这里只有精品3| 色婷久久| 久久一级无码精品毛片6| 91天美免费| 97精品视频免费| 久久久久久久一级黄色打同平台| 欧美日韩国产色图在线| 熟女五十路一区二区三| 高潮毛片无遮挡高清免费| 亚洲男人电影天堂| 超碰色97| 国产suv精品一区| 久久男人网| 后入 亚洲 美女 射| 五月天色综合| 久久久久久久久久8888| 九月激情婷婷| 中国AV美女| 欧美精品三级黄片| 亚洲情色欧美| 69久久| 超碰久超碰久| 十八禁黄色| 久久激情视频| 欧美日韩97在线| 亚洲偷拍欧美激情| 国产偷人妻精品一区二区在线| 国产精品视频电影| 人妻熟女一区在| www99热| 狠狠操狠狠爱| 屁股久久久久久| 亚洲精品国产拍免费91在线| 肉丝中文无码高清| 亚洲青青草| 60秒免费视频| 色综合20p| 高清肉丝中文无码| 亚洲和欧美裸体美女双飞视频| 台湾佬激情综合| 91蜜臀熟女| 亚洲不卡AV在线| 人人天天欧洲| 日本高清一区二区在线| 亚洲欧美日韩夜夜| 翔田千里av一区二区三区| 亚洲欧美精品福利在线| 免费一级视频特黄色大片| 丁香五月激情综合| 久久,精品一二三| 色av中文字| 人人色人人射人人妻| 久久超碰亚洲人| 欧美色一二三| 龙兴卡官方查询| 欧美亚洲清纯| 97在线看| 黑人精品XXX一区一二区| 人人干黄色| 精品人妻一区二区视频| 人妻99p| 国产成人久久久精品免费AV| 超碰国产在线| 激情六月婷婷| 黄页大片在线观看| 亚洲精品天天影视综合网 | 天天操天天谢| 精品国产乱码久久久久久免费| 另类小说欧美激情校园春色| 啊啊啊好想要| 成人无码电影在线观看网| 99久久精品国产高潮| 色婷婷五月综合激情中文字幕| 色播丁香| 96AV久久久| 亚洲综合校园春色| 中国91AV| 欧洲性爱无码区| 黑人精品XXX一区一二区| 精品伊人久久久大香线蕉小说| 91狠狠综合久久| 一区久久久二区| 久久一本大香蕉 | 久久久久久亚洲精品不卡人乳| 亚卅熟女乱色| 日本美女性生活久久久久久久| 二对二中文字幕。| 综合大香蕉美。| 91综合熟女| 国产精品懂色tv影视免费观看| 一级黄色性爱A级片| 激情五月天色色| 黄色污污污污污污网站| 国产精品电影推荐| 日韩九九九| 91人妻最真实刺激绿帽| 色官网在线| 欧美亚男人的天堂| AV色五月| 热思思免费视频| 人妻22p| 在线视频一区二区传媒| 久久久一二三四区| 天天干18禁| 99久在线精品99re8蜜桃| 国产精品高潮呻吟av久久4虎| 人人操人人大香蕉| 国内精品久久国产,www香蕉久久五月丁香,亚洲欧美日韩精品永久在线,日本精品一 | 9久精品| 亚洲欧美日韩有码| 一本久久久精品| 伦激情人妻另类人妻| 成人 日韩欧美一区| 日韩精品怡红院| 特色a在线上| 亚洲一欧洲中文字幕在线| 夜夜狼人妻| 蜜桃天美传媒AV一区二区三区| 国产兽交视频在线播放| 五月天综合网| 超碰久久精品| 草草电影院| 国产亚洲中文不卡二区| 丁香五月天婷婷姐| 狠狠爱夜夜| 国产精品永久免费10000| 精品久久99| 激情综合网一盗摄| 国产91av在线播放| 97精彩视频网站| 99re这里只有精品2| 岛国黄| 国产夫妻一区二区| 久久久久久久唑| 久久精品国产免费观看99| 素颜老阿姨乱情色| 男人的天堂va在线| 亚洲高清无码免费观看视频| 国产精品视频电影| 欧日韩一二三f区| 国产AV毛片| 亚洲综合影视| 婷婷五月天色网| 最新三级网址| 懂色AV中文| 国产精品高潮久久久无码| 色色色综合网| 亚洲狠狠入| 中文字幕美女91| 日本久操视频| 天堂性色| 色综合网1| 亚洲啪啪啪啪视香蕉| 啪啪资源网| 久久久久久久久久久久黄色| 国产精品999aaa| 欧美.亚洲.另类.丝袜.制服.诱惑| 伊人宅男大香蕉| 久久久久久AⅤ无码免费肉站| 色男人色天堂东京热| 亚洲精品白浆高清久久久久久| 日本有码久久| 性色aV一区二区三区噜噜| a人欧美综合天堂麻豆| 一本久道久久综合狠狠爱一密臀精| 淫色网综合| 色欧美在线| 国产精品极品美女视频| 伊人久久亚洲中文字幕不卡| 亚洲午夜未满十八勿入网站日本又色又爽又黄| 日韩啪啪啪啪啪| 好涩综合| 天天插天天干| 免费视频97| 日本岛国黄色网址| 九九九九九九精品| 婷婷精品视频| 三及片网站| 五月婷婷六月丁香| 久久伊人影院| 嗯嗯嗯啊啊啊在线免费观看| 九九热AV| 九九成人| 91美| 综合五月天| 老熟女网站| 97久久超碰| 99re在线| 欧美亚洲丝袜美女电影| 伊人久久综合影院精品久久久| 国产精品高潮久久AV| 狠狠操夜夜| 五月天欧美色图| 五月天婷婷成人网| 理论久久婷婷网8| 日日干日日| 国产白丝精品在线观看| 精品四五区| 三级日韩一区二区三区| 久久色一区二区| 日本高清一区二区在线| 欧亚三区动漫| 天天射网| 日韩成年人性爱视频| 久久111| 欧美不卡二区| 亚洲欧美校园| 天美传媒国产原创中文字幕亚洲欧美另类 | 久久人体一区二区| 国产原创剧情在线丝袜| 五十路三区在线| 日韩一区二区熟女| 久久性爱网站| 欧美日韩亚洲天堂| 亚洲图片欧美制度| 一级久久性爱视频| 久久久久99999| 狠狠操一区二区| 久久精品国产亚洲AV无码电影| 色噜噜日韩精品| 另类天堂| 欧美成年人性爱视频免费观看| 久久超碰av在线| 伊人色综合网| 日韩精品一区二区高清| 丰满少妇精品一区二区| 丁香久久| 色在线综合| 久久有码视频| 天天综合香 ld视频| 92人人操人人| 久久久久久久唑| 亚洲色图国产另类| 国产精品美女在线一区| 97bbn| 七久久久| 黄色一区二区秘书性感| 久久国产精品m码| 国产精品久久久久久久免牛肉蒲团| 91超级碰碰| 欧美五十路熟| 啪啪啪亚欧美视频| 成熟熟女国产精品一区二区| 天无日色综合| 亚洲国产高清福利视频| 60秒不遮不挡| 精品国产久久乱码| 狠狠综合网| 欧美日本中字另类在线| 亚洲色图图片| 本道在线| 黑人天8A∨高清网站| 51一区二区三区| 深夜福利黄片| 激情婷婷黑人91| 天天α片| 夜夜嗨一区二区| 成人乱码一区二区三少妇| 丁香婷婷五月| 欧美日韩制服| 1.igao73.com 加入收藏 免费专区 国产精品 中文字幕 日韩精品 欧美精品 精彩 | 成人综合网 欧美| 五月天丁香网| 欧美另类精品xxxx| 丰满人妻一区二区三区免费| 亚拍在线| 青青青青草av在线观看| 黄污污污污| 凸凹视频在线观看| 日韩精品人妻一| 无码高清操逼| 91欧美经典| 亚洲精品蜜桃久久久| 婷婷五月天无码| 国产精品经典一卡久久久| 成人电影一区| 亚州AV无码国产精品| 日韩无码操逼片| 加勒比99999| 久久久久极品| 国产妇女精品视频青青草| 日韩中文字幕熟妇人妻 | 久9综合在线| 欧色性第一页| 超碰人妻久久人妻中文97| 91九色精品熟女内射| 久久黄色性爱视频| 国产1024在线播放| 1240青青草一区二区三区视频天爱| 熟女高潮精品一区二区| 是还免费视频1727我| 夜夜高潮夜夜爽高清视频一 | 先锋激情∨在线视频播放| 张柏芝国产一区在线观看| 九九热精品视频六| 疯操AV| 人妻出轨一区二区三区| 91黑丝在线播放| 丁香五月av| 久久狠狠色噜噜狠狠狠狠97| 中文字幕一区二区无码成人 | 六月丁香啪啪| 亚洲国产无码精品首页久久久| 在线岛国新天堂8| 91av熟女人妻| 日韩电影在线观看网址| 好爽免费视频| 9丨久久九九九| 97亚洲色图| 日韩毛片9| 男人的天堂日韩| 麻豆传媒一区二区在线观看| 色一射色一射| 久久99国产综合精品女同| 欧美黑人XXXⅩ高潮交| 久久久久婷婷| 99久久9| 久热久| 日韩素人无码一区二区三区三州| 天天摸,夜夜摸| 亚洲精品 大香蕉| 激情文学网伊人| 日本精品一区三区| 91啪啪视频| 久久99久久99久久99人受| 五月婷婷六月色| 日本超碰在线国产一区| 26uuu国产| 激情文学网伊人| 骚货人妻偷情自拍在线视频| 蜜臀在线免费观看在线免费观看| 红桃视频高潮| 精品久久久久久久久久久久| 综合av影片| 夜夜夜夜爽| 四虎免费在线播放| 粉嫩av一区二区三区天美传媒| 欧美九九九九九| 日韩欧美性吧婷婷乱伦大香蕉| 成年人黄色视频免费| 91成人高清在线观看| 超碰免费人妻人人| 性爱综合一区二区| 欧美日韩色综合网| 一级毛片久久久久久久女人18| 亚欧视频在线| 国产AV激情无码久久无码| 国产高清26uuu| 96久久精品一二三区色欲| 中出91| 99国产天美| 97精品国产97久久久久久免费| 国产天美传媒精品| 亚洲情色综合网| 欧美性夜| 日韩精品在线放| 男人天堂黄片| 超碰99在线观看| 免费视频在线观看啊啊啊啊啊| 国产熟妇一区二区| 欧美日韩中国x| 清纯唯美综合亚洲| 女人天堂av在线播放| 欧美国产精品| www久| 夜夜嗨AV蜜臀av| 日韩欧亚太美不卡| 爱妻综合网| 色九久| 国产精品美女久久久久AⅤ国产馆| 欧美成人黄网色网站| www色色色com| 蜜臀久久在线视频| 国产深喉| www久久国产精品| 久久高清欧美国产| 久久久9品一区二区三区| 1000午夜黄色| 97免费视频在线| 啊啊啊无码| 欧美日日操| 超碰91在线| 久久有碼| 加勒比色99999| 香伊人在线| 人人色人人操在线| 色婷婷综合久久久久中文一区二区 | 久久97资源 网| 嗯嗯嗯啊啊在线观看| а√天堂资源官网在线资源| 国产人妻天天干精品| 五月丁香亭亭| 好看的久久不射无码影视影院| 九九九九九精品十六| www.人人摸在线视频| 色综合V| 亚洲综合激情五月久久| 色综和网| 国产精品美女| 国产粉嫩出水在线播放| 超碰人人乐97| 欧美色图自拍| 亚洲春色欧美激情自拍| 任你草| 色欧洲97| 国产肏逼网站| 色人久久| 狠狠色婷婷7777久| 亚洲素人网| 人人模人人看| 嗯啊不要啊在线| 97久久国产亚洲精品超碰热| 在线无码视频| 国产欧美精品日韩区二区麻豆天美| 久久熟女久| 日本操逼aaaaa| 蜜桃臀av在线观看| 久久久久久无码人妻中文字幕| 97精品一区二区视频| av优播| 91综合天天| 国产美女高潮叫床视频| 大香蕉伊在线久草麻豆天堂故事| 丝袜视频网国产90| 久久五十路熟女人妻| 亚洲最大黄网| 超碰97亚洲| JIZZJIZZ国产精品喷水| 自拍亚洲综合| 成人性爱AV在线免费观看| 黄色二级片网站| 午夜精品久久久久久久久久久久久| 操逼天美3区| 欧美亚洲丝袜美女电影| 久夜视频| 日韩精品一区二区三区四虎影视| 中亚黄色三级大片| 国产精品嫩草影院免费| 久久仑合| 一级成人性爱| 7月婷婷综合| 日本不卡中文| 日韩A优精品在线观看| 蜜臀99999| 日本色色视频网站| 快点操死我| 一起草三级AV电影在线观看 | 欧美亚洲中文| 亚洲丝袜二区| 五月天婷婷社区| 一区二区三区欧美激情| 色噜噜人妻av中文字幕| 亚洲一区二区精品福利| 人妻素股| 久久精品国产亚洲AV片多多| 亚洲自拍青操视频| 国产综合永久精品日韩鬼片| 亚洲精品97中文字幕| 超碰在线香蕉| 亚洲青色欧美| 日韩免费在线视频观看| 五月黑AⅤ| 91欧| 五月婷婷六月色| 蜜臀久久99精品久久久久久无删减 | 国产超碰国产97| 久久久偷拍| 国产精品色| 美女网站91| 伊人97色天使| www.亚洲黄色| 老司机免费视频在线91| 国产日韩欧美亚洲精品95 | 女上位精品在线| 国产精品久久久久久久久AV大片| 九九九九九九综合| 996热| 天天亚洲| 99热97| 日本性爰一道本| 99热18这里只有精品| 日韩成人电影AV| 97在线免费看视频| 国产传媒1234区| 九月丁香婷婷色| 九九久久国产精品怡红院| 婷婷色导航|