久久亚洲成a人片熟女精品色一区二区三区|国产精品视频第一精品视频|av天堂热无码手机版|亚洲?v无码久久无遮挡|国产精品偷伦视频免费观看国产|麻豆国产自产精品丰满熟妇|av无码av不卡一区二区|久久亚洲精品中文字

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

車規(guī)級(jí)FOTA升級(jí):Linux AB分區(qū)與安全啟動(dòng)信任鏈設(shè)計(jì)

車規(guī)級(jí)FOTA升級(jí):Linux AB分區(qū)與安全啟動(dòng)信任鏈設(shè)計(jì) 1. 項(xiàng)目概述為什么FOTA升級(jí)不再是“刷個(gè)固件”那么簡(jiǎn)單智能汽車的域控制器已經(jīng)不是十年前那個(gè)裝個(gè)單片機(jī)、跑個(gè)裸機(jī)程序的ECU了。它是一臺(tái)嵌入式Linux服務(wù)器——有內(nèi)存管理、進(jìn)程調(diào)度、網(wǎng)絡(luò)協(xié)議棧、文件系統(tǒng)甚至要跑容器和AI推理框架。當(dāng)整車廠說“我們要做FOTA升級(jí)”背后真正要解決的從來不是“怎么把新固件傳上去”而是“如何在不熄火、不丟配置、不中斷ADAS功能的前提下讓車輛在高速行駛中完成內(nèi)核、驅(qū)動(dòng)、應(yīng)用、算法模型的原子化更新”。我做過6個(gè)量產(chǎn)車型的FOTA方案落地最深的體會(huì)是FOTA的本質(zhì)是嵌入式系統(tǒng)的可信執(zhí)行環(huán)境重構(gòu)過程而不是簡(jiǎn)單的文件搬運(yùn)。核心關(guān)鍵詞——FOTA、Linux、AB分區(qū)、安全啟動(dòng)、GPT——每一個(gè)都不是孤立技術(shù)點(diǎn)而是一條環(huán)環(huán)相扣的信任鏈GPT分區(qū)表確保磁盤布局可驗(yàn)證安全啟動(dòng)校驗(yàn)Bootloader→Kernel→Rootfs簽名AB分區(qū)提供回滾能力Linux內(nèi)核的dm-veritydm-snapshot機(jī)制保障運(yùn)行時(shí)完整性而FOTA服務(wù)層只是這條信任鏈上最表層的調(diào)度器。它面向的是車規(guī)級(jí)嚴(yán)苛場(chǎng)景升級(jí)失敗率必須低于0.001%單次升級(jí)耗時(shí)需控制在8分鐘內(nèi)含校驗(yàn)、解包、寫入、重啟、自檢且升級(jí)過程中儀表盤不能黑屏、智駕系統(tǒng)不能降級(jí)為L(zhǎng)0。這不是手機(jī)OTA的平移而是從零構(gòu)建一套符合ISO 21434網(wǎng)絡(luò)安全標(biāo)準(zhǔn)、ASPICE CL3開發(fā)流程、以及國(guó)標(biāo)GB/T 39575-2020《汽車軟件升級(jí)通用技術(shù)要求》的工程體系。如果你還在用rsync同步rootfs或者手動(dòng)dd燒寫鏡像那你的方案連準(zhǔn)入測(cè)試的第一關(guān)都過不了。2. 整體架構(gòu)設(shè)計(jì)與關(guān)鍵技術(shù)選型邏輯2.1 為什么必須放棄傳統(tǒng)單分區(qū)覆蓋寫入模式我見過太多團(tuán)隊(duì)初期用“tar -xf new.tar.gz /”這種粗暴方式做原型驗(yàn)證結(jié)果在實(shí)車路試階段暴雷某次升級(jí)后車輛冷啟動(dòng)時(shí)卡在initramfs原因是ext4日志被意外截?cái)鄬?dǎo)致根文件系統(tǒng)只讀掛載失敗另一次升級(jí)后CAN總線通信異常排查發(fā)現(xiàn)是內(nèi)核模塊ko文件被部分覆蓋加載時(shí)符號(hào)解析失敗。根本問題在于——Linux文件系統(tǒng)不是原子操作介質(zhì)。即使使用sync()強(qiáng)制刷盤也無法保證多個(gè)文件如/lib/modules/5.10.0/kernel/drivers/can/xxx.ko /lib/firmware/can-firmware.bin的寫入順序和完整性。更致命的是升級(jí)過程一旦斷電或看門狗復(fù)位整個(gè)系統(tǒng)將處于不可預(yù)測(cè)的中間態(tài)。我們?cè)y(tǒng)計(jì)過某款量產(chǎn)車前1000次OTA失敗案例73%源于單分區(qū)覆蓋導(dǎo)致的文件系統(tǒng)損壞。因此AB分區(qū)不是“錦上添花”而是車規(guī)級(jí)FOTA的生存底線。它的價(jià)值不在于“多一個(gè)備份分區(qū)”而在于將“升級(jí)”這個(gè)高風(fēng)險(xiǎn)操作轉(zhuǎn)化為“切換啟動(dòng)目標(biāo)”這個(gè)低風(fēng)險(xiǎn)操作。只要A/B兩個(gè)分區(qū)各自保持完整哪怕B分區(qū)升級(jí)失敗下次啟動(dòng)仍能100%回到A分區(qū)的已知可靠狀態(tài)。2.2 GPT分區(qū)表不只是為了支持大容量硬盤很多人以為GPT就是MBR的升級(jí)版用來支持2TB以上磁盤。但在域控制器場(chǎng)景下GPT的核心價(jià)值在于結(jié)構(gòu)化、可簽名、可校驗(yàn)的分區(qū)元數(shù)據(jù)。MBR只有64字節(jié)分區(qū)表無法容納數(shù)字簽名而GPT頭分區(qū)數(shù)組共占用至少34個(gè)扇區(qū)17KB其中分區(qū)數(shù)組每項(xiàng)128字節(jié)包含分區(qū)類型GUID、唯一GUID、起始/結(jié)束LBA、分區(qū)名稱及64字節(jié)的分區(qū)屬性字段。我們正是利用這64字節(jié)屬性字段嵌入自定義標(biāo)志位bit0表示該分區(qū)是否啟用dm-verity校驗(yàn)bit1表示是否為當(dāng)前活動(dòng)分區(qū)bit2表示是否允許被FOTA服務(wù)寫入。更重要的是GPT頭本身包含CRC32校驗(yàn)和且整個(gè)GPT頭分區(qū)數(shù)組可被整體哈希并簽名——這意味著任何對(duì)分區(qū)表的篡改比如惡意工具修改boot分區(qū)起始地址都會(huì)被安全啟動(dòng)流程直接攔截。我們?cè)谀稠?xiàng)目中就遇到過供應(yīng)商提供的燒錄工具會(huì)自動(dòng)清空GPT備份頭導(dǎo)致車輛在產(chǎn)線下線后首次啟動(dòng)時(shí)因GPT校驗(yàn)失敗而進(jìn)入安全模式。解決方案是在燒錄腳本末尾強(qiáng)制執(zhí)行sgdisk --backupgpt-backup.bin /dev/mmcblk0并簽名存檔后續(xù)每次啟動(dòng)前由Bootloader校驗(yàn)備份頭一致性。這比單純依賴主GPT頭可靠得多。2.3 安全啟動(dòng)鏈條從BootROM到用戶空間的逐級(jí)信任傳遞車規(guī)級(jí)安全啟動(dòng)不是“打開UEFI Secure Boot開關(guān)”就能搞定的事。它是一條貫穿硬件、固件、OS、應(yīng)用的四層信任鏈Level 0BootROM固化代碼SoC廠商如NXP S32G、TI Jacinto 7在硅片中固化BootROM其哈希值出廠即鎖定。它只驗(yàn)證第一階段Bootloader如ARM Trusted Firmware BL2的RSA-2048簽名驗(yàn)證失敗則停機(jī)。Level 1ATF/BL31 U-Boot SPL我們采用ARM TF-A作為Secure World入口其編譯時(shí)注入OEM公鑰用于驗(yàn)證U-Boot SPLSecondary Program Loader。SPL負(fù)責(zé)初始化DDR、eMMC并加載主U-Boot鏡像。關(guān)鍵點(diǎn)在于SPL必須禁用所有調(diào)試接口JTAG/SWD且其鏡像需與SoC的OTP fuse key綁定防止被替換。Level 2U-Boot主鏡像與Kernel Image這里最容易被忽視的是Kernel Image的驗(yàn)證粒度。很多方案只驗(yàn)證vmlinuz卻忽略initramfs.cgz。正確做法是U-Boot使用FITFlattened Image Tree格式打包kerneldtbinitramfs整個(gè)FIT鏡像用私鑰簽名U-Boot啟動(dòng)時(shí)調(diào)用verify命令校驗(yàn)整包簽名。我們?cè)l(fā)現(xiàn)某供應(yīng)商提供的Kernel未打包initramfs而是通過root/dev/mmcblk0p3掛載外部分區(qū)導(dǎo)致攻擊者只需篡改該分區(qū)即可繞過簽名驗(yàn)證。Level 3Rootfs完整性校驗(yàn)dm-verity即使Kernel通過驗(yàn)證rootfs仍可能被篡改。我們采用Linux內(nèi)核原生dm-verity機(jī)制在構(gòu)建rootfs時(shí)用veritysetup生成哈希樹hash tree將根哈希root hash寫入initramfs的/etc/verity.conf并在Kernel cmdline中指定rd.verity1 rd.verity.data/dev/mmcblk0p4 rd.verity.root_hashhex。這樣內(nèi)核在掛載rootfs前會(huì)重建哈希樹并比對(duì)根哈希任何塊級(jí)篡改都會(huì)導(dǎo)致掛載失敗并panic。注意必須使用SHA256算法而非MD5且哈希樹需存儲(chǔ)在獨(dú)立分區(qū)如p5避免與rootfs同區(qū)被污染。提示安全啟動(dòng)的調(diào)試陷阱——U-Boot的printenv命令會(huì)顯示所有環(huán)境變量包括bootcmd中硬編碼的啟動(dòng)參數(shù)。但量產(chǎn)時(shí)必須將這些敏感參數(shù)如verity root_hash寫入OTP或eFuse而非僅存于U-Boot env。否則攻擊者可通過setenv bootcmd ... saveenv劫持啟動(dòng)流程。2.4 AB分區(qū)策略不止是A/B而是A/B/C/D的彈性演進(jìn)標(biāo)準(zhǔn)AB分區(qū)A-active, B-inactive能滿足基礎(chǔ)回滾需求但在復(fù)雜域控場(chǎng)景下存在明顯短板問題1升級(jí)窗口期風(fēng)險(xiǎn)若車輛在B分區(qū)升級(jí)中突然斷電B分區(qū)處于半寫入狀態(tài)下次啟動(dòng)雖能回退到A但B分區(qū)殘留垃圾數(shù)據(jù)可能影響下次升級(jí)。問題2多版本并行需求某些車型需同時(shí)維護(hù)3個(gè)版本當(dāng)前穩(wěn)定版A、待驗(yàn)證版B、緊急熱修復(fù)版C。我們的解決方案是四分區(qū)彈性AB架構(gòu)分區(qū)用途特性p1 (boot)U-Boot SPL ATF只讀OTP鎖定p2 (env)U-Boot環(huán)境變量獨(dú)立小分區(qū)防擦寫干擾p3 (A-root)A分區(qū)rootfs啟動(dòng)時(shí)由U-Boot根據(jù)boot_part變量選擇p4 (B-root)B分區(qū)rootfs同上p5 (verity-hash)dm-verity哈希樹存儲(chǔ)區(qū)與rootfs分區(qū)分離p6 (update)FOTA臨時(shí)下載區(qū)大小最大rootfs鏡像×2支持?jǐn)帱c(diǎn)續(xù)傳關(guān)鍵創(chuàng)新在于U-Boot不硬編碼啟動(dòng)分區(qū)而是讀取p2分區(qū)中的boot_part3變量決定啟動(dòng)p3或p4。FOTA服務(wù)升級(jí)時(shí)先將新鏡像解壓到p6再用dd ifp6 of/dev/mmcblk0p4 bs4M寫入B分區(qū)最后執(zhí)行fw_printenv -s boot_part4 fw_saveenv原子化切換。這樣即使寫入p4中途失敗p2中的boot_part仍為3系統(tǒng)必然啟動(dòng)A分區(qū)。而p6分區(qū)采用exFAT格式非ext4因其無日志機(jī)制寫入失敗不會(huì)導(dǎo)致文件系統(tǒng)損壞且支持超大單文件4GB。3. 核心實(shí)現(xiàn)細(xì)節(jié)與實(shí)操要點(diǎn)3.1 GPT分區(qū)表的精準(zhǔn)構(gòu)建與簽名實(shí)踐構(gòu)建GPT不是fdisk交互式操作就能搞定的。我們必須用sgdisk腳本化生成確??芍貜?fù)、可審計(jì)。以下是我們量產(chǎn)項(xiàng)目使用的分區(qū)腳本片段# 清空磁盤并創(chuàng)建GPT sgdisk -Z /dev/mmcblk0 # 創(chuàng)建boot分區(qū)p1存放SPL/ATF/U-Boot大小32MB sgdisk -n 1:2048:32M -t 1:25600000-0000-0000-0000-000000000000 -c 1:boot /dev/mmcblk0 # 創(chuàng)建env分區(qū)p2U-Boot環(huán)境變量大小2MB sgdisk -n 2:0:2M -t 2:C12A7328-F81F-11D2-BA4B-00A0C93EC93B -c 2:env /dev/mmcblk0 # 創(chuàng)建A-root分區(qū)p3主系統(tǒng)分區(qū)大小2GB sgdisk -n 3:0:2G -t 3:0FC63DAF-8483-4772-8E79-3D69D8477DE4 -c 3:a-root /dev/mmcblk0 # 創(chuàng)建B-root分區(qū)p4備用系統(tǒng)分區(qū)大小2GB sgdisk -n 4:0:2G -t 4:0FC63DAF-8483-4772-8E79-3D69D8477DE4 -c 4:b-root /dev/mmcblk0 # 創(chuàng)建verity-hash分區(qū)p5哈希樹存儲(chǔ)大小128MB sgdisk -n 5:0:128M -t 5:0FC63DAF-8483-4772-8E79-3D69D8477DE4 -c 5:verity-hash /dev/mmcblk0 # 創(chuàng)建update分區(qū)p6下載緩存區(qū)大小4GB sgdisk -n 6:0:4G -t 6:0FC63DAF-8483-4772-8E79-3D69D8477DE4 -c 6:update /dev/mmcblk0 # 強(qiáng)制寫入備份GPT頭到LBA 33并生成校驗(yàn) sgdisk -b gpt-backup.bin /dev/mmcblk0 sha256sum gpt-backup.bin gpt-backup.sha256注意-t參數(shù)后的GUID必須嚴(yán)格匹配。例如boot分區(qū)類型GUID25600000-...是ARM64 EFI System Partition標(biāo)準(zhǔn)而rootfs分區(qū)類型GUID0FC63DAF-...是Linux filesystem通用標(biāo)識(shí)。錯(cuò)誤的GUID會(huì)導(dǎo)致U-Boot無法識(shí)別分區(qū)。我們?cè)驈?fù)制粘貼錯(cuò)誤將p1類型GUID寫成C12A7328-...EFI System導(dǎo)致SPL加載失敗調(diào)試耗時(shí)3天。簽名環(huán)節(jié)采用OpenSSL生成PKCS#7簽名# 將GPT備份頭與分區(qū)表合并為二進(jìn)制流 cat gpt-backup.bin /dev/mmcblk0 | dd bs512 count34 ofgpt-full.bin 2/dev/null # 使用OEM私鑰簽名 openssl smime -sign -in gpt-full.bin -out gpt-signed.bin -signer oem-cert.pem -inkey oem-key.pem -binary -outform DER # 燒錄時(shí)BootROM先校驗(yàn)gpt-signed.bin的CMS簽名再解包出gpt-full.bin寫入磁盤3.2 Linux內(nèi)核配置與dm-verity深度定制標(biāo)準(zhǔn)Linux內(nèi)核v5.10已支持dm-verity但車規(guī)場(chǎng)景需針對(duì)性裁剪必須啟用的內(nèi)核選項(xiàng)CONFIG_DM_VERITYy CONFIG_CRYPTO_SHA256y # verity必須用SHA256MD5已被淘汰 CONFIG_CRYPTO_AESy # AES用于密鑰派生 CONFIG_BLK_DEV_DMy # Device Mapper基礎(chǔ) CONFIG_SECURITYFSy # 用于暴露verity狀態(tài)到/sys強(qiáng)烈建議禁用的選項(xiàng)減小內(nèi)核體積提升啟動(dòng)速度# 禁用所有非必要加密算法 CONFIG_CRYPTO_MD4n CONFIG_CRYPTO_MD5n CONFIG_CRYPTO_SHA1n CONFIG_CRYPTO_DESn # 禁用調(diào)試功能 CONFIG_DM_DEBUGn CONFIG_SECURITY_YAMAn構(gòu)建verity哈希樹的關(guān)鍵命令# 假設(shè)rootfs已制作成squashfs鏡像rootfs.sqsh # 1. 創(chuàng)建verity映射表 echo 0 $(blockdev --getsz /dev/mmcblk0p3) verity 1 /dev/mmcblk0p3 /dev/mmcblk0p5 4096 4096 1 sha256 $(sha256sum rootfs.sqsh | cut -d -f1) 0000000000000000000000000000000000000000000000000000000000000000 verity-table.txt # 2. 加載dm-verity設(shè)備測(cè)試用 dmsetup create vroot --table $(cat verity-table.txt) # 3. 掛載驗(yàn)證 mount -t squashfs /dev/mapper/vroot /mnt/test # 4. 生成哈希樹并寫入p5分區(qū) veritysetup format --hash-algsha256 --salt00000000000000000000000000000000 rootfs.sqsh /dev/mmcblk0p5實(shí)操心得veritysetup format生成的哈希樹默認(rèn)使用16KB塊大小但eMMC實(shí)際頁大小為4KB。若不匹配會(huì)導(dǎo)致I/O性能下降30%。解決方案是在format命令中添加--data-block-size4096參數(shù)并確保Kernel cmdline中rd.verity.block_size4096一致。3.3 FOTA服務(wù)層設(shè)計(jì)輕量級(jí)、可審計(jì)、強(qiáng)隔離我們摒棄了復(fù)雜的Yocto-based OTA框架如RAUC采用自研輕量級(jí)FOTA Agent原因有三啟動(dòng)時(shí)間敏感RAUC啟動(dòng)需加載Python解釋器DBus增加2.3秒啟動(dòng)延遲而域控制器從上電到CAN通信建立必須≤3秒內(nèi)存受限車規(guī)MCU通常僅512MB RAMRAUC常駐進(jìn)程占用120MB審計(jì)要求主機(jī)廠要求所有升級(jí)操作日志必須以二進(jìn)制格式寫入專用日志分區(qū)且不可被用戶空間刪除。Agent核心組件fota-daemonC語言編寫靜態(tài)鏈接內(nèi)存占用8MB。監(jiān)聽HTTP端口接收升級(jí)包校驗(yàn)包簽名ECDSA-P256解包到p6分區(qū)。fota-executor升級(jí)執(zhí)行引擎以CAP_SYS_ADMIN權(quán)限運(yùn)行負(fù)責(zé)調(diào)用dd寫入B分區(qū)更新U-Boot env變量觸發(fā)安全重啟echo b /proc/sysrq-triggerfota-audit獨(dú)立進(jìn)程將每次升級(jí)的timestamp|package-hash|result|duration寫入p7audit分區(qū)該分區(qū)掛載為/dev/mmcblk0p7且chattr i設(shè)置不可修改屬性。關(guān)鍵代碼片段fota-executor中安全重啟// 避免普通reboot導(dǎo)致文件系統(tǒng)未同步 sync(); // 強(qiáng)制刷盤 // 關(guān)閉所有CAN/ETH接口防止重啟瞬間報(bào)文錯(cuò)亂 system(ip link set can0 down); system(ip link set eth0 down); // 執(zhí)行安全重啟先關(guān)閉看門狗再觸發(fā)sysrq int fd open(/dev/watchdog, O_WRONLY); if (fd 0) { write(fd, V, 1); // 關(guān)閉看門狗 close(fd); } // 寫入sysrq觸發(fā)硬重啟 int sysrq_fd open(/proc/sysrq-trigger, O_WRONLY); if (sysrq_fd 0) { write(sysrq_fd, b, 1); // 立即重啟不調(diào)用shutdown close(sysrq_fd); }3.4 安全啟動(dòng)調(diào)試與故障注入實(shí)戰(zhàn)量產(chǎn)前必須進(jìn)行100%故障注入測(cè)試。我們搭建了專用測(cè)試臺(tái)架模擬以下典型故障故障類型注入方式預(yù)期行為實(shí)際驗(yàn)證方法BootROM驗(yàn)證失敗燒錄篡改簽名的ATF鏡像SoC停機(jī)LED紅燈常亮示波器捕獲POR信號(hào)確認(rèn)無CLK輸出U-Boot SPL驗(yàn)證失敗修改SPL二進(jìn)制中RSA簽名字段SPL打印Signature verify fail后haltUART日志抓取確認(rèn)錯(cuò)誤碼0x1AKernel FIT驗(yàn)證失敗替換FIT鏡像中任意1字節(jié)U-Boot打印FIT image signature bad檢查U-Boot log buffer確認(rèn)verify返回-EBADMSGdm-verity校驗(yàn)失敗用dd向p3分區(qū)寫入1字節(jié)臟數(shù)據(jù)Kernel panic: device-mapper: verity: Unexpected hash failure串口捕獲panic log確認(rèn)call trace指向dm_verity_ctrAB分區(qū)切換失敗手動(dòng)修改p2分區(qū)中boot_part5非法值U-Boot fallback到默認(rèn)p1啟動(dòng)加載SPL失敗觀察啟動(dòng)日志是否出現(xiàn)Invalid boot partition, using default踩過的坑某次測(cè)試中U-Boot在驗(yàn)證FIT鏡像時(shí)因內(nèi)存不足malloc失敗導(dǎo)致驗(yàn)證函數(shù)返回NULL但U-Boot未檢查該返回值直接跳轉(zhuǎn)執(zhí)行損壞的Kernel造成靜默崩潰。解決方案是在U-Boot源碼中fit_image_load()函數(shù)末尾添加if (!data) return -ENOMEM;斷言并啟用CONFIG_CMD_MEMORY命令便于現(xiàn)場(chǎng)內(nèi)存診斷。4. 常見問題與排查技巧實(shí)錄4.1 升級(jí)后無法啟動(dòng)從BootROM到Kernel的逐層定位法這是FOTA最致命的問題。我們建立了一套五級(jí)定位流程按順序排查L(zhǎng)evel 1BootROM級(jí)硬件層現(xiàn)象上電后無任何UART輸出LED無反應(yīng)。排查用示波器測(cè)SoC的BOOT_MODE引腳電壓確認(rèn)是否處于eMMC啟動(dòng)模式非SPI NOR檢查eMMC CLK/DS信號(hào)是否正常應(yīng)有200MHz方波。常見原因eMMC焊接虛焊、電源紋波超標(biāo)100mVpp。Level 2SPL級(jí)固件層現(xiàn)象UART輸出Starting kernel ...后卡死。排查在SPL源碼中bl31_entrypoint()前插入uart_puts(SPL OK\n)確認(rèn)SPL是否成功跳轉(zhuǎn)。若卡在此處大概率是ATF鏡像與SoC revision不匹配如S32G274A誤燒S32G254A鏡像。Level 3U-Boot級(jí)引導(dǎo)層現(xiàn)象UART輸出U-Boot banner但停在Hit any key to stop autoboot。排查按任意鍵進(jìn)入U(xiǎn)-Boot命令行執(zhí)行 printenv bootcmd # 確認(rèn)啟動(dòng)命令是否指向正確分區(qū) mmc info # 檢查eMMC是否識(shí)別 mmc read 0x80000000 0x100 0x10 # 讀取GPT頭確認(rèn)分區(qū)表有效 fatls mmc 0:1 # 列出boot分區(qū)文件確認(rèn)uImage存在常見問題bootcmd中root/dev/mmcblk0p3寫成root/dev/mmcblk0p4但p4尚未寫入有效rootfs。Level 4Kernel級(jí)內(nèi)核層現(xiàn)象U-Boot打印Starting kernel ...后黑屏。排查在Kernel cmdline中添加consolettyS0,115200n8 earlyprintk捕獲早期log。若看到Uncompressing Linux... done, booting the kernel.后無輸出說明Kernel解壓成功但未跳轉(zhuǎn)。此時(shí)需檢查dtb文件是否與Kernel版本匹配scripts/dtc/dtc -I dtb -O dts xxx.dtb反編譯對(duì)比CONFIG_ARM_APPENDED_DTBy是否啟用某些SoC要求DTB追加在zImage末尾Level 5Rootfs級(jí)系統(tǒng)層現(xiàn)象Kernel啟動(dòng)成功但卡在Waiting for root device /dev/mmcblk0p3...。排查在Kernel cmdline中添加rd.debug查看initramfs日志。若出現(xiàn)dm-verity: Hash verification failed說明verity root hash與當(dāng)前分區(qū)不匹配。解決方案重新生成verity哈希樹并更新initramfs中的/etc/verity.conf。4.2 升級(jí)耗時(shí)超標(biāo)I/O瓶頸分析與優(yōu)化某項(xiàng)目實(shí)測(cè)升級(jí)耗時(shí)12分鐘遠(yuǎn)超8分鐘目標(biāo)。我們用perf工具抓取熱點(diǎn)# 在升級(jí)過程中記錄 perf record -e block:block_rq_issue,block:block_rq_complete -a sleep 60 perf script io-perf.log分析發(fā)現(xiàn)dd寫入B分區(qū)時(shí)95%時(shí)間消耗在__make_request函數(shù)I/O等待高達(dá)800ms。根本原因是eMMC驅(qū)動(dòng)未啟用HS400模式。解決方案確認(rèn)SoC DTS中usdhc1節(jié)點(diǎn)包含bus-width 8;和max-frequency 200000000;在U-Boot中啟用CONFIG_MMC_HS400_SUPPORT并確保mmc init命令后執(zhí)行mmc speed hs400Linux內(nèi)核啟用CONFIG_MMC_SDHCI_ESDHC_IMXy和CONFIG_MMC_CQHCIyCommand Queue優(yōu)化后寫入速度從15MB/s提升至85MB/s升級(jí)時(shí)間降至5分23秒。4.3 安全啟動(dòng)被繞過TPM2.0與Secure Boot的協(xié)同誤區(qū)很多團(tuán)隊(duì)認(rèn)為啟用TPM2.0就能替代Secure Boot這是嚴(yán)重誤解。TPM2.0的作用是度量Measurement而非驗(yàn)證Verification。它可記錄BootROM→ATF→U-Boot→Kernel的哈希值到PCR寄存器但不會(huì)阻止惡意代碼執(zhí)行。真正的防護(hù)必須由Secure Boot在每一級(jí)啟動(dòng)時(shí)進(jìn)行簽名驗(yàn)證。我們?cè)l(fā)現(xiàn)某供應(yīng)商在U-Boot中禁用了Secure Boot卻聲稱“已通過TPM2.0認(rèn)證”。實(shí)測(cè)中攻擊者只需替換U-Boot鏡像TPM2.0仍會(huì)正常記錄新哈希但系統(tǒng)已運(yùn)行惡意固件。正確做法是TPM2.0作為審計(jì)補(bǔ)充Secure Boot作為強(qiáng)制防線。兩者關(guān)系如同“行車記錄儀TPM”與“ABS剎車系統(tǒng)Secure Boot”——前者記錄事故后者防止事故。4.4 AB分區(qū)空間不足動(dòng)態(tài)壓縮與增量升級(jí)實(shí)戰(zhàn)2GB分區(qū)在AI模型膨脹后很快捉襟見肘。我們采用三級(jí)壓縮策略Stage 1SquashFS只讀壓縮將rootfs打包為SquashFS鏡像壓縮率可達(dá)65%相比ext4。關(guān)鍵參數(shù)mksquashfs rootfs/ rootfs.sqsh -comp xz -Xdict-size 100K -no-xattrsStage 2Delta差分升級(jí)使用bsdiff生成增量包bsdiff old.sqsh new.sqsh delta.patch實(shí)測(cè)對(duì)2GB鏡像delta包平均僅120MB。FOTA Agent下載delta.patch后用bspatch實(shí)時(shí)解壓到B分區(qū)。Stage 3運(yùn)行時(shí)解壓在initramfs中集成lz4解壓模塊Kernel cmdline添加rd.lz41使SquashFS在掛載時(shí)動(dòng)態(tài)解壓節(jié)省30%RAM。注意bsdiff對(duì)大文件1GB生成patch極慢單次需45分鐘。我們改用Google的Courgette算法將時(shí)間壓縮至3分鐘且patch體積再降18%。但Courgette需預(yù)編譯為ARM64二進(jìn)制且必須與Kernel版本嚴(yán)格匹配。5. 工程落地經(jīng)驗(yàn)與避坑指南5.1 燒錄階段的“隱形炸彈”eMMC vendor ID適配不同eMMC廠商Samsung、Kioxia、Western Digital的vendor ID和CID寄存器格式存在細(xì)微差異。某次量產(chǎn)中同一份U-Boot鏡像在三星eMMC上啟動(dòng)正常在鎧俠eMMC上卻卡在mmc init。用邏輯分析儀抓取CMD線發(fā)現(xiàn)鎧俠eMMC在ACMD41響應(yīng)中返回的OCR寄存器bit30S18R為0表示不支持1.8V信號(hào)但U-Boot默認(rèn)嘗試1.8V初始化。解決方案在U-Boot的drivers/mmc/mmc.c中添加vendor判斷if (mmc-cid[0] 24 0x15) { // Kioxia vendor ID mmc-signal_voltage MMC_SIGNAL_VOLTAGE_330; } else if (mmc-cid[0] 24 0x11) { // Samsung vendor ID mmc-signal_voltage MMC_SIGNAL_VOLTAGE_180; }這個(gè)細(xì)節(jié)在芯片手冊(cè)附錄中才有說明但足以讓產(chǎn)線停擺兩天。5.2 FOTA服務(wù)的“灰度發(fā)布”設(shè)計(jì)基于CAN ID的精準(zhǔn)推送主機(jī)廠要求新版本先推送給100臺(tái)測(cè)試車而非全量推送。我們不采用IP白名單車端IP易變而是利用CAN總線ID每輛車在出廠時(shí)寫入唯一VIN碼到EEPROMFOTA Agent啟動(dòng)時(shí)讀取VIN計(jì)算CRC16作為CAN ID段。例如VINLSVCM6BR1MA123456→ CRC160x2A3F則該車只響應(yīng)CAN ID0x2A3F的升級(jí)指令。云端按此ID段分批下發(fā)既規(guī)避了IP依賴又滿足車規(guī)級(jí)離線場(chǎng)景需求。5.3 最后一道防線安全模式的物理實(shí)現(xiàn)當(dāng)連續(xù)3次升級(jí)失敗系統(tǒng)必須進(jìn)入安全模式此時(shí)僅保留基礎(chǔ)CAN通信與診斷功能。我們?cè)O(shè)計(jì)了雙保險(xiǎn)軟件保險(xiǎn)U-Boot中維護(hù)upgrade_fail_count變量每次升級(jí)失敗則1≥3時(shí)自動(dòng)設(shè)置bootdelay0并跳轉(zhuǎn)到safe_boot命令。硬件保險(xiǎn)在主板上增加一個(gè)撥碼開關(guān)SW1短接時(shí)強(qiáng)制U-Boot跳過所有驗(yàn)證直接加載p1分區(qū)中的最小化SafeOS僅含CAN驅(qū)動(dòng)UDS協(xié)議棧。這個(gè)物理開關(guān)在產(chǎn)線刷寫和售后維修時(shí)至關(guān)重要避免軟件層面的任何鎖死。我在實(shí)際項(xiàng)目中發(fā)現(xiàn)最可靠的FOTA方案往往誕生于對(duì)每一個(gè)“理所當(dāng)然”的質(zhì)疑——比如“GPT分區(qū)表還需要簽名嗎”、“U-Boot環(huán)境變量真的安全嗎”、“Kernel cmdline里的verity參數(shù)會(huì)不會(huì)被篡改”。正是這些看似瑣碎的追問構(gòu)成了車規(guī)級(jí)可信升級(jí)的基石。當(dāng)你在深夜調(diào)試一臺(tái)卡在dm-verity校驗(yàn)的樣車時(shí)記住那行報(bào)錯(cuò)日志不是障礙而是信任鏈上最誠(chéng)實(shí)的哨兵。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
超碰伊人在线| 欧美精品双插| 中文字幕、久久精品国产2020、久久综合久久自在自线精品自、亚洲 | 国产精品日韩在线一区| 久偷拍欧美日韩三区| 亚洲好看强奸乱伦| 欧美综合色综合| 国产精品自拍欧美在线| 桑老女人九区| 蜜臀精品1区2区| 明星性猛交ⅹxxx乱大交| 亚洲91网| 女人一区| 综合av影片| 欧美疯狂做爰xxxx| 四方色播| 一区二区视频你懂的| 亚洲国产欧美一区二区潘金莲 | 色婷婷日韩精品一区二区三区| 蜜臀精品1区2区| 久久女婷| 国产精品麻豆视频网站| 精品国产综合久久福利,热99这里有精品综合久久,99热这里只有免费国产精品,精 | 色五月AV| 天天躁狠狠躁av| 色情成人五月天| 人人操人人色网| 亚洲有码第一页| 欧美图片色综合| 一区操逼日比视频| 天堂性色| 啊啊啊啊好大好硬啊啊啊啊啊 | 好爽免费视频| 4虎在线视频| 亚洲不卡不卡中文字幕不卡| 美女人妻色网站| 亚洲少妇综合在线播放| 国产精品扒开腿做爽爽爽视频| 天天操天天日天天干| 99黄页网站| 99www.bibizy香蕉资源国产一区二区三区高清 | 日韩噜噜69| 91性感网站| 中文字幕78| 男人的天堂亚洲| 色牛牛AV| 淫荡少妇免费| 男人的天堂在线有码| 欧美亚洲日本视频久久久| 加勒比综合| 亚洲精品天天影视综合网 | julia在线观看久久| 97在线免费看| 九九RE视频在线精品| 嗯啊抽插大香蕉网页| 国产免费操逼| 亚洲精品美女久久久久久久久| 婷婷99狠狠| 国产美女高潮叫床视频| 丁香五月婷婷基地| 麻豆天美制片厂网站视频| 青青欧洲黑| 91大香蕉伊人| 亚洲欧洲综合av在线| 天天综合网网欲色| 丝袜熟女一区二区三区| 日本大片日本一区二区免费高清| 日韩成人综合网| 99热这里只有精品99| 亚洲不卡AV在线| 伊人久久婷婷| 岛国999| 一本久道久久综合狠狠爱一密臀精| 亚洲欧美日韩激情不卡| 91露脸熟女专区| 男人天堂网址| 亚卅熟女乱色| 午夜天堂精品久久| 西西美女视频网| 亚洲最大的黄色电影网站。| 人妻出轨一区二区三区| 欧美色院| 婷婷导航| 免费99精品国产自在在线| 欧美在线中M| 青草精品视频一日本久久久久网站| 激情情色五月天| 极品色综合| 国产一在线观看| 国产九九九九九九九九| 日本精品88888888| 天天cao在线| 男人a天堂手机在线版| 五月天伊人| 丝袜AV一二三区| 色九九综合AV| 久思思热视频在线观看| 欧美狠狠弄| 中文字幕乱妇免费视频| 免费精品中文字幕| 99久久9| 久久久一二三四区| 久久内射| 五月激情啪啪| 无码国产精品96久久久久孕妇| 日韩中文字幕在线视频观看| 俞拍自拍| 欧美人人AAA| 日韩精品人妻| 91中文字幕制服丝袜免费视频| 麻豆天美AV传媒第一页| 九色 蝌蚪 熟女自| 午夜欧美女人操逼| 国产欧美成人精品| 91伊人久| 国内操逼视频二区| 成人乱人伦一区二区| 色婷婷aV一区二区三区麻豆综合| 综合欧美日韩在线| 午夜男女爽爽爽影院视频| 懂色天天爱天天日天天射天天澡| 成人熟女区| 久久久涩| 欧美一区二区三区入口| 天堂精品一区| 自偷自拍的亚洲视频| 亚洲乱色视频一区、二区在线| 久久亚洲日韩国产欧| 噜噜噜在线视频| 欧美91网站| 免费看黄视频亚洲网站| 97视频在线免费播放| 国产精品久久久久亚洲av| 中文在线久久字幕| 亚洲情色中文字幕一区| 91嫩草欧美| 久久国产AⅤ| 日韩激情中文字幕有码| aV中文麻| 啊啊啊啊啊操我视频| 国产白丝精品在线观看| 99操| 国产美女mm131爽爽爽爽| 亚洲双插| 麻豆AV96熟妇人妻| 深田咏美亚洲精品福利社| 综合性视频99| 免费精品中文字幕| 色噜噜日韩精品| 一区二区三区在线资源| 被窝影院午夜看片无码| 情侣操 逼视频99| 性爱乱伦网址| 国产一区在线播放| 精品一国2| 五月丁香影视| 亚洲天堂一区二区久久| 久久久久幕乱码| 人人爽天天爽| 7777奇米影视久久| 蜜臀va69| 日韩 欧美 国产 麻豆| 亚洲经典啪啪| 屁股久久久久久久| 男人的天堂日韩| 欧美男人一区| 中文字幕精品一区二区精| 久肏视频字幕| 加勒比日本在线| 99超级碰免费视频| 一,爱啪啪,在线免费视频| 高清视频一区| 亚洲精品 超碰| 青娱乐国产精品| 婷婷久月| 欧美三级偷拍| 精品国产综合久久福利,热99这里有精品综合久久,99热这里只有免费国产精品,精 | 激情欧美日韩女同久久| 狠狠爱综合网| www黄片免费看com| 亚洲无码国产探花在线观看| 亚洲男人天堂网站| 欧美色图99| 96免费视频在线| 清柠毛片| 国产女人高潮视频| 一起草AV| 五月天激情小说| 亚洲精品一二区| 立川理惠被中出无码| 啊啊啊啊免费视频| 91蜜桃传媒精品久久久一区二区| 国产不卡中文字幕免费avi| 五月婷婷六月天| 九九探花视频在线观看| 双插性欧美一二三区| 国产91精品在线免费| 亚洲人妻久久久| 欧美综合 站| 人妻一区二区三区| 久久中出在线| 亚洲精品骚逼| 嫩草影院永久在线制服丝袜| av草草在线电影| 丰满人妻一区二区中文| julia中文字幕在线观看| 久久97资源 网| 久草新免费| 色 婷97| 91色碰| 大鸡巴久久久| 任我爽视频在线观看| 97爱爱爱综合| 爱欲AV| 日本欧美色| 综合网久久| 秋霞午夜视频一区二区| 欧中美三级一区二区三区| 日韩成人人妻网站| 97超碰9| 人妻精品一区二区| 91AV入口| 交换娇妻呻吟声不停中文字幕| 亚洲啪啪视频免费| 18禁的网站在线| 人妻在线视频| 日本久久久久久久久| 欧美日韩情色一区二区| 新视频sss国产| 久草久日| 久久久四区| 久久少妇人妻| 大粗鳼巴久久久久| 蜜臀一区二区三区在线| 91天堂| 精品九九九| 午夜国产成人精品视频| 黄色av一区二区在线| AV电影在线播放| 人妻精品综合中文字幕在线| 色九九综合AV| 人人妻人人玩人人澡人人爽| 操逼片国产| 噜噜吧,噜噜色,噜噜| 97网址www| av东京热男人的天堂| 日韩BBN| 91精品人| 日韩AC| 麻豆AV一区二区| 久久999久| 色男人色天堂东京热| 天天欧美| 波多野42部无码喷潮在线观看 | 桃色人妻在线视频| 91殴美| 亚洲成人无码影院| 性做久久久久久久| AV色天香在线| 无人区高清电影免费观看一区二区三 www.qmcai2.com | 大香蕉淫人| 午夜福利一区二区影院| 婷婷综合视频| 88在线一区二区三区| 人人么人人操| 性爱视频无打码在线观看| 另类小说五月天| 中文字幕精品一区二| 国产18精品亚洲精品| 亚洲瓯美色图| 影音先锋日本乱伦| 国产女性无套 免费观看| 欧美午夜精品久久久久久超碰| 九九九九精品一区| 狠狠操官网| 欧美男女午夜啪啪| 欧美综合91| 国产情侣自拍在线播放| 久久一本大香蕉| 国产视频一区二区三区在线免费观看| 又大又白奶子| 久久综合九色综合欧洲98| 91干熟女| 人妻少妇久久| 日本3级一区二区免费| 国产精品一区二区三区在线密挑| 亚洲 另类 丝袜 自拍 动漫| 国产野战露脸在线播放| 欧美日韩精品久久| 亚洲人妻在线一区| 在线小视频| 少妇啪啪自拍| 丝袜美腿射精91| 人人操人人干网页| 国产精品亚洲日韩骚欢乐谷最新地址发布页huanieguty性屋娱乐妖精视频 | 婷婷综合| 色爱天堂| 97超碰国产精品| 亚洲无码日韩电影| 熟女精品一区二区三区| 国产精品一区二区三| 天天欧美97| 5月婷婷6月六月丁香| 欧美偷偷网| 抽插无码高清一区| 国产97亚洲| 色婷婷综合久久久久中文国产精品一区中文字幕,国产福利电影一区二区三区 | 婷婷丁香人妻| yaouchengrenav| 91婷婷伊人狠人| 天美传媒精品一区二区| 九九九久千久久激情蜜桃在线看 | 天天干天天做| 亚洲午夜未满十八勿入网站日本又色又爽又黄 | 操逼天美3区| 日韩精品怡红院| 无码精品一区二区三区潘金莲| 久久久久久久9最新免费视频观看| 欧美亚洲日本视频久久久| 97综合久第一页| 久99| 黄色成人网久久久久久| 色综合99999| 国产女人成人精品视频| 麻豆天美传媒毛片| 欧美激情性爱视频网站| 国产深喉| 黄色不卡视频| renqi久久久久久久久久久久| 国产精品福利资源在线尤物| 五月天加勒比啪| 久久婷婷视频| 午夜激情成人在线观看| 亚洲精品蜜桃久久久| 亚洲丝袜二区| 国产 无码 一区二区| 久久久久白虎| 二三四区精品| 黄色乱论网站| 午夜丁香| 亞洲久久直播| 操逼无码操逼| 91狠狠| 亚洲熟妇综合久久久久久| 色婷婷综合久久久久中文国产精品一区中文字幕,国产福利电影一区二区三区 | 大香蕉免费乱伦视频| 春色91| 日本新免费二区三区| 国产日比| 国产AV高清AV无码| 日本黄色精品专区网站| 日韩97P| 干美女人妻| 99国产精品久久久久久久成人热| 私色综合网| 欧美视频一区二区在线| 亚洲色图尤物视频| 综合伊人网12色| 嗯嗯不要 视频| 97爱碰| 又黄又粗又硬又长又大| 大香蕉综合| 长长久久曰曰夜夜成人网| 欧美人妻一区| 国产一区二区三区视频在线看| 日夜伊人网| 婷婷精品久久av影视| 九九九九九九成人| 激情文学欧美| 高潮嗯啊性感美女久久久| 女同亚洲欧美一二三区久久电影| 日韩欧美经典在线观看| av片在线观看免费播放| 午夜福利精品| 久草国产在线视频| 性色av蜜臀av色欲aV| 国产亚洲精品一区二区三区| 日韩兔费看黄片| 99999国产精品| 一二三区精品视频| 久热这里只有精品9| 中文字幕一二三av| 四虎在线视频| 亚洲加勒比| 91丝袜美女视频| 蜜臀网 一区| 亚洲精品人体| 老司机午夜精品视频| 精品一级毛片在线观看| 久久这里只精品免费福利| 中文字幕99999| 翔田千里AV无码秘 三区| 欧美狠狠| 美女午夜福利免费视频| 久久久九九网站| 亚洲综合激情五月久久| 日本韩国一本产品小视频日本韩国一本产品久久久产品小视频日本韩国一本产品久 | 无码WWW免费视频网站| 国产AV色黄看到爽| 国产精品蜜乳AV| 一个人免费HD91视频| 亚洲精品三| 色婷婷狠狠| 久久黄色网址| 欧美91精彩| 少妇九九九九| 精品欧美老熟女一二区| 6080YYY午夜理论片在线观看| 国产一在线观看| 亚洲色图亚洲无码强奸乱伦| 日韩AV片| 久久人妇| 天堂无码| 精品中文字幕一区二区l - 百度| 欧美男人一区| 牛牛久久国产精品视频一二三| 国产热av| 久久九色| 在线观看中文av字幕| 9色在线| 日少妇亚洲版| 精品少妇高潮久久| 超碰97人人cao| 黑人嘿嘿嘿超爽免费视频| 正在播放:深夜激情大战,自带黑丝袜全力输出骚穴 | 亚洲成人av色网| 日韩精品9999| 少妇无码999| 日韩性爱视频在线免费观看| aaa一级黄片| 欧美色图中文字幕| 欧美色97| 亚洲第一黄色av网站| a网站免费观看| 欧美日韩亚洲天堂网| 91老司机视频| 国产一区二区欧美日本| 国产白领连续中出在线观看| 成人夜夜| 精品人妻av在线播放| 99热精品在线在线| 青操影院| 日本成人A片免费看| 亚洲少妇色| 91天堂丝袜美腿| ..日韩av毛片精品久久久| 欧美超碰9798| 一卡二卡三卡| 综合欧美日韩在线观看| 91国产美女丝袜足交精品视频| 欧美精品庄| 亚洲欧美国产成人综合不卡| 久操大香蕉超碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰 | 欧美黄片欧美黄片xxx| 四虎永久在线精品免费网址 | 综合网色| 精品久久久久成人码免| 国产成人无码啪| 日少妇亚洲版| 浓厚中出中文字幕在线| 偷拍欧美激情| 国产成年女黄特黄| 精品久久久久9999| 国产品精品自在在线午夜免费| 亚洲一区中文字幕一区| 91四海无码日韩欧美| 国产 无码 一区二区| 欧美熟妇亚洲版| 久久五十路熟女人妻| 精品国产99| 亚洲精品乱码线路中文字幕| 粉嫩少妇自慰在线| AV在线性爱| 欧美夜色| 欧美日韩亚洲一区二区在线观看| 亚洲熟妇综合久久久久久| www.久久最新地址| 免费男人的天堂| 一个国产在线综合网站| 91制服丝袜| 久久久久幕乱码| 在线中文字幕| 久久999久| 久久91精品国产9丨久久分亭| 欧美韩国你懂得在线 | 一区操逼日比视频| 天天天操天天天爱| 久操热| 成人性爱电影网| 亚洲狠狠入| 很很干很很操| 五月天久久综合网| 91精品操美女| 九九毛片这里只有精品| 91九色蝌蚪在线观看| 啊啊啊啊好疼视频| 国内91熟女人妻丝袜天天精品视频在线 | 亚洲熟女诱惑| av情色影音| 日韩亚洲国产视频| 九九九九精品精| 精品国产网站| 人妻99p| 性色aV一区二区三区噜噜| 国产日本熟女顶级一区二区三区视频| 乱操乱伦AV| 99精品丰满人妻无码| 99热成人| 久久直播国产| 综合网欧美| 夜夜夜久久| 99re免费视频精品全部| 色欲天香天天综合网-成年人三级片网站-欧美乱妇狂野-日韩国产专区-久久久久久 | 四虎精品一区二区| 青青伊人久久| 色婷婷综合久久久久中文国产精品一区中文字幕,国产福利电影一区二区三区 | 97视频7| 国产精品熟女丝袜一区二区| 人人操人人摸人人骑| 亚洲综合精品国产一区| 激情小说亚洲| 美女天天干| 美女91在线观看| 91九色首页| 国产 亚洲 丝袜 制服| 国产精品国产精品国产| 夜夜无码| 欧美91丝袜| 不卡超碰护士AV在线免费播放| 欧美日韩国产高清在线一二三区 | 日韩在线一区二区| 亚洲精品久久久久毛片A片拉屎| 啊啊啊久久久视频| 操B久久| 人妻激情另类| 免费A V在线| 操逼操逼视频操逼| 妇女性内射冈站HDWWWCOM| 九九九国产| 欧美黑人日韩少妇色情| 97资源免费视频| 欧美一区二区情色| 亚洲熟女国产综合另类| 亚洲va综合va国产va中文| 五月婷丁香| 人人操人人大香蕉| 强奸乱伦中文字幕AV| 日本色色视频网站| 日韩 国产 欧美自拍| 狠狠爱大香蕉| 屁股久久久久久久久久| 91亚洲网站| 农村少妇久久久久久久| 久久精品操| 亚洲成人在线资源| 久久久78| 精品一级| 综合第一页| 97免费视频在线| 丁香色五月 97干| 午夜福利av电影在线| 国产视频一区二区三区在线免费观看 | 精品国产Av无码久久久伦古装| 欧美成人精品欧美一级乱黄一区二…| 国产区在线| 麻豆成人AV| 天天综合-91入口| 国产激情视频一区区三区| 四虎精品永久在线播放| 成年人黄色视频免费| 日韩性爱一级片| 99久久精品无码一区二区毛片免费| 97精品一区二区视频| 日韩免费高清大片在线| 乳欲人妻办公室奶水| 色情乱伦AV| 狼人久草| 刺激性视频黄页| 麻豆 亚洲 97| 国产精品白丝AV| 91美女视频在线观看| 日韩欧美性吧婷婷乱伦大香蕉| 欧美福利视频啊啊啊啊| 家庭乱伦性爱av| 能看的AV| 人妻酒店出差被中出免费在线播放| 裸体美女久久久| 欧美自拍网| 人人看黄色视频| 国产无马视频| 97九色人妻| 中文字幕综合人妻| 91日产桃蜜| 久久性爱视频99| 亚洲古典另类欧美在线| 理论久久婷婷网 8| 亚洲欧美日韩电影网站一区 | 久久这里只精品免费福利| 郑州宾馆老熟女露脸啪啪| 久操精品网| 日韩久久超碰色| 少好三P| 国产精品精品系列在线观看| 老司机射| 欧美熟女激情| 日韩本不卡视频在线观看 | 欧美成人一区二区三区在线播放| 超碰公开久久网| 91人妻久久久久久久久久久久久| 中文字幕欧美丝袜07资源| 大黄片做爱的大的| 美女啊啊啊啊啊啊啊| 精品人妻视频一区二区在线播放 | 熟女六十路| 国产极品999| 91白虎| 无码 有码 国产18p| 综合久欧洲| 欧美78P| 国产呦精品一区二区三区下载| 免费看污网站| 中文字幕第2页| 性爱乱伦一区| 超碰在97| 日本三级一区二区 在线| 久久9精品视频| 国产精品一区二区密臀| 天天日天天干天天整| 九九九久久久久| 91丨国产丨白浆秘 洗澡动漫| 久99| 久久精品国产亚洲粉嫩| 日韩不卡毛片Av免费高清| 日本999精品| 日韩免费av片高清无码| 亚洲熟妇乱女区二区三区| 国产精品久久久亚洲第一牛牛_在线观看 | 97资源视频| 人妻在线臀日韩| 97超碰欧美| 青青草视频这里只有精品| 啊啊啊啊免费视频| 婷色五月| 欧洲亚洲少妇| 麻豆 欧美 日韩| 久久久蜜桃臀无码视频| 色五月婷婷五月天| 91日韩国产欧美亚洲另类精盘州至城都| 新版天堂中文资源8在线| 亚洲AV人人澡人人爱| 嫩草影院在线观看精品| 欧美体内射精| 久久久精品国产亚洲AV无码| 日韩内| 色色色网站| 午夜男人的天堂| 97五月天| 91免费看一区二区三区| 一区二区三区日韩欧美 | 色播五月丁香| 啊啊啊网站| 欧洲射精91| 日本操逼视频不卡直接放| 91挑色欧美| 自拍偷拍 日韩无码| 精品国产乱码久久久影院| 婷色五月| 久久中文字幕不卡人妻| 夜草欧美| 亚洲国产一区二区三区四区国产| 大香蕉中文网| 欧亚乱色熟一区二区三四区| 色就色综合| 91碰碰| 亚洲国男人的天堂| 日韩免费高清大片在线| 精人妻无码一区二区三区伊人直播| 日本理论在线| 色综合av综合久久| 人妻素股| 婷婷香蕉欧美在线一区二区三区| 东京热视频网| 欧美,亚洲,日韩,v,天堂,手机在线观看| 综合激情婷婷| 伦激情人妻另类人妻| 天天日熟妇| 欧美熟妇视频 | 九九九热精品| 天天看综合网| 国精精品无码一二三区水多多| 98超碰欧美| 今日头条成人一区二区三区四虎精品| 欧美色综合影院| 人人操人人爽人人操人人| 欧美极品色| 精品国产一区二区久久| 欧美在线视频播放| 这里只有精品视频在线| 黄色片,com| 欧美97在线欧| 天天搞欧美| 屌妞视频久久久久久久久久久久| 国产高清成人传媒影视| 国产精品第一区第一页| 天天欲望网| 欧美 日韩 婷婷 五月| 久久久蜜桃一区二区三区| 福利视频一区二区微拍| 操逼操2| 91M一社| 欧洲精品久久| 色女综合| 小草精彩毛片| 色综合天天| 欧美一区二区亚洲天堂| 黄骗免费| 久久久久亚洲AV无码专区少妇| 久草成人| 日韩精品-原创伙伴| 97免费视频在线观看视频| 涩爱AV在线| 久久侵犯人妻爽爽爽| 激情综合五月| 亚欧韩av| 探花激情视频| 国产av美女被艹的乱叫| 色狠狠 - 百度| 欧美激情性久久久久久| 九九综合九九综合| 欧美97超碰| 伊人久久AV诱惑悠悠| 久草电影网| 天天色综合影视网| 婷婷人妻激情| 啊啊啊慢点| 日本道人妻久久久在线不卡色视频| 99精品丰满人妻| 熟妇人妻一区二区三在线| 激情图片亚洲色图| 5252色欧美在线| 偷拍亚洲高清图片| 综合网久久| 国产精品视频播放| 欧美日韩大陆黑人少妇99| 一区二区三区蜜桃成人撸久久东京热| 日韩三级网址| 美欧老女人97| 成人欧美日超碰| 超碰久久网| …中文字幕亚洲乱,97人妻无码费视… | 狠狠97| 丰满人妻一区二区三区免费| 91五十路| 啪啪啪精品| 370p日韩欧美亚洲精品| 亚洲精品一二区| 福利在线黄片| www.婷婷| 一级性爱视频免费在线| 免费人成在线观看网站品爱网| 操逼片国产| 5278欧美一区二区三区| www.夜夜| 精品十三区| 久久久久久久9最新免费视频观看| 国偷自 一区| 亚洲日韩美女丝袜美腿人妻视频| 日韩兔费看黄片| 亚欧成人综合影院| 一区二区三区激情在线观看| 天天爱天天韩国日本牛牛牛牛 | 夜夜操美女| 国产亚洲日本精品在线| 国产成人亚洲精品自产在线| 国产亚卅97| 亚洲熟女乱综合一区二区在线-...亚洲国产日韩欧美一区二区三区,久久久久久精 | 中文字幕一区二区三区人妻不卡| 玖草在线视频| 99在线无码精品秘 入口黑人| 色5月婷婷| 黄色十八禁网站| 91无码人妻精品一区二区三区蜜桃| 五月天亚洲色图| 色色色色日本| 3571色综合一区二区二区| 嗯嗯啊啊视频一区二区三区| 精品人妻一区二区三区不卡断| 成人午夜高潮av猛片| 免费操逼视频下载| 日本熟人妻中文字幕在线|...久久国产精品-国产精品_日本一区二区三区中文字幕 | 97视频在线| 亚洲色图日韩精品| 日本三级小说中文字幕| 亚洲在线综合| 人人妻人人爽 97人人看碰人免费公开视频| 人人干人人操人人..com| 亚洲最大黄网| 久久丝袜| 怡红院亚洲怡春院av| 亚洲欧美日韩免费观看| 偷窥自拍亚洲天堂网爆| 精品亚州18| 色图综合网| 五月天色色色| 亚洲影视高清第一页| 无码一区二区精品视频久久久春药 | 亚洲色图欧美色图制服丝袜| 欧美热图99| 国产懂色精品国产av| 久久视网78| 欧美色欧美| 无码99| 亚洲干B| 亚洲黄色网址视频| 午夜毛片高清免费不卡| 久久中文字幕不卡人妻| 91在线页| 国产视频第二页| 日韩黄色成人性爱| 破处bbq| 亚洲熟女性高潮久久久| 蜜臀AV成人精品蜜臀| 国产精品懂色tv影视免费观看| 91Chinese在线| 91综合天天看| 90后性网国产欧美| 疯操AV| 岛园激情| 久操电影网| 国产精品老师| 久久精品操| 亚洲AV永久无码一区仙野| 日韩淫色网| 欧美日本国产日韩激情视频| 久久综合久色欧美综合狠狠| 乱伦1色页| 国产精彩女在线观看视频| 日韩欧美成人综合在线| 九九九九九精品十六| 亚洲自拍天堂| 亚洲日韩欧美一区二区| 国产网站在线播放| 乱操9999| 久久婷婷五月| 国产农村妇女精品| 日韩一999精品| 人人看黄色视频| 国产精品视频| 欧日a| 久久老熟女| 青青草视频这里只有精品| 97亚洲综合| 中文字幕十五区| 人人操,操人人| 91亚洲最新在线| 啊啊啊好爽快点啊啊啊嗯嗯| 性夜影院爽黄A爽免费动漫| 日韩操逼性鲍| 亚洲污污网站| 99热国产| 新亚洲无码| 偷拍2020| 日本色婷婷| 人人看黄色视频| 色眯眯av| 日本91白丝| 黄色视频60分钟| 国产中文字幕在线观看| 成人性爱电影一区二区| 999精品乱码| 日日骚 av| 人妻熟女av国产网站| 亚洲综合20p| 麻豆一区在线| 99婷婷| 国产AV色黄看到爽| 人人妻人人爽人人精品| 影音综合网| 国产18精品亚洲精品| 97久久超碰| 伊人久久亚洲色欲综合网站 | 99后入| 人妻久热在线| 久久久 国产精品| 无遮挡男女激烈动态图| 少妇激情AV| 国产无遮挡| 婷婷五月天影院| 欧美日韩性爱电影在线| 99热婷婷一区二区三| 欧美在线啊啊啊| 激情深爱五月天| 国产欧美日韩一区二区三区| 欧美色乱| 夜夜免费视频| 黑人天8A∨高清网站| 超碰人人干| 亚一综合久久久久久久久久| 国产精品久久久 | 美女黄网| 亚洲不卡一| 新精精品久久精品| 亚洲情色1区| 先锋精品av色鲁| 国产 v乱码一区二| 高清国产性猛交xxxx乱大交| 男人的天堂2018| 欧美三四五区| 麻豆区久久久久亚| 99热导航| 国产午夜福利视频在线| 久久黄黄| 97操综合| 校园春色综合香蕉| 天天天乱色综合全| 国产精品久久发布| 欧美第一页性| 五月婷婷激情网| 日韩人妻无码专区| 操比国产| 女人午夜视频777| 操逼操逼逼操操逼91 | 超碰97欧美在线| 色婷婷激情| 久9视频| 人人扣人人操| 色爱综合网| 高清无码国产亚洲| 精品性爱无码在线播放| 日韩一区二区三区四区五区| 黑丝自慰喷水网站| 日本欧美一区二区三区免费| 综合五月婷婷亚洲一区| 欧美激情另类一区二区| 一级毛片久久久久久久女人18| 大二网站亚洲| 亚洲乱色熟女一区| 五十路六十路七十路熟婆| 亚欧免费观看视频| 人人操,人人插| 91精品微拍福利| xxxx网站亚洲精品| 久久久亚洲欧美综合| 乱伦3P视频| 欧美日韩操逼嗦吊| 狠狠色综合网| 中亚精品极乱| 国产夫妻一区二区| 妇女视频网站| 91精产一区二区三区| 台湾佬中文娱乐网久久久久久久久久com| 99re这里| 蜜臀va69| 99热在线观看| 免费观看网黄| 夜嗨影院| 婷婷99| 精品国产网站| 91麻豆一二三区| 精品视频一区二区| 国产91 丝袜在线播放00-百度| 91精品人| 伊人网综合在线视频| 簧片免费看视频| 久久99黄色卞西瓜| 九九九久久久久| 夜夜做夜夜爽精品视频| 中文字幕在线免费观看 | 亚洲强奸乱伦影视网| 天天干天天拍| 国产不卡中文字幕免费avi| 欧美人妻另类在线| 九九九九九九九精品视频| 91人妻丝袜无码| 伦理日韩国产久久| 夜色91| 日本免费专区| 超碰三级秋霞| 国产亚洲日本| 亚洲天堂男人天堂网| 人人操人人干网页| 丁香六月婷婷综合| 西西美女视频网| 992大香蕉| 国产精品 久久久精品一牛| 九九综合久久| 午夜精品久久久久久久99热影院| 国产AB视频| 99婷婷一区二区| 国产精品视频精品一二| 色哟哟-国产专区| 美女十八禁| 日韩免费在线视频观看| 九九色色| 99热日| 国产精品白丝在线播放| 中文字幕黄色片| 婷婷美人网| 一区二区乱码福利| www.久久久久| 动漫av中文| a片在线播放| 综合五月婷婷| 亚洲日韩欧美一区二区| 午夜男女爽爽大片免费观看| 激情五月天色色网| 久久久久久久六六| 久久久久久亚洲Av无码精| 婷婷色色网| 久久久91福利姬| 一本色道久久天天射天天干| 日韩欧美女优电影| 欧美啪啪天堂| 亚洲国产精品成人无码久久久| 久9久| 97爱爱爱| 国产99热| 新91视频.cmp| 久久亚洲AV无码专区国产精品| 欧美色图天堂网m| 久久久久夜夜夜夜| 六月丁香网| 久肏视频字幕| 国产三级日产三级韩国三级| 殴洲老熟女| 素人一区二区三区日韩| 成人日韩中文字幕| 久久国产成人精品国产成人亚洲| 久热超碰| 97超碰9| 五月综合激情网| 天天干人人乐| 亚洲综合激情五月久久| 久操免费电影| 丁香色色网| 极品人妻少妇综合| 97婷婷色| 色区97| 欧美亚洲日韩人妻在线观看| 国产精品夜夜| 亚洲精品一区中文字幕乱码| 另类欧美色| 97久久资源| 97精品久久| 蜜臀久久99精品久久久久免费观| av一区二区三区不卡| 日本熟人妻中文字幕在线|...久久国产精品-国产精品_日本一区二区三区中文字幕 | 婷婷情色五月天| 亚洲人妖网| 国产一区在线观看无码AV| 欲香欲色天天天综合和网| 秋霞网—男女啪啪亚洲免费体验区 | 97中文字幕色| 日韩操逼HD| 大香蕉在线SuP| 综合色图区| 亚洲精品99999| 亚洲色图20p| 国产精品久久久久久照片| 色妇91| 日本三级日本三级99| 久久尹人大香焦视| 嗯阿好爽好紧| 乱伦av麻豆| 亚洲精品国产拍免费91在线| 天美国产三级传媒| 成人av在线播放| 日韩中文9| 日韩乱码Av| 白天啪啪晚上啪啪视频| 2019男人的天堂| 97中文超碰| 亚洲欧美日韩二区视频| 超碰偷拍| 丁香五月天婷婷姐| 欧美精品99久久久**| 97欧美色| 日韩精品人妻中文字幕有码午| 污污汅18禁网站在线永久免费观看 | 精品中文字幕第一页| 97在线播放| 玖玖爱综合| 欧美v亚洲v日韩v最新在线二区| 日韩在线电影| 啊啊啊不要好爽日韩无码一区| 天天插天天操| 天天狠操| 中文字幕第2页| 色妇91| 九九九综合精品| 精品人妻美妇91job| 粉嫩av平台| 中韩中文字幕在线观看| 五十路熟女工口 | 98人妻精品一区二区色欲| julia ann久久| 97欧美精品综合| 99碰碰| 久久精品毛片免费不卡| 精品亚洲| 日本免费二区三区| 欧洲与亚洲欧美精品中文字幕| 六月丁香网| 日亚韩精品视频二区三| 囯戸精品高潮呻吟旡码| 国产精品农村妇女| 欧美第一页| 日本A级视频| 青青草日本无码| 国产福利第一视频| 一区二区蜜臀| 午夜120视频在线观看| 大香蕉中文aV在线| 国产精品国产拍高清AV| 人妻无一区二区三区| 超碰在线日韩一区| 欧美日韩少妇色情| 国产亚洲一黄| 青青操狠狠撩| 色综合久久av| 免费国产视频| 国内精品久9| 东北女人操比视频| 三级片大波波| 花野真衣| 五月天婷婷综合网| 黄片在线免费在线观看| 亚洲色系另类精品国产| 蜜臀一区二区三区在线 | 伊人久操| 免费1级a做爰片观看| 午夜小电影在线插入淫高潮 | 麻豆60秒| 99热在线观看| 1024人妻| 91九色精品熟女内射| 蜜乳AV一区二区三区四| 欧美精品日韩久久久九| 国产精品成人久久一区二区三区| 久草午夜| 欧美狠狠干| 97在线免费观看| 色婷婷一区二区三区久久| 啪啪自拍九九综合| 男女啊啊啊| 天啪| 91国模| 性色亚洲| 黄色成人网久久久久久| 国产精品懂色tv影视免费观看| 一级乱伦网站| 国内偷拍精品一区二区| 国产粉嫩蜜臀av一区二区三区| 探花视频免费观看国产专区| 日本久久女同性恋视频| 乱性AV| 日本欧美韩国国产在线| 欧美日韩日产免费网站看| 天天躁日日躁xxxxx| 色乱二区|