免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

車規(guī)級FOTA升級:Linux AB分區(qū)與安全啟動(dòng)信任鏈設(shè)計(jì)

車規(guī)級FOTA升級:Linux AB分區(qū)與安全啟動(dòng)信任鏈設(shè)計(jì) 1. 項(xiàng)目概述為什么FOTA升級不再是“刷個(gè)固件”那么簡單智能汽車的域控制器已經(jīng)不是十年前那個(gè)裝個(gè)單片機(jī)、跑個(gè)裸機(jī)程序的ECU了。它是一臺(tái)嵌入式Linux服務(wù)器——有內(nèi)存管理、進(jìn)程調(diào)度、網(wǎng)絡(luò)協(xié)議棧、文件系統(tǒng)甚至要跑容器和AI推理框架。當(dāng)整車廠說“我們要做FOTA升級”背后真正要解決的從來不是“怎么把新固件傳上去”而是“如何在不熄火、不丟配置、不中斷ADAS功能的前提下讓車輛在高速行駛中完成內(nèi)核、驅(qū)動(dòng)、應(yīng)用、算法模型的原子化更新”。我做過6個(gè)量產(chǎn)車型的FOTA方案落地最深的體會(huì)是FOTA的本質(zhì)是嵌入式系統(tǒng)的可信執(zhí)行環(huán)境重構(gòu)過程而不是簡單的文件搬運(yùn)。核心關(guān)鍵詞——FOTA、Linux、AB分區(qū)、安全啟動(dòng)、GPT——每一個(gè)都不是孤立技術(shù)點(diǎn)而是一條環(huán)環(huán)相扣的信任鏈GPT分區(qū)表確保磁盤布局可驗(yàn)證安全啟動(dòng)校驗(yàn)Bootloader→Kernel→Rootfs簽名AB分區(qū)提供回滾能力Linux內(nèi)核的dm-veritydm-snapshot機(jī)制保障運(yùn)行時(shí)完整性而FOTA服務(wù)層只是這條信任鏈上最表層的調(diào)度器。它面向的是車規(guī)級嚴(yán)苛場景升級失敗率必須低于0.001%單次升級耗時(shí)需控制在8分鐘內(nèi)含校驗(yàn)、解包、寫入、重啟、自檢且升級過程中儀表盤不能黑屏、智駕系統(tǒng)不能降級為L0。這不是手機(jī)OTA的平移而是從零構(gòu)建一套符合ISO 21434網(wǎng)絡(luò)安全標(biāo)準(zhǔn)、ASPICE CL3開發(fā)流程、以及國標(biāo)GB/T 39575-2020《汽車軟件升級通用技術(shù)要求》的工程體系。如果你還在用rsync同步rootfs或者手動(dòng)dd燒寫鏡像那你的方案連準(zhǔn)入測試的第一關(guān)都過不了。2. 整體架構(gòu)設(shè)計(jì)與關(guān)鍵技術(shù)選型邏輯2.1 為什么必須放棄傳統(tǒng)單分區(qū)覆蓋寫入模式我見過太多團(tuán)隊(duì)初期用“tar -xf new.tar.gz /”這種粗暴方式做原型驗(yàn)證結(jié)果在實(shí)車路試階段暴雷某次升級后車輛冷啟動(dòng)時(shí)卡在initramfs原因是ext4日志被意外截?cái)鄬?dǎo)致根文件系統(tǒng)只讀掛載失敗另一次升級后CAN總線通信異常排查發(fā)現(xiàn)是內(nèi)核模塊ko文件被部分覆蓋加載時(shí)符號(hào)解析失敗。根本問題在于——Linux文件系統(tǒng)不是原子操作介質(zhì)。即使使用sync()強(qiáng)制刷盤也無法保證多個(gè)文件如/lib/modules/5.10.0/kernel/drivers/can/xxx.ko /lib/firmware/can-firmware.bin的寫入順序和完整性。更致命的是升級過程一旦斷電或看門狗復(fù)位整個(gè)系統(tǒng)將處于不可預(yù)測的中間態(tài)。我們曾統(tǒng)計(jì)過某款量產(chǎn)車前1000次OTA失敗案例73%源于單分區(qū)覆蓋導(dǎo)致的文件系統(tǒng)損壞。因此AB分區(qū)不是“錦上添花”而是車規(guī)級FOTA的生存底線。它的價(jià)值不在于“多一個(gè)備份分區(qū)”而在于將“升級”這個(gè)高風(fēng)險(xiǎn)操作轉(zhuǎn)化為“切換啟動(dòng)目標(biāo)”這個(gè)低風(fēng)險(xiǎn)操作。只要A/B兩個(gè)分區(qū)各自保持完整哪怕B分區(qū)升級失敗下次啟動(dòng)仍能100%回到A分區(qū)的已知可靠狀態(tài)。2.2 GPT分區(qū)表不只是為了支持大容量硬盤很多人以為GPT就是MBR的升級版用來支持2TB以上磁盤。但在域控制器場景下GPT的核心價(jià)值在于結(jié)構(gòu)化、可簽名、可校驗(yàn)的分區(qū)元數(shù)據(jù)。MBR只有64字節(jié)分區(qū)表無法容納數(shù)字簽名而GPT頭分區(qū)數(shù)組共占用至少34個(gè)扇區(qū)17KB其中分區(qū)數(shù)組每項(xiàng)128字節(jié)包含分區(qū)類型GUID、唯一GUID、起始/結(jié)束LBA、分區(qū)名稱及64字節(jié)的分區(qū)屬性字段。我們正是利用這64字節(jié)屬性字段嵌入自定義標(biāo)志位bit0表示該分區(qū)是否啟用dm-verity校驗(yàn)bit1表示是否為當(dāng)前活動(dòng)分區(qū)bit2表示是否允許被FOTA服務(wù)寫入。更重要的是GPT頭本身包含CRC32校驗(yàn)和且整個(gè)GPT頭分區(qū)數(shù)組可被整體哈希并簽名——這意味著任何對分區(qū)表的篡改比如惡意工具修改boot分區(qū)起始地址都會(huì)被安全啟動(dòng)流程直接攔截。我們在某項(xiàng)目中就遇到過供應(yīng)商提供的燒錄工具會(huì)自動(dòng)清空GPT備份頭導(dǎo)致車輛在產(chǎn)線下線后首次啟動(dòng)時(shí)因GPT校驗(yàn)失敗而進(jìn)入安全模式。解決方案是在燒錄腳本末尾強(qiáng)制執(zhí)行sgdisk --backupgpt-backup.bin /dev/mmcblk0并簽名存檔后續(xù)每次啟動(dòng)前由Bootloader校驗(yàn)備份頭一致性。這比單純依賴主GPT頭可靠得多。2.3 安全啟動(dòng)鏈條從BootROM到用戶空間的逐級信任傳遞車規(guī)級安全啟動(dòng)不是“打開UEFI Secure Boot開關(guān)”就能搞定的事。它是一條貫穿硬件、固件、OS、應(yīng)用的四層信任鏈Level 0BootROM固化代碼SoC廠商如NXP S32G、TI Jacinto 7在硅片中固化BootROM其哈希值出廠即鎖定。它只驗(yàn)證第一階段Bootloader如ARM Trusted Firmware BL2的RSA-2048簽名驗(yàn)證失敗則停機(jī)。Level 1ATF/BL31 U-Boot SPL我們采用ARM TF-A作為Secure World入口其編譯時(shí)注入OEM公鑰用于驗(yàn)證U-Boot SPLSecondary Program Loader。SPL負(fù)責(zé)初始化DDR、eMMC并加載主U-Boot鏡像。關(guān)鍵點(diǎn)在于SPL必須禁用所有調(diào)試接口JTAG/SWD且其鏡像需與SoC的OTP fuse key綁定防止被替換。Level 2U-Boot主鏡像與Kernel Image這里最容易被忽視的是Kernel Image的驗(yàn)證粒度。很多方案只驗(yàn)證vmlinuz卻忽略initramfs.cgz。正確做法是U-Boot使用FITFlattened Image Tree格式打包kerneldtbinitramfs整個(gè)FIT鏡像用私鑰簽名U-Boot啟動(dòng)時(shí)調(diào)用verify命令校驗(yàn)整包簽名。我們曾發(fā)現(xiàn)某供應(yīng)商提供的Kernel未打包initramfs而是通過root/dev/mmcblk0p3掛載外部分區(qū)導(dǎo)致攻擊者只需篡改該分區(qū)即可繞過簽名驗(yàn)證。Level 3Rootfs完整性校驗(yàn)dm-verity即使Kernel通過驗(yàn)證rootfs仍可能被篡改。我們采用Linux內(nèi)核原生dm-verity機(jī)制在構(gòu)建rootfs時(shí)用veritysetup生成哈希樹hash tree將根哈希root hash寫入initramfs的/etc/verity.conf并在Kernel cmdline中指定rd.verity1 rd.verity.data/dev/mmcblk0p4 rd.verity.root_hashhex。這樣內(nèi)核在掛載rootfs前會(huì)重建哈希樹并比對根哈希任何塊級篡改都會(huì)導(dǎo)致掛載失敗并panic。注意必須使用SHA256算法而非MD5且哈希樹需存儲(chǔ)在獨(dú)立分區(qū)如p5避免與rootfs同區(qū)被污染。提示安全啟動(dòng)的調(diào)試陷阱——U-Boot的printenv命令會(huì)顯示所有環(huán)境變量包括bootcmd中硬編碼的啟動(dòng)參數(shù)。但量產(chǎn)時(shí)必須將這些敏感參數(shù)如verity root_hash寫入OTP或eFuse而非僅存于U-Boot env。否則攻擊者可通過setenv bootcmd ... saveenv劫持啟動(dòng)流程。2.4 AB分區(qū)策略不止是A/B而是A/B/C/D的彈性演進(jìn)標(biāo)準(zhǔn)AB分區(qū)A-active, B-inactive能滿足基礎(chǔ)回滾需求但在復(fù)雜域控場景下存在明顯短板問題1升級窗口期風(fēng)險(xiǎn)若車輛在B分區(qū)升級中突然斷電B分區(qū)處于半寫入狀態(tài)下次啟動(dòng)雖能回退到A但B分區(qū)殘留垃圾數(shù)據(jù)可能影響下次升級。問題2多版本并行需求某些車型需同時(shí)維護(hù)3個(gè)版本當(dāng)前穩(wěn)定版A、待驗(yàn)證版B、緊急熱修復(fù)版C。我們的解決方案是四分區(qū)彈性AB架構(gòu)分區(qū)用途特性p1 (boot)U-Boot SPL ATF只讀OTP鎖定p2 (env)U-Boot環(huán)境變量獨(dú)立小分區(qū)防擦寫干擾p3 (A-root)A分區(qū)rootfs啟動(dòng)時(shí)由U-Boot根據(jù)boot_part變量選擇p4 (B-root)B分區(qū)rootfs同上p5 (verity-hash)dm-verity哈希樹存儲(chǔ)區(qū)與rootfs分區(qū)分離p6 (update)FOTA臨時(shí)下載區(qū)大小最大rootfs鏡像×2支持?jǐn)帱c(diǎn)續(xù)傳關(guān)鍵創(chuàng)新在于U-Boot不硬編碼啟動(dòng)分區(qū)而是讀取p2分區(qū)中的boot_part3變量決定啟動(dòng)p3或p4。FOTA服務(wù)升級時(shí)先將新鏡像解壓到p6再用dd ifp6 of/dev/mmcblk0p4 bs4M寫入B分區(qū)最后執(zhí)行fw_printenv -s boot_part4 fw_saveenv原子化切換。這樣即使寫入p4中途失敗p2中的boot_part仍為3系統(tǒng)必然啟動(dòng)A分區(qū)。而p6分區(qū)采用exFAT格式非ext4因其無日志機(jī)制寫入失敗不會(huì)導(dǎo)致文件系統(tǒng)損壞且支持超大單文件4GB。3. 核心實(shí)現(xiàn)細(xì)節(jié)與實(shí)操要點(diǎn)3.1 GPT分區(qū)表的精準(zhǔn)構(gòu)建與簽名實(shí)踐構(gòu)建GPT不是fdisk交互式操作就能搞定的。我們必須用sgdisk腳本化生成確??芍貜?fù)、可審計(jì)。以下是我們量產(chǎn)項(xiàng)目使用的分區(qū)腳本片段# 清空磁盤并創(chuàng)建GPT sgdisk -Z /dev/mmcblk0 # 創(chuàng)建boot分區(qū)p1存放SPL/ATF/U-Boot大小32MB sgdisk -n 1:2048:32M -t 1:25600000-0000-0000-0000-000000000000 -c 1:boot /dev/mmcblk0 # 創(chuàng)建env分區(qū)p2U-Boot環(huán)境變量大小2MB sgdisk -n 2:0:2M -t 2:C12A7328-F81F-11D2-BA4B-00A0C93EC93B -c 2:env /dev/mmcblk0 # 創(chuàng)建A-root分區(qū)p3主系統(tǒng)分區(qū)大小2GB sgdisk -n 3:0:2G -t 3:0FC63DAF-8483-4772-8E79-3D69D8477DE4 -c 3:a-root /dev/mmcblk0 # 創(chuàng)建B-root分區(qū)p4備用系統(tǒng)分區(qū)大小2GB sgdisk -n 4:0:2G -t 4:0FC63DAF-8483-4772-8E79-3D69D8477DE4 -c 4:b-root /dev/mmcblk0 # 創(chuàng)建verity-hash分區(qū)p5哈希樹存儲(chǔ)大小128MB sgdisk -n 5:0:128M -t 5:0FC63DAF-8483-4772-8E79-3D69D8477DE4 -c 5:verity-hash /dev/mmcblk0 # 創(chuàng)建update分區(qū)p6下載緩存區(qū)大小4GB sgdisk -n 6:0:4G -t 6:0FC63DAF-8483-4772-8E79-3D69D8477DE4 -c 6:update /dev/mmcblk0 # 強(qiáng)制寫入備份GPT頭到LBA 33并生成校驗(yàn) sgdisk -b gpt-backup.bin /dev/mmcblk0 sha256sum gpt-backup.bin gpt-backup.sha256注意-t參數(shù)后的GUID必須嚴(yán)格匹配。例如boot分區(qū)類型GUID25600000-...是ARM64 EFI System Partition標(biāo)準(zhǔn)而rootfs分區(qū)類型GUID0FC63DAF-...是Linux filesystem通用標(biāo)識(shí)。錯(cuò)誤的GUID會(huì)導(dǎo)致U-Boot無法識(shí)別分區(qū)。我們曾因復(fù)制粘貼錯(cuò)誤將p1類型GUID寫成C12A7328-...EFI System導(dǎo)致SPL加載失敗調(diào)試耗時(shí)3天。簽名環(huán)節(jié)采用OpenSSL生成PKCS#7簽名# 將GPT備份頭與分區(qū)表合并為二進(jìn)制流 cat gpt-backup.bin /dev/mmcblk0 | dd bs512 count34 ofgpt-full.bin 2/dev/null # 使用OEM私鑰簽名 openssl smime -sign -in gpt-full.bin -out gpt-signed.bin -signer oem-cert.pem -inkey oem-key.pem -binary -outform DER # 燒錄時(shí)BootROM先校驗(yàn)gpt-signed.bin的CMS簽名再解包出gpt-full.bin寫入磁盤3.2 Linux內(nèi)核配置與dm-verity深度定制標(biāo)準(zhǔn)Linux內(nèi)核v5.10已支持dm-verity但車規(guī)場景需針對性裁剪必須啟用的內(nèi)核選項(xiàng)CONFIG_DM_VERITYy CONFIG_CRYPTO_SHA256y # verity必須用SHA256MD5已被淘汰 CONFIG_CRYPTO_AESy # AES用于密鑰派生 CONFIG_BLK_DEV_DMy # Device Mapper基礎(chǔ) CONFIG_SECURITYFSy # 用于暴露verity狀態(tài)到/sys強(qiáng)烈建議禁用的選項(xiàng)減小內(nèi)核體積提升啟動(dòng)速度# 禁用所有非必要加密算法 CONFIG_CRYPTO_MD4n CONFIG_CRYPTO_MD5n CONFIG_CRYPTO_SHA1n CONFIG_CRYPTO_DESn # 禁用調(diào)試功能 CONFIG_DM_DEBUGn CONFIG_SECURITY_YAMAn構(gòu)建verity哈希樹的關(guān)鍵命令# 假設(shè)rootfs已制作成squashfs鏡像rootfs.sqsh # 1. 創(chuàng)建verity映射表 echo 0 $(blockdev --getsz /dev/mmcblk0p3) verity 1 /dev/mmcblk0p3 /dev/mmcblk0p5 4096 4096 1 sha256 $(sha256sum rootfs.sqsh | cut -d -f1) 0000000000000000000000000000000000000000000000000000000000000000 verity-table.txt # 2. 加載dm-verity設(shè)備測試用 dmsetup create vroot --table $(cat verity-table.txt) # 3. 掛載驗(yàn)證 mount -t squashfs /dev/mapper/vroot /mnt/test # 4. 生成哈希樹并寫入p5分區(qū) veritysetup format --hash-algsha256 --salt00000000000000000000000000000000 rootfs.sqsh /dev/mmcblk0p5實(shí)操心得veritysetup format生成的哈希樹默認(rèn)使用16KB塊大小但eMMC實(shí)際頁大小為4KB。若不匹配會(huì)導(dǎo)致I/O性能下降30%。解決方案是在format命令中添加--data-block-size4096參數(shù)并確保Kernel cmdline中rd.verity.block_size4096一致。3.3 FOTA服務(wù)層設(shè)計(jì)輕量級、可審計(jì)、強(qiáng)隔離我們摒棄了復(fù)雜的Yocto-based OTA框架如RAUC采用自研輕量級FOTA Agent原因有三啟動(dòng)時(shí)間敏感RAUC啟動(dòng)需加載Python解釋器DBus增加2.3秒啟動(dòng)延遲而域控制器從上電到CAN通信建立必須≤3秒內(nèi)存受限車規(guī)MCU通常僅512MB RAMRAUC常駐進(jìn)程占用120MB審計(jì)要求主機(jī)廠要求所有升級操作日志必須以二進(jìn)制格式寫入專用日志分區(qū)且不可被用戶空間刪除。Agent核心組件fota-daemonC語言編寫靜態(tài)鏈接內(nèi)存占用8MB。監(jiān)聽HTTP端口接收升級包校驗(yàn)包簽名ECDSA-P256解包到p6分區(qū)。fota-executor升級執(zhí)行引擎以CAP_SYS_ADMIN權(quán)限運(yùn)行負(fù)責(zé)調(diào)用dd寫入B分區(qū)更新U-Boot env變量觸發(fā)安全重啟echo b /proc/sysrq-triggerfota-audit獨(dú)立進(jìn)程將每次升級的timestamp|package-hash|result|duration寫入p7audit分區(qū)該分區(qū)掛載為/dev/mmcblk0p7且chattr i設(shè)置不可修改屬性。關(guān)鍵代碼片段fota-executor中安全重啟// 避免普通reboot導(dǎo)致文件系統(tǒng)未同步 sync(); // 強(qiáng)制刷盤 // 關(guān)閉所有CAN/ETH接口防止重啟瞬間報(bào)文錯(cuò)亂 system(ip link set can0 down); system(ip link set eth0 down); // 執(zhí)行安全重啟先關(guān)閉看門狗再觸發(fā)sysrq int fd open(/dev/watchdog, O_WRONLY); if (fd 0) { write(fd, V, 1); // 關(guān)閉看門狗 close(fd); } // 寫入sysrq觸發(fā)硬重啟 int sysrq_fd open(/proc/sysrq-trigger, O_WRONLY); if (sysrq_fd 0) { write(sysrq_fd, b, 1); // 立即重啟不調(diào)用shutdown close(sysrq_fd); }3.4 安全啟動(dòng)調(diào)試與故障注入實(shí)戰(zhàn)量產(chǎn)前必須進(jìn)行100%故障注入測試。我們搭建了專用測試臺(tái)架模擬以下典型故障故障類型注入方式預(yù)期行為實(shí)際驗(yàn)證方法BootROM驗(yàn)證失敗燒錄篡改簽名的ATF鏡像SoC停機(jī)LED紅燈常亮示波器捕獲POR信號(hào)確認(rèn)無CLK輸出U-Boot SPL驗(yàn)證失敗修改SPL二進(jìn)制中RSA簽名字段SPL打印Signature verify fail后haltUART日志抓取確認(rèn)錯(cuò)誤碼0x1AKernel FIT驗(yàn)證失敗替換FIT鏡像中任意1字節(jié)U-Boot打印FIT image signature bad檢查U-Boot log buffer確認(rèn)verify返回-EBADMSGdm-verity校驗(yàn)失敗用dd向p3分區(qū)寫入1字節(jié)臟數(shù)據(jù)Kernel panic: device-mapper: verity: Unexpected hash failure串口捕獲panic log確認(rèn)call trace指向dm_verity_ctrAB分區(qū)切換失敗手動(dòng)修改p2分區(qū)中boot_part5非法值U-Boot fallback到默認(rèn)p1啟動(dòng)加載SPL失敗觀察啟動(dòng)日志是否出現(xiàn)Invalid boot partition, using default踩過的坑某次測試中U-Boot在驗(yàn)證FIT鏡像時(shí)因內(nèi)存不足malloc失敗導(dǎo)致驗(yàn)證函數(shù)返回NULL但U-Boot未檢查該返回值直接跳轉(zhuǎn)執(zhí)行損壞的Kernel造成靜默崩潰。解決方案是在U-Boot源碼中fit_image_load()函數(shù)末尾添加if (!data) return -ENOMEM;斷言并啟用CONFIG_CMD_MEMORY命令便于現(xiàn)場內(nèi)存診斷。4. 常見問題與排查技巧實(shí)錄4.1 升級后無法啟動(dòng)從BootROM到Kernel的逐層定位法這是FOTA最致命的問題。我們建立了一套五級定位流程按順序排查Level 1BootROM級硬件層現(xiàn)象上電后無任何UART輸出LED無反應(yīng)。排查用示波器測SoC的BOOT_MODE引腳電壓確認(rèn)是否處于eMMC啟動(dòng)模式非SPI NOR檢查eMMC CLK/DS信號(hào)是否正常應(yīng)有200MHz方波。常見原因eMMC焊接虛焊、電源紋波超標(biāo)100mVpp。Level 2SPL級固件層現(xiàn)象UART輸出Starting kernel ...后卡死。排查在SPL源碼中bl31_entrypoint()前插入uart_puts(SPL OK\n)確認(rèn)SPL是否成功跳轉(zhuǎn)。若卡在此處大概率是ATF鏡像與SoC revision不匹配如S32G274A誤燒S32G254A鏡像。Level 3U-Boot級引導(dǎo)層現(xiàn)象UART輸出U-Boot banner但停在Hit any key to stop autoboot。排查按任意鍵進(jìn)入U(xiǎn)-Boot命令行執(zhí)行 printenv bootcmd # 確認(rèn)啟動(dòng)命令是否指向正確分區(qū) mmc info # 檢查eMMC是否識(shí)別 mmc read 0x80000000 0x100 0x10 # 讀取GPT頭確認(rèn)分區(qū)表有效 fatls mmc 0:1 # 列出boot分區(qū)文件確認(rèn)uImage存在常見問題bootcmd中root/dev/mmcblk0p3寫成root/dev/mmcblk0p4但p4尚未寫入有效rootfs。Level 4Kernel級內(nèi)核層現(xiàn)象U-Boot打印Starting kernel ...后黑屏。排查在Kernel cmdline中添加consolettyS0,115200n8 earlyprintk捕獲早期log。若看到Uncompressing Linux... done, booting the kernel.后無輸出說明Kernel解壓成功但未跳轉(zhuǎn)。此時(shí)需檢查dtb文件是否與Kernel版本匹配scripts/dtc/dtc -I dtb -O dts xxx.dtb反編譯對比CONFIG_ARM_APPENDED_DTBy是否啟用某些SoC要求DTB追加在zImage末尾Level 5Rootfs級系統(tǒng)層現(xiàn)象Kernel啟動(dòng)成功但卡在Waiting for root device /dev/mmcblk0p3...。排查在Kernel cmdline中添加rd.debug查看initramfs日志。若出現(xiàn)dm-verity: Hash verification failed說明verity root hash與當(dāng)前分區(qū)不匹配。解決方案重新生成verity哈希樹并更新initramfs中的/etc/verity.conf。4.2 升級耗時(shí)超標(biāo)I/O瓶頸分析與優(yōu)化某項(xiàng)目實(shí)測升級耗時(shí)12分鐘遠(yuǎn)超8分鐘目標(biāo)。我們用perf工具抓取熱點(diǎn)# 在升級過程中記錄 perf record -e block:block_rq_issue,block:block_rq_complete -a sleep 60 perf script io-perf.log分析發(fā)現(xiàn)dd寫入B分區(qū)時(shí)95%時(shí)間消耗在__make_request函數(shù)I/O等待高達(dá)800ms。根本原因是eMMC驅(qū)動(dòng)未啟用HS400模式。解決方案確認(rèn)SoC DTS中usdhc1節(jié)點(diǎn)包含bus-width 8;和max-frequency 200000000;在U-Boot中啟用CONFIG_MMC_HS400_SUPPORT并確保mmc init命令后執(zhí)行mmc speed hs400Linux內(nèi)核啟用CONFIG_MMC_SDHCI_ESDHC_IMXy和CONFIG_MMC_CQHCIyCommand Queue優(yōu)化后寫入速度從15MB/s提升至85MB/s升級時(shí)間降至5分23秒。4.3 安全啟動(dòng)被繞過TPM2.0與Secure Boot的協(xié)同誤區(qū)很多團(tuán)隊(duì)認(rèn)為啟用TPM2.0就能替代Secure Boot這是嚴(yán)重誤解。TPM2.0的作用是度量Measurement而非驗(yàn)證Verification。它可記錄BootROM→ATF→U-Boot→Kernel的哈希值到PCR寄存器但不會(huì)阻止惡意代碼執(zhí)行。真正的防護(hù)必須由Secure Boot在每一級啟動(dòng)時(shí)進(jìn)行簽名驗(yàn)證。我們曾發(fā)現(xiàn)某供應(yīng)商在U-Boot中禁用了Secure Boot卻聲稱“已通過TPM2.0認(rèn)證”。實(shí)測中攻擊者只需替換U-Boot鏡像TPM2.0仍會(huì)正常記錄新哈希但系統(tǒng)已運(yùn)行惡意固件。正確做法是TPM2.0作為審計(jì)補(bǔ)充Secure Boot作為強(qiáng)制防線。兩者關(guān)系如同“行車記錄儀TPM”與“ABS剎車系統(tǒng)Secure Boot”——前者記錄事故后者防止事故。4.4 AB分區(qū)空間不足動(dòng)態(tài)壓縮與增量升級實(shí)戰(zhàn)2GB分區(qū)在AI模型膨脹后很快捉襟見肘。我們采用三級壓縮策略Stage 1SquashFS只讀壓縮將rootfs打包為SquashFS鏡像壓縮率可達(dá)65%相比ext4。關(guān)鍵參數(shù)mksquashfs rootfs/ rootfs.sqsh -comp xz -Xdict-size 100K -no-xattrsStage 2Delta差分升級使用bsdiff生成增量包bsdiff old.sqsh new.sqsh delta.patch實(shí)測對2GB鏡像delta包平均僅120MB。FOTA Agent下載delta.patch后用bspatch實(shí)時(shí)解壓到B分區(qū)。Stage 3運(yùn)行時(shí)解壓在initramfs中集成lz4解壓模塊Kernel cmdline添加rd.lz41使SquashFS在掛載時(shí)動(dòng)態(tài)解壓節(jié)省30%RAM。注意bsdiff對大文件1GB生成patch極慢單次需45分鐘。我們改用Google的Courgette算法將時(shí)間壓縮至3分鐘且patch體積再降18%。但Courgette需預(yù)編譯為ARM64二進(jìn)制且必須與Kernel版本嚴(yán)格匹配。5. 工程落地經(jīng)驗(yàn)與避坑指南5.1 燒錄階段的“隱形炸彈”eMMC vendor ID適配不同eMMC廠商Samsung、Kioxia、Western Digital的vendor ID和CID寄存器格式存在細(xì)微差異。某次量產(chǎn)中同一份U-Boot鏡像在三星eMMC上啟動(dòng)正常在鎧俠eMMC上卻卡在mmc init。用邏輯分析儀抓取CMD線發(fā)現(xiàn)鎧俠eMMC在ACMD41響應(yīng)中返回的OCR寄存器bit30S18R為0表示不支持1.8V信號(hào)但U-Boot默認(rèn)嘗試1.8V初始化。解決方案在U-Boot的drivers/mmc/mmc.c中添加vendor判斷if (mmc-cid[0] 24 0x15) { // Kioxia vendor ID mmc-signal_voltage MMC_SIGNAL_VOLTAGE_330; } else if (mmc-cid[0] 24 0x11) { // Samsung vendor ID mmc-signal_voltage MMC_SIGNAL_VOLTAGE_180; }這個(gè)細(xì)節(jié)在芯片手冊附錄中才有說明但足以讓產(chǎn)線停擺兩天。5.2 FOTA服務(wù)的“灰度發(fā)布”設(shè)計(jì)基于CAN ID的精準(zhǔn)推送主機(jī)廠要求新版本先推送給100臺(tái)測試車而非全量推送。我們不采用IP白名單車端IP易變而是利用CAN總線ID每輛車在出廠時(shí)寫入唯一VIN碼到EEPROMFOTA Agent啟動(dòng)時(shí)讀取VIN計(jì)算CRC16作為CAN ID段。例如VINLSVCM6BR1MA123456→ CRC160x2A3F則該車只響應(yīng)CAN ID0x2A3F的升級指令。云端按此ID段分批下發(fā)既規(guī)避了IP依賴又滿足車規(guī)級離線場景需求。5.3 最后一道防線安全模式的物理實(shí)現(xiàn)當(dāng)連續(xù)3次升級失敗系統(tǒng)必須進(jìn)入安全模式此時(shí)僅保留基礎(chǔ)CAN通信與診斷功能。我們設(shè)計(jì)了雙保險(xiǎn)軟件保險(xiǎn)U-Boot中維護(hù)upgrade_fail_count變量每次升級失敗則1≥3時(shí)自動(dòng)設(shè)置bootdelay0并跳轉(zhuǎn)到safe_boot命令。硬件保險(xiǎn)在主板上增加一個(gè)撥碼開關(guān)SW1短接時(shí)強(qiáng)制U-Boot跳過所有驗(yàn)證直接加載p1分區(qū)中的最小化SafeOS僅含CAN驅(qū)動(dòng)UDS協(xié)議棧。這個(gè)物理開關(guān)在產(chǎn)線刷寫和售后維修時(shí)至關(guān)重要避免軟件層面的任何鎖死。我在實(shí)際項(xiàng)目中發(fā)現(xiàn)最可靠的FOTA方案往往誕生于對每一個(gè)“理所當(dāng)然”的質(zhì)疑——比如“GPT分區(qū)表還需要簽名嗎”、“U-Boot環(huán)境變量真的安全嗎”、“Kernel cmdline里的verity參數(shù)會(huì)不會(huì)被篡改”。正是這些看似瑣碎的追問構(gòu)成了車規(guī)級可信升級的基石。當(dāng)你在深夜調(diào)試一臺(tái)卡在dm-verity校驗(yàn)的樣車時(shí)記住那行報(bào)錯(cuò)日志不是障礙而是信任鏈上最誠實(shí)的哨兵。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
伊人五月天综合网| 噜噜狠狠色| 日本高清不卡免费一区二区三区| 五月丁香色色| 五月婷婷色| 综合97五月| 成人无码精品1区2区3区免费看 | 这里只有精彩视频| 五月丁香伊人网| 色情五月| www亚洲无码| 丁香五月天堂| 五月丁香激情婷婷| 亚洲五月停停| 午夜婷婷五月天| 亚洲精品乱码久久久久久按摩观| 丁香六月婷婷色播| 99色免费在线观看| 99热在线播放精品| 亚洲成人AV高清字幕| 九九性爱网| 久热只有这里精品| 天天爽夜夜爽| 五月婷婷乱| 亚洲丁香花色| 久久九九99| 色婷婷情片| 婷婷最新地址| 色欲AVV| 午夜丁香婷婷| 色爱五月天| 色五月大| 激情久久综合| 日本天天色| 色色色99| 91婷色| www天天色天天射| 色婷婷综合五月| www.粉嫩av.com| 99热99精品| 婷婷久久婷婷色五月| 99精彩视频网站在线| 五月天婷婷在线观看| 色五月亚洲| 丁香六月婷婷综合在线| 66成人网| 91久久1118| 色婷婷先锋| 九九热最新| 激情五月天婷婷五月天| 中美日韩成人在线| 天天舔天天爽| 国产AV一区二区三区最新精品| 97久久超碰| www,天天干| 色五月成人| 狼友视频在线观看18| 香蕉人在线香蕉人在线 | 色五月亚洲开心网| 一区二区乱码视频| 欧美人与性动交CCOO| 九九热在线视频| 久久婷婷精品| 九九Y精品热播| 国产女生爱爱AA| www狠狠爱com| 五月丁香六月婷综合成人综合| 99热新网址| 色五月色五天色情网| 丁香五月欧美色综合| 91九色精品| 五月色婷婷影院| 丁香六月婷婷综情欧美| 天天射色五月天| 婷婷五月天天天| 色综合丁香婷婷| 99久久99久久| 国产毛片精品一区二区色欲黄A片| 男女啪啪做爰高潮无遮挡| 91超级碰碰碰| av第一二区| 五月婷啪| 丁香五月天激情网| 亚洲激情四射| 五月婷久久综合| 精品爆操| 日本熟女一区二区| 99精品网| 婷婷色片| 丁香五月冃欧美| 噜啊噜在线| 久久久ww| 超碰无码老师| 中文人妻主播久久| 久热亚洲| 色噜噜狠狠狠狠色综合久欧美| 综合性爱网| 婷婷五月成人有| 五月天精品综合在线| 久久性爱视频网站| 成人做爰黄A片免费看直播室男男| 婷婷WWW久久| 啪啪啪大香蕉| 五月婷婷成人| 人妻免费网站| 五月丁香综合精品| 五月天啪啪啪| 超碰免费99| 天天插天天很| 99热精品在线播放| 色色色色综合网| 丁香六月婷婷综合在线| 国产精品扒开腿做爽爽爽A片唱戏| 4399精品一区二区| 襙逼网| 亚洲旡码| 亚洲色综久久五月| 999热在线视频| 噜噜视频| 婷婷丁香久久| 五月丁香婷婷综合视频| 五月丿香啪啪| 亭亭五月色男人| 欧美交换配乱吟粗大25P| 五月丁香综合成人社区| 开心激情五月天网| 野外99热| 俺去也综合| 成熟妇人A片免费看网站| Av九九| 五月丁香淫淫婷婷婷| 国产这里只有精品| 華人性愛AV在線| 六月丁丁香| 91精品刘玥| 五月综合亚洲色| 亚洲无码99| 高清免费在线视频| 99热这里只有精品一区| 碰碰人人人| 五月丁香六月色婷婷综合五月天| 婷婷丁香五月激情| 久久狠狠高潮亚洲精品 天天摸夜夜摸夜夜狠狠摸| 99热官网| 天天色播| av九九| 久er免费视频| 国产精产国品一二三在观看| 激情丰满熟妇五月| 久热精品免费视频4| 狠狠色丁香婷婷基地| 99在线观看| 九九热这里只有精品7| 日韩在线视频网站| 婷婷亚洲五| 婷婷激情小说| 亚洲小说欧美激情| 色护士综合| 婷婷六月视频| 激情丁香九九五月综合网| 开心婷婷丁香五月| 黄色AV日韩| 91精品国产91久久久久青草| 99 热| 香蕉婷婷| 亭亭五月色男人| 超碰天堂网| 色婷婷亚洲在线| 综合色、色综合| 婷婷婷五月天最新综合你懂的| 五月天婷婷色在线视频免费观看| 99热在线精品观看| 激情亚洲五月| 天堂网色色| 丁香六月婷| 色五月色图| 97碰| 99热只有这里才是精品| 人妻久热| 无遮羞AV| 色婷婷激情| 婷久久| 色噜噜狠狠色综无码久久合欧美| 思思精品久久艹| 色婷婷AV在线观看| 深爱五月激情| 久色婷婷200| 成人丁香色| 尔尔AV一区| 国产精品久久久久久久久久| 79精品视频在线观看,| 日韩精品成人在线| 国自产拍偷拍精品啪啪一区二区| 久re热视频| 天天想夜夜爽天天爽| 久久人妻熟女一区二区| 九九干视频| 色五月之第四色| 99热在线观看成人| 丁香五月激情网| 操一操插一插| 色欲人妻综合aaaaaaaa网| 人与禽A片啪啪| 精品五月天| 丁香婷婷五月色成人网站| 国内外色色色色色成人视频| 五月丁香性爱| 婷婷六月天激情| 久热这里只有国产| 色婷婷五月综合在线| 无码人妻少妇色欲AV一区二区| 亚洲另类视频| 五月综合激情视频| 色99亚洲| 色优久久| BT综合在线视频观看| 国产3p露脸普通话对白| 大香蕉九九| 思思久热| 久久九九99字幕| 激情99热| 碰碰女| 精品婷婷丁香五| 国产一级片| 综合久久久| 99思思热只有在这里看| 激情五月丁香在线观看直播| 夜夜涩涩涩| 色婷婷777狠狠| 婷婷色色欧美综合网| 久久亚洲婷婷| 色色色热热热| www.91色| 狠狠干五月天婷婷网| 性色综合网| 国产XXXX搡XXXXX搡麻豆| 99碰网站| 亚洲啪啪啪啪| 人人操99| 丁香六月婷婷色XXXXX| 色狠狠婷婷| 色五月天在线| 久久久久人妻精选| 五月激情婷婷六月| 五月天激情www| 热99re| 六月婷婷日| 五月香蕉婷婷| 激情五月亚洲| 天天橾夜夜爽| 深爱五月婷婷| 国产精品视频| 99色色网| 99热精品无码| 国产亚洲精品久久久久久郑州 | 丁香九月色| 麻豆WWWCOM内射软件| 色婷婷五月天在线观看| 色一情一乱一伦一区二区三区| 久久久久人妻精品| 国产精品第一国产精品| 五月天婷婷激情六月久久 | 天天插综合网| 91九色国产| 99自拍网| 日产精品久久久久久久蜜臀| 99久热视频在线| 2015在线中文字幕| 六月婷色| 久久久er热| 噜色精品| 婷婷五月六| 婷婷综合成人| 国产欧美日韩综合精品一区二区| 超碰九热| 超碰91av| 天天日婷婷| 五月色丁香激情| 五月婷婷开心丁香| 色综合丁香| 久久久97| 99久久終合| 国产精品丝| 色色五月婷婷| 26uuuuuuuu国产| 欧美色五月| 婷婷五月天色| 五月天大香焦| AV九九| 天天 日综合| 五月综合色播播丁香婷婷 | 色五月色五天色情网| 538午夜激情| 26uuu国产精品| 亚洲色婷婷视频| 五月天激情国产综合婷婷婷| 免费无码毛片一区二区A片| 人五月天婷婷喷水| 五月婷五月婷伊人伊人五月婷| 深爱激情四射| 97在线视频人妻九色| 超碰成人免费| 97欧美在线| 99久久国产宗和精品1上映| 色五月婷婷五月丁香五月| 婷婷五月丁香色综合| 日本综合色图| 庭庭久久内射| 五月天婷婷成人| 日日夜夜婷婷| 91婷婷在线观看| 九九爱这里只有精品| 婷婷五月视频| 日本人妻伦在线中文字幕| 欧美日韩五月婷婷| SESE无码AV| 99热这里只有精品2| Www.sesese丁香| 激情久久久久久| 26UUU精品一区二区c〇m| 九九精品综合| 久久婷婷的综合色丁香五月| 狠狠干五码| 婷婷五月成人| 人妻熟妇国产精品| 天天爱综合网| 丁香六月婷婷激情| 五月天激情小说婷婷基地| 99九九久久| 久久机热探花| 天天干天天干天天干天天干天天干| 亚洲欧美成人在线| 激情久久久| 五月婷婷深深爱| 蜜乳久AV| 久草xx性爱视频| 免费视频99| 婷婷色九月| 久久婷婷六月综合综合| 超爽内射| www.操.com| 夜色五月天| 婷婷色五月激情| 精品久久久人妻| 停停综合色色| 成人欧美日韩| 丁香激情网| 人人干99| 五月丁香婷婷色| 丁香美女五月天婷婷| 猫咪伊人AV| 婷婷五月色丁香在线看| 色9999综合久久| 久久机只有这里精品| 色人久久| 婷婷性爱无码视频| 99精日本久久| 噜噜网免费视频| 丁香六月丁香婷婷激情| 久久人妻伊人| 亚洲一区二区无遮挡A片| 欧美日本va| 91碰免费视频| 五月天婷婷乱论小说| 色情网综合| 婷婷色基地| 色色色色色色色色色色色色色五月天| 色色色在线观看| 97热九九| 天天爱天天操| 99re这里有精品手机在线| 午夜无码熟熟妇丰满人妻| 欧洲日韩一区二区三区| 99re资源在线视频导航| 91九色欧美| 极品色丁香| 婷婷欧美综合| 亚州激情在线视频| 9 9热这里有精品| 天天干天天操天天拍| 久久9RE热视频精品98| 91久久色| 亚洲激情免费久久| 九9九9无码| www.色色五月天.com| 久草五月| av五月天婷婷丁香| 久久亚洲婷婷| 99思思热只有在这里看| 超碰人人艹| 五月丁香久久| 五月天激情婷婷| 99视频在线| 少妇人妻人伦A片| 亭亭五月色男人| 性生活视频98791| 五月婷婷深深爱| 色五月成人网| 婷婷五月成人| 97人人操com| 丁香五月另类色婷婷麻豆| 99视频这里只有免费精品| 5月丁香综合图区| 五月丁香偷拍| 激情五月丁香在线观看直播| 国产熟女大叫受不了| 丁香六月婷| 色狠狠综合入口| 丁香婷婷五月激情| 91亚洲视频| 99热综合| 99网99热| 特级片神马电影| 91九色熟女| 成人无码精品1区2区3区免费看| 久色婷婷200| 激情综合女人网五月播播| 51精品国内探花| 六月婷婷色综合| 99热这里只有精品国产精品| 综合久色五月| 国产精品久久久久久白浆色欲| av在线播放网站| 99热9999| 久久亚洲天堂| 亚洲精品激情| 久久五月婷婷开心网| 99riAv1国产在线观看| 久草婷婷网| 综合色播| 91chinese在线| 天天色,天天日,天天做| 涩涩网五月天| a v色婷婷| 五月天堂色| 中文字幕在线不卡视频| 久久5 9视频免费观看| 亚洲综合99| 这里只有精品视频| 99无码视频| 丁香久久久| 青青草蜜臀| 婷婷丁香六月五月天| 日本97久久久精品| 久热婷婷在线视频| 亚洲色基地| 97日本操| 色约约视频一区二区三区四区五区| 五月丁香亭亭| 无码少妇高潮喷水A片免费| 亚洲精品无码久久| 另类激情综合| 性色五月天| 亚洲第一成人无码A片| 五月婷婷五月天在线| 日日操天天爽| 婷婷色五月丁香六月欧美啪| 五月色天情| 日日做夜夜爱| 丁香五月婷婷色偷偷| A色色| 爱的综合网| 丁香婷五月天| 婷婷射图五月天| 婷婷日日天天| 色播激情五月天| 天天摸夜夜夜| 婷婷五月天综合网| 99热在线精品观看| 色播五月| 99热免费| 97碰碰叉| 亚洲婷婷婷| 日本视频99| 欧美色图天堂网| 99黄色性生活| 婷婷伊人激情婷婷| 丁香五月亚洲| 日韩精品999| 人人摸人人操人人爽| 91丨九色丨东北熟女| 99色色网| 182.t午在线观看| a毛片二逼wwwwwwwwww| 人人操91色| 激情av在线| 操97| www.夜夜騎夜夜狠| 五月天综合网| 人妻中文在线| 香蕉99网| 亚洲五月婷| 成人色色综合| 色婷婷五月天激情在线观看| 亚洲操逼网| 91狠狠综合久久| 日韩艹比| 五月丁香激情婷婷| 麻豆123区| 婷婷丁香18| 久9热在线视频| 操91| 99ri精品在线| 综合激情五月丁香| 婷婷婷久久久| 曰韩少妇内射免费播放| 久久九九re热| 五月www| 天天日,天天干,天天操| www.色五月| 狠狠狠狠狠狠草| 国产精品社区| 激情五月www| 色丁香五月| 99热国品| 九九色中文| 日日爽天天| 五月天色色网站| 色五月丁香A欧美com | 99情色五月天| 加勒比色色| 五月天成人在线视频网站| 久久思思热| 亚洲成人av在线播放| 久久视频婷婷视频| 99日本黄站| www,setingting| 大香蕉九九| 婷婷干五月综合在线播放| 五月香婷婷| 97操男人的天堂| 再次出发二| 色婷婷88| 欧美日韩日韩成人| 五月丁香欧美| 少妇性按摩无码中文A片| 香蕉网久久| 色婷婷六月精品| 99热这里只有精品中文字幕| 天天日夜夜欢| 五月婷婷六月激情| 在线日韩av| er99免费视频在线| 五月激情小说| 激情的五月婷婷蜜桃| 亚洲乱码在线观看| 91成人看片| 啪到高潮激情丁香五月| 天堂伊人干| 色欲人妻综合aaaaaaaa网| 97se视频在线| av免费在线网站| 丁香六月婷婷激情| 91高潮喷水久久久久久久久| 婷婷五月激情在线| 久操乱| 熟女五月天久久综合| 人人摸人人搞| 色六月丁香婷婷啪啪啪| 九九这里都是精品| 九九热亚洲中文在线观看免费| 狼人婷婷久久| 日韩在线视频中文字幕| 97久久人人操| 国产激情久久久| 三级黄网站| 五月丁香啪啪激情| 欧美25p| 99热九九这里只有精品| 人人草人人爱| 狠狠色综合777| 国产亚洲色婷婷久久99精品91| 色,激情五月天| 99热综合| 丁香五月天激情小说| 99热在线观看| 九九免费精品| www久久艹| 亚洲色碰| 国产乱码久久| 精品香蕉99久久久久网站| 六月婷五月丁香| 欧美性生交XXXXX无码小说| 日日干干天天干| wwwav大香蕉| 日本 @ va 免费| 久艹久| 99视频网址| 99无码超碰| 大香蕉五月天婷婷| 九九爱看亚洲| 丁香婷婷五月人体| 丝袜大香蕉| 天干干夜夜操| 大香伊人婷婷影院| 婷婷久久久| 色狠狠六月| 丁香97综合| 亚洲欧洲国产精品| 色五月天综合| 神马欧美精| 六月婷婷综合| 婷婷六月丁香欧美视频在线| 激情四射五月天| 大战熟女丰满人妻AV| 操操操AV| 五月天婷婷综合久久| 中文字幕有多少字| 色欲天天综合| 99视频精品全部免费观看| 九9九9无码| 东京热免费视频| 热思思| 欧美在线视频99| 超碰在线观看三级片| 婷婷五月激情六月| 成人五月天在线视频在线观看| www.99操.com| 狠狠综合网| 99热这| 伊人五月天日日夜夜久久久天天| 超级碰91| 四LLL少妇BBBB槡BBBB| 天天日天天爽| A A色色| 91人妻人人做人碰人人爽九色| 日韩久久成人| 思思热99热| 99亚州综合精品成人网| 激情婷婷丁香五月| 欧美天天草人人草| 99久久精彩视频| 99国产精品白浆在线观看免费| 久久九九国产精品怡红院| 天天综合插插| 精品久色| 91精品久久久久久久| 九九久久久综合| 成人片黄网站色大片免费毛片| 五月婷婷激情久久| 狠狠高潮精品亚洲1| 九九久久99| a色色色色色| 激情久久久久久久久久| 丁香五月天激情四射网络不好 | www色婷婷| 99久久色| 影音先锋AV男人站| 伊人九九68| 专区无日本视频高清8| 91黄操| 精品久久这里热66| 天天做夜夜爽| 丁香五月成人社区| www.色五月.com| 五月婷婷六月婷| 深爱五月中文字幕| 六月丁香射婷婷欧美色图片| 色婷丁香五月| 亚洲精品va| 噜噜狠狠| 激情综合播播| 久久视频这里都是精品| eeuss人妻| 婷婷色亚洲| 婷婷丁香五月天综合AV| 秋霞免费三级片| 色婷网| 色婷婷基地| 色五月首页| 久久久人妻不卡| 激情五月天久久丁香| 97色干| 成人中文字幕在线| 色约约视频一区二区三区四区五区| 国产成人精品亚洲线观看| 色情久久久| pom538精品视频| 在线不卡的视频| 婷婷 伊人 久久| 六月丁香婷| 国产又黄又爽又色的免费| 日日操,夜夜爽| 玖玖激情网| 日本片日本片祼观看网站在线看中文版网页在线看 | 五月婷伊人| 99久久超级| 九九亚洲| 五月网激情| aaa久久久| 丁香五月综合激情性爱| 丁香五月天在线视频| 91性交在线播放| 色偷偷五月天| 欧美va亚洲va| 天堂网亚洲色图| 激情综合区| 色婷綜合网| 99热在线看| 色色综合网站| 激情图片婷婷| 丁香五月激情综合婷综| 天天干夜夜想| AAA亚洲AV| 九九大香蕉黄色影院| 99热婷婷| 色婷婷激情五月天| 色婷婷影院| 亚洲午夜在线视频| 色综合久久44| 丁香伊人综合| 婷婷五月丁香啪啪| 免费看成人AA片无码视频吃奶| 五月天啪啪啪| 天天爽成人综合网站| 人人操人人添人人摸97| 色噜噜狠狠一区二区三区| 韩国婷婷丁香五月| 丁香九月婷| 婷婷丁香综合网| www九九热| 丁香五月天BBw| 天天摸天天肏| 狠狠爱丁香婷| 九九视频在线观看视频6 | 久久亚洲激情五码| 夜夜骑日日操| 久久99综合网| 午夜在线成人网站免费观看| 99免费| 五月婷婷视频| 五月天色综合服务平台| 91色五月| 99欧美三级视频| 色偷偷AV亚洲男人的天堂| 狠狠色噜噜狠狠狠888| 六月丁香深深爱| 99在线视频精品| 日韩久操婷婷| 亚洲精品白浆高清久久久久久| 丁香五月香蕉| 精品人妻久久久久| 亚洲综合另类| www.九月婷婷丁香.com| 成人日韩欧美| 婷婷色五月丁香六月欧美啪| 激情五月五月婷婷| 性生活久久朋友人妻| 婷婷久久欧美| 激情五月天色色| 婷婷久久影院| 爆乳熟女-区二区三区| 九九热精品在线| 九九热只有精品| 国产精品美女| www.操.com| 狠狠色狠狠色综合日日91| 777.色色| 婷婷放心五日爱| 操久久网| 五月丁香啪综合| 天天操五月天| 开心久久网婷婷| 丝袜熟女一区二区三区| 强辱丰满人妻HD中文字幕| 五月丁香影院| 五月天开心激情综合网| 亚洲操人| 五月丁香六月激情综合| 天天肏高清在线| 综合网视频| 六月丁香激情网| 天天成人综合视频| 五月婷婷欲色| 天天日天天做天天操| 白天AV月月| 情五月亚洲婷婷| 色婷婷丁香五月在线| 操操操www.com| 婷婷五月色花丁香社区| 久久五月天婷婷视频| 五月伊人综合| 开心久久五月天| 色五月综合婷婷久久综合婷婷久久综合婷婷久久综合婷婷久久 | 色情久久久| 91大屁股| 九九热视频免费的| 99在线精品在线视频| 婷婷丁香色五月久久88| 五月婷婷中文字幕| 激情五月天综合| 97热精品| 五月色婷婷中文字幕| 丁香婷婷色五月| 天天操天天曰| 全部老头和老太XXXXX| 五月婷婷大香蕉| 婷婷天天色| 裸睡玩奶头(高H)| 性无码专区无码| 超91热| 91综合视频在线| 五月婷婷丁香大陆免费| 九九五月天| 色综合久久五月| 午夜丁香六月婷| 五月婷婷丁香色吧网| 亚洲亚洲亚洲AAAAAA| 婷婷五月免费视频| 婷婷色色丁香五月天| 天天色综网| 五月婷婷丁香六月| 久久成人亚洲欧美电影| 中文字幕婷婷在线| 久久三级视频| 天天做天天爱天天爽在| 五月激情偷拍| 伊人五月婷婷| 国产婷婷色综合AV蜜臀AV| 国产麻豆视频| 99男人天堂| 2015好吊操| 婷婷五月天a| 99超级碰碰| 天天干天天做| 狠狠色婷婷丁香五月| 中美月韩免费A片| 狠狠干总合| 五月激情六月宗合| 婷婷五月天电影网| 琪琪布丁香社区激情五月天| 四月婷婷五月丁香| 国产xxxxx在线观看| 丁香六月婷婷综合在线| 婷婷月综合| 国产看真人毛片爱做A片| 秋霞少妇毛片| 丁香午月AV中文字幕| 久久这里只有精品无码| 99re在线视频| 五月天丁香网| 丁香五月激情综合久久| 天天色播| 天天舔天天摸视频| 丁香五月婷婷六月| 激情小说色五月| av网址在线| 开心五月婷| 性爱视频99| 91在线看片| 韩国情人在线电视剧免费观看高清版全集 | 性爱网六月丁香| 丁香六月婷婷综情欧美| 婷婷五月六月| 亚洲精品亚洲人成人网| 涩涩婷婷五月| 色五月丁香激情视频| 丁香五月婷婷AV| www免费在线视频| 婷婷色播婷婷| 一本综合丁香日日狠狠色| 色色色色五月天| 精品操逼一区二区| 这里只有精品99视频| 超碰在线超碰| 91碰免费视频| 开心五月婷婷六月丁香| 九九热精品在线| 精品99*| 久久婷婷成人视频| 久热AA| 亚洲在线成人| 色婷五月丁香久亚洲| 天天婷婷综合亚洲亚洲| 91婷婷五月丁香碰| 互月天综合| www.91色| 欧美日韩99| 丁香婷婷影院| 中文超碰视在线| 五月天婷婷一起草| 亚洲旡码| 亚洲人人操| 五月丁香六月欧美| 少妇搡BBBB搡BBB搡毛茸茸| 婷婷色网站| 夜夜爱伊人| 五月丁香婷婷色播无码| 久久久区区一久久久久久| 婷色五月天| 激情五月天色色网| 97亚洲婷婷| 久碰久| 婷婷丁香色无五月| 日韩AV无码影片| 日本五月丁香| 91一起艹| 婷婷99狠狠躁天天躁中| 九九综合| 超碰成人AV| 天天操天天操天天操天天操天天操天天操天天操天天操天天操 | 欧美激情五月天| 亚洲欧美综合7777色婷婷| 激情婷婷五月基地| 亚洲av另类在线观看| WWW.桔色成人.COM| 97碰碰碰免费公开在线视频| 五月天婷婷色播综合在线| 久久综合人妻| 人人玩人人橾| www.激情五月| 永久思思热在线| 丁香五月手机在线| 秋霞免费三级片| 天天干电影| 无码四色色色| 久热91| 99re这里只有精品国产99| 九九99久久| 久久久婷丁香五月| 精品国产乱码久久久久久免费| 狠狠干总合| 国产FREESEXVIDEOS性中国| 亚洲五月天伊人| 偷偷与邻居做爰完整视频| 午夜性爱影视一区77| www.色五月| 五月综合亚洲婷婷| 色婷婷av综合网| 热热久久99| 大香蕉狠狠爱主页| 久久伊人9| 色噜噜狠狠色综| 精品一二三区久久AAA片| 色婷婷丁香五月高清在线| 色情终和网| 五月天激情网开心网| 另类国产区| 亚洲综合视频网| 丁香五月婷婷狠狠色| 国产精品人成A片一区二区| 亚洲avjiujiur91| 欧美97超碰| 泰州成人视频| 爱射综合| 精品一二三区久久AAA片| 五月激情综合深爱| 97精品自拍视频| 婷婷色五月激情| 色婷婷五月天天天做| 综合 激情 婷婷| 久久久久久久人妻| 久热这里只有精品3| 亚洲精品无码一区二区| av性爱网站| 人人性久久| 国产激情久久久| 综合图区激情| 欧美大香蕉视频| 最近中文字幕大全免费版在线 | 成人.在线日韩| 日屌日日操日日色| 色婷久久| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 超碰在线91| www.minyis.com【JT】国内CDN落地页保证转化QQ2101460746 | 婷婷五月天成人动漫 | 天天插天天干| 激情五婷网| 99在线精品观看99| 激情都市另类| 黄色一级影片| 天天色一道本综合婷婷| 日本在线wwww| av在线资源| 黄色AAAAA| 97色色色色色色色| 婷婷激情四射五月天| 久久综合婷婷| 夜丁香五月婷婷| www久久久久| 成人视频网| 午夜婷婷久久 | 六月婷婷香蕉| 欧美99热| 婷婷六月丁香五月| 婷婷婷色五月| 成人网站av免费网站推荐| 农村熟妇高潮精品A片| 婷婷丁香五月激情密臀av| 激情综合网之激情五月| 丁香五月婷婷激情四射| 成人精品视频99在线观看免费| 波多野结衣AV无码Porn| 久久在这里有精品| 亚洲Av成人在线观看| 成人午夜视频精品一区| 91久久九久久九久久九久久九久久| 森林影视大全,最好看的2019年视频 | 少妇久久诱惑视频| 久久香蕉福利| 中文字幕成人日韩| 亚洲中文字幕在线观看| 七七九色| 国产午夜一区二区三区| 深爱开心激情网| 久久婷婷国产| 一区二区三区四区牛| 亚洲精品无码一区二区| 五月婷婷99热| 开心激情综合| 天天色天天噜| 26uuu淫色| 亚洲 视频 导航 一区| 久久综合55| 91紱請| 五月在线| 狼人久草| 庭庭久久内射| 婷婷五点亚洲| 开心五月丁香啪| 99er这里只有精品视频| av在线激情| 五月丁香激情啪啪网| 校花娇喘呻吟校长陈若雪视频| 色五月综合网| 婷婷在线综合| 色色色色色色网| 久久久五月四色| 国产成人+综合亚洲+天堂| 婷婷五月色图| 天天干天天曰天天射| 欧美性爱专区| 97久久久久久久久久久| 国产成人精品一区二三区熟女在线 | 婷婷五月欧美| 五月婷三级片| 日韩成人影片网站| 亚洲操逼片| 丁香蜜臀黄色婷婷五月天| 开心五月激情网| 亚洲激情综合免费| 丁香六月天堂| 亚洲国产色色| 五月天色婷婷基地| 亚洲久热无码| 99色最新在线视频网站| WWW激情五月天| 婷婷综合在线观看视频| 久久性爱视频| 婷婷五月天丁香| 91婷婷丁香五月天免费视频网站| 天天色丁香| 新97人人上人人| 色色婷婷丁香| 色综合区| 丁香九月婷婷| 激情五月婷婷免费视频| 国产亚洲在线观看| 天天日天天添| 国产阿姨日皮艹逼内射视频| 婷婷,五月天,丁香,第一| 新99思思视频| 夜夜噜夜夜奇| 欧洲综合色| 亚洲AV成人无码久久精品老人法拉利| 深爱激情69热| 亚洲五月婷婷| 婷婷无码视频| 99热在线播放| 五月综合视频| 婷婷五月性感| 五月丁香婷婷综合网色欲| 色色九九五月天 | 欧美日韩成人免费在线| 东京热伊人| 日本99久久| 婷婷色影音天| 亚洲电影在线观看| www.1024久久| WWW99热| 五月激情丁香六月狠狠干| 天天综合天天玩夜夜玩天天玩夜夜玩 | 天天草天天爽| 亚洲妇女熟BBW| 区啪精品| 久久综合激情| 梁铮版《蜘蛛女侠》在线| 淫荡综合网| 激情五月婷婷| 激情婷婷五月天| 色婷婷激情Av久久久| 婷婷狠狠狠爱| 色色婷| 婷婷激情五月综合在线视频| 这里有精品2| 成人短视频在线| 欧美性猛交99久久久久99按摩| 黃色三级三级三级三级 qixing300.shrkbk.com www.jinbozs.com tianmiaosw.com | 五月丁香拍拍激情综合| 26uuu亚洲精品国产| 久久精品9| 国产肥白大熟妇BBBB视频| 伊人超碰在线| 99啪| 五月天综合区| 99爱视频| 五月婷婷激情网| 九九热青青草| 99这里是99在线视频| 秋霞影音91人妻久久| 99在线精品视频| 任你躁XXXXX麻豆精品| 国产午夜成人免费看片无遮挡| 五月天婷婷久草丁香| 五月丁香激情综合啪| 伊人婷婷激情| 丁香激情四射| 色色色激情网| 婷婷丁香先锋资源网站| 99色在线视频| 精a品a| 亚洲无AV在线中文字幕| 婷婷激情啪啪| 九九视频这里是精品五月| 另类视频五月天| 国产67194| 2022人人操人人看| 丁香五月大片| 狼友超碰| 丁香五月之久操视频| 九九色热| 狠狠五月天激情| 综合网天天| 亚洲超级碰| 情欲综合网| 97香蕉碰碰人妻国产欧美| 久草婷妨| 无码九九| www,超碰| 婷婷丁香五月综合久久| 日韩性视频| 激情五月色综合| 五月天偷拍| 色婷婷导航| 天天色色天天| 亚洲日本韩国| 狠狠色丁香久久久婷| 四色五月婷婷| 性爱网五月婷婷| 丁香五月 综合| 九九热思思| 婷婷99综合| 蜜臀A∨在线水帘洞| 五月婷婷色影院| 超碰2021| 色婷婷五月天激情综合| 另类小说色婷婷| 久久久久久久久久久97| 精品无码99| 2025超碰| 狠狠狠狠狠狠草| 岛国AV网| 婷婷99中文字幕| 99这里都是精品| 日韩久久欧亚| 色999;丁香五月| 少妇水多A片太爽了| 入口五月婷婷六月香| 色色色综合| 91丨九色丨国产在线| 四月婷婷丁香| 伊人久久丁香五月91| 欧美99热| 五月婷婷丁香| 久久99这里只有精品| 亚洲乱码在线观看| 色婷婷色九月| 五月天精品| 91热手机在线| 天天综合天综合| 国产97在线日韩亚洲女人被黑人巨大| 永久无码色| 九九青青草成人| 另类激情五月| 人人操人人看97干| 欧州色色| 九九热99久久99| 五月天激情网页| 六月婷综合| 99视频这里只有久久精品| 日本色五月| 97人妻碰碰中文无码久热丝袜| 97操操操| 婷婷丁香五月亚洲欧美| 狠狠操狠狠爱| 操操操操操操婷婷五月天| 中文字幕永久在线| 热的五码久久精品| 九九色热| 激情宗合哪里能看| 色五月综合| 丁香五月丐人妻| 国产美女无遮挡裸体毛片A片| 99色色最新视频| 激情五月婷婷老师| 精品人妻久久久久久久| 国产97在线日韩亚洲女人被黑人巨大| 久久久久人妻精选| 丁香五月婷婷亚洲激情四射| www,色色色网站| 色偷偷色婷婷| 色婷婷狠狠| 激情五月天在线观看色婷婷| www.色婷婷| 色婷婷狠狠久久综合五月| av一区二区电影免费在线观看| 天天色激情| 天天干天天曰天天射| 色~性~乱~伦~噜| 91色综合网| 婷婷综合网| wwccc久久久| 日本熟女啪啪| 色婷婷久久综合中文久久一本| 人人操人人干AV| 亚洲综合色色色| 五月婷婷综合激情| 26uuu色五月| 色五月播五月| 亚洲午夜AV| 无人区码一码二码三码医生系列| 婷婷五月丁香综合人妻| www.99免费视频| 婷婷色播婷婷| 午夜九九电影| 国产操逼网站| 国产婷婷五月天| 婷婷综合激情五月中文字幕| 色五月婷婷7777| 99久久精品国产色欲| 成人精品在线| 黄色片久久| 日韩综合久| 天天操夜夜夜夜爽| 任你爽在线视频| 激情性爱五月天| 国产熟女日日骚五月丁香爱| 五月丁香激情啪啪网| 五月丁香综合激情| 五月丁花色综合网| 九九干视频| 欧美成人AAA片一区国产精品| 日日操天天| 成人精品在线| 97色精品视频| 成人在线视频网| 狠狠操天天操综合| 中文字幕网站在线观看| 婷婷五月在线视频| 一级黄色尤物综合视频手机在线观看| 亚洲无码成人| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 久热这里只有精品视频6| 色婷婷啪啪啪啪啪啪| 99热在线观看|