免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

Linux設(shè)備驅(qū)動模型深度解析:從device到probe再到sysfs

Linux設(shè)備驅(qū)動模型深度解析:從device到probe再到sysfs 寫明白一個(gè)底層機(jī)制往往比寫下十層業(yè)務(wù)邏輯更有價(jià)值。Linux 設(shè)備驅(qū)動模型就是這樣一類東西它不像進(jìn)程調(diào)度、內(nèi)存管理那樣“顯眼”但無論是嵌入式開發(fā)、內(nèi)核驅(qū)動編寫還是系統(tǒng)穩(wěn)定性排查你繞不開它。很多時(shí)候你覺得驅(qū)動“莫名其妙”不工作或者設(shè)備節(jié)點(diǎn)時(shí)有時(shí)無根子都在設(shè)備模型這一層。這篇文章不堆概念我把我從看源碼到實(shí)際改驅(qū)動、調(diào)硬件過程中對設(shè)備驅(qū)動模型的理解從頭到尾拆一遍。如果你是想搞懂內(nèi)核底層的開發(fā)者不管你是做嵌入式 Linux、內(nèi)核驅(qū)動還是上層應(yīng)用想深入理解sysfs、uevent、設(shè)備熱插拔背后的原理這篇文章都值得你花點(diǎn)時(shí)間。設(shè)備模型不是一塊孤立的“知識”它是連接內(nèi)核各子系統(tǒng)、暴露硬件拓?fù)浣o用戶態(tài)的樞紐。1. 設(shè)備驅(qū)動模型到底在解決什么問題——三個(gè)關(guān)鍵詞講清楚很多人一上來就背struct device、struct device_driver、struct bus_type背完還是懵因?yàn)椴恢肋@些東西到底解決什么問題。我們先退一步想想內(nèi)核在沒有這套模型之前是什么狀態(tài)。早期內(nèi)核里寫一個(gè)驅(qū)動基本是“直接干活”驅(qū)動初始化時(shí)申請中斷號、映射 IO 地址、注冊字符設(shè)備、建/dev節(jié)點(diǎn)。聽起來也沒啥不行但系統(tǒng)一復(fù)雜就亂了。第一個(gè)關(guān)鍵詞資源沖突。同一個(gè)物理中斷號可不能被八個(gè)驅(qū)動同時(shí)請求同一段 IO 地址你映射我也映射誰來仲裁第二個(gè)關(guān)鍵詞熱插拔與動態(tài)加載。USB、SD 卡這些設(shè)備都是中途插進(jìn)來的內(nèi)核怎么知道該把這個(gè)新設(shè)備交給哪個(gè)驅(qū)動第三個(gè)關(guān)鍵詞用戶態(tài)視角。應(yīng)用層ls /sys/class/或者udevadm info為什么能查出設(shè)備的層級關(guān)系這背后總得有一個(gè)組織良好的對象模型。設(shè)備驅(qū)動模型就是內(nèi)核為回答這三個(gè)問題搭建的“中間層”和“調(diào)度室”。它不是某一個(gè)具體驅(qū)動的功能而是驅(qū)動框架的公共服務(wù)。你可以把它理解成一套“內(nèi)核內(nèi)部的登記與查詢系統(tǒng)”所有的設(shè)備、驅(qū)動、總線都在這個(gè)系統(tǒng)里注冊、匹配、綁定然后向用戶態(tài)暴露統(tǒng)一接口。這套模型的核心對象就四個(gè)device設(shè)備、device_driver(驅(qū)動)、bus_type總線、class類。你記住一句話就夠了——總線上掛著設(shè)備和驅(qū)動總線的職責(zé)是讓它們“配對”配對成功后驅(qū)動負(fù)責(zé)操作設(shè)備設(shè)備通過 class 向用戶態(tài)“拋頭露面”。2. device/driver/bus/class 四件套設(shè)備、驅(qū)動、總線、類各自干啥這四件套是設(shè)備模型的骨架。我建議你從這四個(gè)結(jié)構(gòu)體本身入手去理解不要跳過struct的定義直接去看 API那樣永遠(yuǎn)是浮在表面。2.1 struct device一個(gè)設(shè)備在內(nèi)核里的“身份證”struct device是整個(gè)模型最底層的抽象它是“一個(gè)硬件設(shè)備”在內(nèi)核中的表示。這里要特別注意device只管“設(shè)備本身是什么”不管“怎么操作它”。struct device { struct device *parent; // 誰生了我父設(shè)備 struct device_private *p; // 私有的、不對外的數(shù)據(jù) struct kobject kobj; // 所有 sysfs 表現(xiàn)的基礎(chǔ) const char *init_name; // 設(shè)備在 sysfs 里的名字 struct bus_type *bus; // 掛在哪個(gè)總線上 struct device_driver *driver; // 配對成功的驅(qū)動 void *platform_data; void *driver_data; // 驅(qū)動自定義私有數(shù)據(jù)常用 dev_t devt; // 設(shè)備號用于創(chuàng)建設(shè)備節(jié)點(diǎn) ... }這個(gè)結(jié)構(gòu)體里最關(guān)鍵的幾個(gè)問題parent表示設(shè)備在拓?fù)浣Y(jié)構(gòu)中的位置比如 USB 設(shè)備掛在 USB 控制器下面bus指向它所在的總線類型driver一旦被賦值就說明這個(gè)設(shè)備已經(jīng)被“認(rèn)領(lǐng)”了devt是設(shè)備號有了設(shè)備號device_create()才能生成/dev節(jié)點(diǎn)。還有一個(gè)非常容易踩坑的點(diǎn)release回調(diào)函數(shù)。struct device里有個(gè)release函數(shù)指針?biāo)谠O(shè)備引用計(jì)數(shù)歸零時(shí)被調(diào)用用來釋放設(shè)備占用的內(nèi)存。如果你自己動態(tài)kzalloc了一個(gè)device并device_register注冊它而沒有初始化release內(nèi)核在注銷時(shí)會直接報(bào)錯(cuò)并崩潰。這個(gè)我在第 8 章會再展開。2.2 struct device_driver驅(qū)動只是“能力的聲明”驅(qū)動對象struct device_driver同樣掛在內(nèi)核的對象系統(tǒng)里但它本身不包含“操作函數(shù)”它的核心是聲明自己能匹配哪些設(shè)備以及匹配成功后如何初始化/釋放。struct device_driver { const char *name; struct bus_type *bus; const struct of_device_id *of_match_table; int (*probe)(struct device *dev); // 匹配成功后被調(diào)用 void (*remove)(struct device *dev); // 設(shè)備被移除時(shí)調(diào)用 const struct dev_pm_ops *pm; // 電源管理 ... }驅(qū)動本身不干活真正干活的是probe函數(shù)。所謂“寫驅(qū)動”本質(zhì)上是填好probe和remove在probe里把硬件初始化、注冊中斷、建立數(shù)據(jù)通路然后把操作接口暴露給用戶態(tài)。你可能會問那讀寫函數(shù)read/write呢那不叫device_driver那是file_operations是字符設(shè)備層的事。設(shè)備驅(qū)動模型管的是“設(shè)備與驅(qū)動匹配”這件事數(shù)據(jù)通路是匹配成功之后注冊到具體子系統(tǒng)里的。先有匹配后有業(yè)務(wù)。2.3 struct bus_type總線不是物理線是“匹配中介”這是最容易誤解的地方。bus_type不是指 PCB 上的線而是內(nèi)核定義的一種“聚合與匹配規(guī)則”。struct bus_type { const char *name; int (*match)(struct device *dev, struct device_driver *drv); int (*probe)(struct device *dev); int (*remove)(struct device *dev); struct device_attribute *dev_attrs; ... }內(nèi)核里最典型的就是platform_bus_type這是一個(gè)虛擬總線叫platform。它專門用來掛載那些不依附于 USB、PCI、I2C 等物理總線的設(shè)備——比如 SoC 內(nèi)部的 UART、GPIO 控制器、以太網(wǎng) MAC。你會發(fā)現(xiàn)在/sys/bus/platform/devices/下面躺著大量 SoC 內(nèi)部外設(shè)這就是虛擬總線把所有“板級設(shè)備”統(tǒng)一管理起來的實(shí)例??偩€的match函數(shù)是配對規(guī)則的裁判。platform_bus的配對順序我在下一章詳細(xì)拆這里你先記住設(shè)備想要被驅(qū)動找到必須先掛到總線上驅(qū)動想找設(shè)備也得先注冊到同一個(gè)總線上。兩頭缺一頭永遠(yuǎn)配不上。2.4 struct class給設(shè)備“分類”讓用戶態(tài)看得懂class解決的是“用戶態(tài)視角”問題。一個(gè)設(shè)備硬件上在某個(gè)總線上但從應(yīng)用層的角度看你更關(guān)心它是一個(gè)輸入設(shè)備、一個(gè)網(wǎng)絡(luò)設(shè)備還是一個(gè) LED而不是它掛在哪條總線上。struct class { const char *name; struct module *owner; ... }class_create()會在/sys/class/下創(chuàng)建一個(gè)以類名命名的目錄device_create()則在這個(gè)類目錄下創(chuàng)建一個(gè)設(shè)備子目錄并生成/dev節(jié)點(diǎn)。比如你寫一個(gè) GPIO LED 驅(qū)動通常會class_create(led_class)然后device_create(led_class, ...)于是/dev/led出現(xiàn)應(yīng)用層直接 open/write。這就是設(shè)備模型向用戶態(tài)“拋頭露面”的標(biāo)準(zhǔn)路徑。很多驅(qū)動開發(fā)者把class僅僅當(dāng)成“創(chuàng)建設(shè)備節(jié)點(diǎn)的工具”這么理解不算錯(cuò)但要知道它本質(zhì)是設(shè)備模型的一部分是用戶態(tài) sidecar。3. 設(shè)備與驅(qū)動怎么“配對”match 機(jī)制與匹配優(yōu)先級設(shè)備模型的核心操作就是“配對”。每一次device_register()或driver_register()的發(fā)生內(nèi)核都會觸發(fā)一次總線掃描看新來的這個(gè)家伙能不能和已有對象配對成功。以platform總線為例platform_match()是配對的實(shí)際執(zhí)行者。它按下面的順序依次嘗試誰先命中算誰的設(shè)備樹匹配of_driver_match_device()。它會比較設(shè)備樹節(jié)點(diǎn)里的compatible字符串和驅(qū)動的of_match_table中的.compatible。這是現(xiàn)代 ARM/ARM64/RISC-V 平臺最主流的匹配方式。ACPI 匹配acpi_driver_match_device()。在 x86 和某些服務(wù)器平臺上固件用 ACPI 表描述硬件匹配邏輯走的是 ACPI 路徑。ID 表匹配driver_match_device()會查找驅(qū)動里的id_table。比如 I2C 驅(qū)動有i2c_device_idSPI 驅(qū)動有spi_device_id。對于 platform 驅(qū)動platform_driver中也有id_table里面保存的是設(shè)備的name。設(shè)備名/驅(qū)動名匹配platform_match_id()如果都沒命中內(nèi)核會直接比較driver-driver.name和platform_device-name是否一致。很多早期 platform 驅(qū)動就是這么干的現(xiàn)在仍然兼容。這個(gè)順序非常重要。你在調(diào)試時(shí)如果發(fā)現(xiàn)“明明 compatible 不一致驅(qū)動還是 probe 了”很可能就是第 4 步的 name 匹配兜底了反過來你要想確認(rèn)設(shè)備是通過哪種方式匹配上的可以在probe里打印dev-driver或者用ls /sys/bus/platform/devices/.../driver看驅(qū)動符號鏈接是否存在。我當(dāng)初調(diào)一個(gè)傳感器驅(qū)動DTS 里的compatible寫成了vendor,sensor-v1驅(qū)動of_match_table里寫的是vendor,sensor-v2。按我的預(yù)期是匹配失敗結(jié)果驅(qū)動照樣 probe。查了很久才發(fā)現(xiàn)驅(qū)動內(nèi)嵌的 platform_driver 的.name和 platform_device 的name恰好一致走了第 4 步。你以為的設(shè)備樹匹配實(shí)際是 name 兜底匹配。這不算 bug但確實(shí)容易讓人誤判。還有一個(gè)概念叫-EPROBE_DEFER全稱是 probe defer推遲探測。當(dāng)一個(gè)設(shè)備的 probe 依賴另一個(gè)設(shè)備比如依賴某個(gè) regulator、某個(gè)時(shí)鐘或者某個(gè) GPIO 控制器而依賴對象還沒就緒時(shí)驅(qū)動返回-EPROBE_DEFER內(nèi)核不會報(bào)錯(cuò)而是把這個(gè)設(shè)備扔回隊(duì)列等下次有驅(qū)動注冊時(shí)再嘗試。這是設(shè)備模型里最優(yōu)雅的機(jī)制之一。沒有它你要自己寫依賴排序麻煩得多。static int my_probe(struct platform_device *pdev) { struct clk *clk devm_clk_get(pdev-dev, axi); if (IS_ERR(clk)) { if (PTR_ERR(clk) -EPROBE_DEFER) return -EPROBE_DEFER; // 告訴內(nèi)核我再等等 return PTR_ERR(clk); } ... }4. probe 之后的資源生命周期內(nèi)核對設(shè)備的“全生命周期管理”配對成功之后probe被調(diào)用驅(qū)動和設(shè)備正式“綁定”。但設(shè)備模型的故事并沒有結(jié)束它最強(qiáng)大的地方在于對設(shè)備資源生命周期的統(tǒng)一管理。我見過不少開發(fā)者寫的驅(qū)動probe里kzalloc分配內(nèi)存request_irq注冊中斷ioremap映射 IO然后在remove里一步步手動釋放。這樣做本身沒錯(cuò)但效率低而且容易泄漏。設(shè)備模型提供了一套devmmanaged device resourcesAPI讓你的資源自動綁定到設(shè)備生命周期上。struct my_dev { void __iomem *base; int irq; }; static int my_probe(struct platform_device *pdev) { struct resource *res; struct my_dev *mdev; int irq, ret; mdev devm_kzalloc(pdev-dev, sizeof(*mdev), GFP_KERNEL); if (!mdev) return -ENOMEM; res platform_get_resource(pdev, IORESOURCE_MEM, 0); mdev-base devm_ioremap_resource(pdev-dev, res); if (IS_ERR(mdev-base)) return PTR_ERR(mdev-base); irq platform_get_irq(pdev, 0); if (irq 0) return irq; ret devm_request_irq(pdev-dev, irq, my_isr, 0, mydev, mdev); if (ret) return ret; platform_set_drvdata(pdev, mdev); return 0; }注意devm_kzalloc、devm_ioremap_resource、devm_request_irq全程看不到一次手動釋放。這就是devm的威力——當(dāng)設(shè)備被移除remove被調(diào)用或者驅(qū)動從總線上解綁之后內(nèi)核會按照“后注冊的資源先釋放”的順序自動把內(nèi)存、IO 映射、中斷請求、時(shí)鐘、GPIO 等全部清理干凈。devm_系列 API 幾乎是所有現(xiàn)代內(nèi)核驅(qū)動的默認(rèn)選擇。它省下來的不僅是代碼量更是一整類“誰負(fù)責(zé)釋放、什么時(shí)候釋放”的 bug。我甚至見過一個(gè)驅(qū)動因?yàn)槭謩觡free順序?qū)懛磳?dǎo)致use-after-free崩潰的案例。用devm_之后這類問題從根上消失了。當(dāng)然devm_不是萬能藥。如果資源生命周期和設(shè)備生命周期不一致——比如你要保留一塊內(nèi)存供另一個(gè)驅(qū)動使用——你就需要手動管理不能用devm_kzalloc。所以理解devm_的本質(zhì)比記住函數(shù)名更重要devm_就是把這個(gè)資源登記到設(shè)備上讓設(shè)備替你做善后工作。設(shè)備模型的另一個(gè)重要生命周期節(jié)點(diǎn)是uevent。當(dāng)設(shè)備注冊或注銷時(shí)內(nèi)核會向用戶態(tài)發(fā)送uevent事件udev或者mdev、eudev收到事件后在用戶態(tài)完成設(shè)備節(jié)點(diǎn)的創(chuàng)建、權(quán)限設(shè)置、固件加載等動作。內(nèi)核創(chuàng)建設(shè)備、用戶態(tài)生成節(jié)點(diǎn)這解釋了一個(gè)現(xiàn)象嵌入式板子上如果沒跑udev即使驅(qū)動 probe 成功/dev下也不會有節(jié)點(diǎn)。你需要手動mknod或者直接在驅(qū)動里用device_create時(shí)配合devtmpfs來自動生成。5. kobject 與 sysfs看不見的底層架構(gòu)如何變成你能摸到的文件說到/sys就得把設(shè)備模型的底層地基翻出來——kobject和kset組成的“內(nèi)核對象系統(tǒng)”。你可以把kobject理解成一塊“標(biāo)簽”任何想納入設(shè)備模型管理的對象都要內(nèi)嵌一個(gè)kobject。設(shè)備有struct device里的kobj驅(qū)動有kobj總線也有kobj。kobject負(fù)責(zé)三件事引用計(jì)數(shù)生命周期、父子關(guān)系拓?fù)?、sysfs 入口可視化。kset則是同一類kobject的集合你可以把它理解成一個(gè)分組容器。設(shè)備模型里的bus、class、subsystem本質(zhì)上就是kset或者由kset擴(kuò)展開來的。sysfs 是這個(gè)對象系統(tǒng)在用戶態(tài)的一面鏡子。你在終端里看到的一切都是kobject樹在內(nèi)存中的投影/sys/devices/以物理拓?fù)浞绞浇M織的所有設(shè)備這是最真實(shí)的視圖/sys/bus/按總線分組每個(gè)bus下有devices/和drivers/兩個(gè)目錄/sys/class/按功能類型分組比如net、input、gpio、leds方便應(yīng)用層掃描/sys/block/塊設(shè)備專用視圖你打開一個(gè)設(shè)備目錄里面會有大量屬性文件。這些文件背后就是device_attribute或者driver_attribute在驅(qū)動里對應(yīng)的show()和store()函數(shù)。在 sysfs 里cat一個(gè)文件等于內(nèi)核執(zhí)行了一次show()函數(shù)echo 1 file等于內(nèi)核調(diào)用了一次store()函數(shù)。舉個(gè)例子如果你想在 sysfs 里暴露一個(gè)可讀寫的寄存器static ssize_t reg_show(struct device *dev, struct device_attribute *attr, char *buf) { struct my_dev *mdev dev_get_drvdata(dev); u32 val readl(mdev-base REG_OFFSET); return sysfs_emit(buf, 0x%08x\n, val); } static ssize_t reg_store(struct device *dev, struct device_attribute *attr, const char *buf, size_t count) { struct my_dev *mdev dev_get_drvdata(dev); u32 val; if (kstrtou32(buf, 0, val)) return -EINVAL; writel(val, mdev-base REG_OFFSET); return count; } static DEVICE_ATTR_RO(reg_show); static DEVICE_ATTR_WO(reg_store);然后在probe里用device_create_file()注冊屬性文件或者在驅(qū)動里用一個(gè)宏表一次性創(chuàng)建多個(gè)屬性文件。對于底層調(diào)試來說這是最直接的“人機(jī)接口”——不用寫應(yīng)用層工具直接 shell 里讀寫寄存器非常方便。還有一個(gè)細(xì)節(jié)值得提/sys/bus/platform/drivers/xxx/下面有一個(gè)bind和一個(gè)unbind文件。你可以手動把一個(gè)設(shè)備從驅(qū)動上解綁或者強(qiáng)制綁定另一個(gè)驅(qū)動。這在調(diào)試階段極其有用比如某個(gè)驅(qū)動probe時(shí)中斷申請失敗你可以echo device-name /sys/bus/platform/drivers/xxx/unbind修改參數(shù)后再 bind 回去不用反復(fù)卸載加載模塊。ls /sys/bus/platform/drivers/mydev/ echo mydev.0 /sys/bus/platform/drivers/mydev/unbind echo mydev.0 /sys/bus/platform/drivers/mydev/bind這套“對象系統(tǒng) 文件系統(tǒng)”的配合讓內(nèi)核里最復(fù)雜的結(jié)構(gòu)在你面前變成了一棵可以自由瀏覽、操作的目錄樹??梢哉f sysfs 是開發(fā)者理解設(shè)備模型最趁手的地圖。6. 設(shè)備樹入局后驅(qū)動模型發(fā)生了什么變化聊設(shè)備模型不可能繞開設(shè)備樹。設(shè)備樹Device TreeDT對于驅(qū)動模型來說最大的變化是設(shè)備的描述從 C 語言代碼里挪到了 DTS 文件里。在設(shè)備樹之前內(nèi)核里每個(gè)板子都會寫一堆platform_device靜態(tài)定義來描述板載硬件代碼冗余、依賴硬編碼地址、不同板子無法復(fù)用。設(shè)備樹引入后硬件信息變成數(shù)據(jù)——compatible、reg、interrupts、clocks、gpios等屬性在 DTS 里聲明內(nèi)核啟動時(shí)把這些節(jié)點(diǎn)解析成platform_device或者i2c_client、spi_device等具體總線設(shè)備。這就引出了驅(qū)動開發(fā)者要掌握的另一個(gè)匹配表——of_match_tablestatic const struct of_device_id my_of_match[] { { .compatible vendor,mydev-v2, }, { .compatible vendor,mydev-v1, }, { /* sentinel */ } }; MODULE_DEVICE_TABLE(of, my_of_match); static struct platform_driver my_driver { .probe my_probe, .remove my_remove, .driver { .name mydev, .of_match_table my_of_match, }, }; module_platform_driver(my_driver);大概在compatible這塊有三個(gè)容易出問題的點(diǎn)一個(gè)是of_match_table結(jié)尾必須要有哨兵條目也就是{ /* sentinel */ }。很多人抄代碼漏掉這個(gè)空條目導(dǎo)致驅(qū)動加載時(shí)越界讀取probe莫名異常甚至內(nèi)核 panic。另一個(gè)是MODULE_DEVICE_TABLE。這個(gè)宏的作用是讓modinfo能查看驅(qū)動支持的 compatible 列表同時(shí)讓內(nèi)核在模塊熱插拔時(shí)能根據(jù)設(shè)備樹節(jié)點(diǎn)自動加載對應(yīng)模塊。不寫這個(gè)宏如果驅(qū)動是編譯成模塊的很容易出現(xiàn)“設(shè)備樹節(jié)點(diǎn)在驅(qū)動也在卻沒人 probe”的現(xiàn)象——因?yàn)轵?qū)動壓根沒被自動加載。你手動modprobe才有效但一重啟又不行了。還有一個(gè)是compatible的命名規(guī)范一般建議使用廠商名,設(shè)備型號的形式比如fsl,imx6ull-uart。如果你在 DTS 里寫的是全小寫字母在驅(qū)動里寫的是帶大寫字母字符匹配失敗probe不執(zhí)行但 dmesg 里往往沒有明確報(bào)錯(cuò)。排查這類問題要靠of_device_is_compatible()或直接在probe前打印調(diào)試信息。設(shè)備樹還引入了reg和interrupts的屬性解析方式。對于一個(gè) platform 設(shè)備platform_get_resource()會根據(jù)索引獲取內(nèi)存區(qū)域或中斷號而不需要像老式驅(qū)動那樣從靜態(tài)定義里硬讀地址。資源分離讓同一份驅(qū)動源碼支持多個(gè)不同基地址的設(shè)備節(jié)點(diǎn)這正是設(shè)備樹設(shè)計(jì)的初衷——驅(qū)動程序只關(guān)心“這個(gè)我適配的設(shè)備”不關(guān)心“它具體在哪個(gè)地址”。我想特別強(qiáng)調(diào)一點(diǎn)設(shè)備樹并不是只有 ARM 在用RISC-V、x86ACPI 不可用或缺失時(shí)也會用扁平設(shè)備樹。設(shè)備樹本身就是設(shè)備模型在這類嵌入式平臺上的“描述組織方式”。理解了設(shè)備和驅(qū)動模型再看 DTS 里那些uart1 { status okay; };的片段你就知道那其實(shí)是在修改一個(gè)device節(jié)點(diǎn)的一些屬性最終影響的是設(shè)備能否被創(chuàng)建、能否被匹配。7. 手寫一個(gè) platform 驅(qū)動從零看完整鏈路理論說再多不如手寫一遍。我準(zhǔn)備用一個(gè)最小的 platform 設(shè)備驅(qū)動走通“DTS 描述 → 設(shè)備創(chuàng)建 → 總線匹配 → probe → sysfs 暴露 → 用戶態(tài)訪問”這條完整鏈路。第一步DTS 中描述設(shè)備// arch/arm/boot/dts/myboard.dts iomuxc { mydev { compatible vendor,mydev; reg 0x02200000 0x1000; interrupts GIC_SPI 42 IRQ_TYPE_LEVEL_HIGH; }; };這段描述告訴內(nèi)核在某個(gè)總線上掛了一個(gè)設(shè)備廠商是vendor型號是mydev它的寄存器基地址在0x02200000長度是0x1000中斷號是GIC_SPI 42在 ARM GIC 中斷控制器上。第二步寫驅(qū)動骨架#include linux/module.h #include linux/platform_device.h #include linux/of.h #include linux/interrupt.h #include linux/io.h #define REG_DATA 0x00 struct mydev_data { void __iomem *base; unsigned int irq; }; static irqreturn_t mydev_isr(int irq, void *dev_id) { struct mydev_data *data dev_id; u32 status readl(data-base REG_DATA); pr_info(mydev: interrupt, status0x%08x\n, status); return IRQ_HANDLED; } static int mydev_probe(struct platform_device *pdev) { struct resource *res; struct mydev_data *data; int ret; data devm_kzalloc(pdev-dev, sizeof(*data), GFP_KERNEL); if (!data) return -ENOMEM; res platform_get_resource(pdev, IORESOURCE_MEM, 0); >insmod mydev.ko ls /sys/bus/platform/devices/ | grep mydev ls /sys/bus/platform/drivers/mydev/ cat /proc/interrupts | grep mydev如果一切正常你會看到設(shè)備枚舉成功中斷號被分配。這里我要特別推薦module_platform_driver()這個(gè)宏它本質(zhì)上是module_init(mydev_driver_init); module_exit(mydev_driver_exit);自動幫你生成了platform_driver_register/platform_driver_unregister的包裹函數(shù)。這樣寫出來的驅(qū)動結(jié)構(gòu)極其清晰probe做初始化remove做清理剩下的是匹配表信息。在這個(gè)基礎(chǔ)上你還可以利用DEVICE_ATTR加幾個(gè)屬性文件然后在 shell 里直接讀寫寄存器驗(yàn)證硬件。從設(shè)備模型的角度看一個(gè)驅(qū)動做完 probe、注冊好資源、暴露 sysfs 屬性就已經(jīng)是一個(gè)“合格”的驅(qū)動了。至于字符設(shè)備、網(wǎng)絡(luò)子系統(tǒng)、輸入子系統(tǒng)之類的業(yè)務(wù)層都是在 probe 之后往具體框架里注冊的結(jié)果。8. 調(diào)試設(shè)備模型時(shí)我踩過的坑與排查路徑最后一部分我寫點(diǎn)實(shí)戰(zhàn)里最常遇到的問題。設(shè)備模型的好處是高度結(jié)構(gòu)化所以排查問題的路徑也比較固定??右或?qū)動加載了probe 卻不執(zhí)行這是最典型的“設(shè)備模型問題”。排查時(shí)按下面的鏈路走先確認(rèn)設(shè)備確實(shí)被枚舉出來了ls /sys/bus/platform/devices/ | grep xxx。沒有設(shè)備說明 DTS 沒生效檢查 DTS 語法、編譯的 dtb 是否真的加載了compatible字符串有沒有拼錯(cuò)。確認(rèn)驅(qū)動注冊成功ls /sys/bus/platform/drivers/xxx/。沒有驅(qū)動目錄檢查模塊是否加載成功platform_driver_register是否真的執(zhí)行。確認(rèn)匹配條件滿足cat /sys/bus/platform/devices/xxx/uevent看OF_NAME、OF_COMPATIBLE和驅(qū)動modinfo顯示的匹配表是否一致。dmesg里搜platform或者驅(qū)動的名字。如果設(shè)備確實(shí)嘗試過匹配但驅(qū)動返回了-EPROBE_DEFER你不會看到錯(cuò)誤只能看到probe defer的信息??佣O(shè)備節(jié)點(diǎn)時(shí)有時(shí)無如果你沒有跑udev或者跑的是精簡版mdev經(jīng)常遇到內(nèi)核明明已經(jīng)注冊了設(shè)備但/dev下沒節(jié)點(diǎn)。排查思路是看/sys/class/你的類名/下面有沒有對應(yīng)的設(shè)備目錄。有目錄但/dev沒有那是devtmpfs或udev的問題連/sys/class下都沒有那是你的class_createdevice_create沒調(diào)用成功??尤齬elease回調(diào)沒實(shí)現(xiàn)導(dǎo)致 panic前面提過這里展開講。如果你自己kzalloc了一個(gè)struct device然后注冊到總線最后注銷時(shí)內(nèi)核會調(diào)用device-release來釋放這塊內(nèi)存。平臺總線上的平臺設(shè)備一般由內(nèi)核框架統(tǒng)一管理但你自己device_register一個(gè)裸的device時(shí)必須初始化releasestatic void mydev_release(struct device *dev) { kfree(dev); } static int create_my_device(void) { struct device *dev kzalloc(sizeof(*dev), GFP_KERNEL); dev-release mydev_release; dev-bus platform_bus_type; dev_set_name(dev, mydev.0); return device_register(dev); }我當(dāng)初第一次寫類似代碼時(shí)忘了給release賦值device_unregister時(shí)內(nèi)核直接報(bào)BUG: unable to handle kernel NULL pointer dereference然后整個(gè)系統(tǒng) panic。這一坑在中級內(nèi)核開發(fā)者中極其常見??铀膶傩晕募淖x寫返回值問題show()函數(shù)返回的值必須是你實(shí)際寫入buf的字節(jié)數(shù)不能多不能少。echo時(shí)store()返回count。如果你在store()里做了一次strncmp匹配后忘記return countshell 會一直報(bào)echo: write error。新版內(nèi)核還提供了sysfs_emit()之類的安全接口推薦優(yōu)先使用??游錺robe里用了msleep()慢啟動設(shè)備模型的匹配和 probe 是在內(nèi)核線程里串行執(zhí)行的。如果你在probe里加了一個(gè)大延時(shí)系統(tǒng)啟動時(shí)間會肉眼可見地變長。排查慢啟動時(shí)initcall_debug是個(gè)好幫手打開后能打印每個(gè) initcall 的耗時(shí)但 platform 驅(qū)動的 probe 發(fā)生得更早你可以用ftrace的probe事件追蹤。echo 1 /sys/kernel/debug/tracing/events/initcall/enable cat /sys/kernel/debug/tracing/trace坑六驅(qū)動編成模塊但沒自動加載很多板子把驅(qū)動編成.ko放在根文件系統(tǒng)里但沒有跑depmod沒有把模塊路徑加到/etc/modules-load.d/也沒有配置modprobe的別名。設(shè)備樹里明明有兼容節(jié)點(diǎn)驅(qū)動模塊就是不被自動加載。如果你用的 buildroot建議在 rootfs 的/etc/modules里加模塊名或者干脆把驅(qū)動編進(jìn)內(nèi)核——對產(chǎn)品發(fā)布來說編進(jìn)內(nèi)核更省心更新也少。設(shè)備模型這個(gè)抽象層強(qiáng)就強(qiáng)在它把“設(shè)備發(fā)現(xiàn)”“驅(qū)動匹配”“資源生命周期”“用戶態(tài)可視化”全部統(tǒng)一到一個(gè)框架里?;〞r(shí)間把device、device_driver、bus_type、class這四件事想透再看具體子系統(tǒng)的驅(qū)動代碼你會發(fā)現(xiàn)所有套路基本一致總線上有設(shè)備有驅(qū)動匹配之后probe然后注冊業(yè)務(wù)接口。這個(gè)過程熟悉之后內(nèi)核那些看似復(fù)雜的子系統(tǒng)源碼你讀起來會輕松太多。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
www.97碰碰com| 欧美在线97| www.刺激色网站www.| 婷婷伊人综合中文字幕| 婷婷五月天免费视频| 九九热黄色| 九九热123| 97碰在线视频| 五月天激情综合网| 色婷婷五月视频| 免费AV黄在线播放| 六月丁香花婷婷| 97超级碰碰碰| 69综合在线| 欧美激情综合五月色丁香| 欧美大香蕉视频| 9999热这里只有精品| 九九99九九99| 激情婷婷五月| 久9久9热久热| 337p大胆噜噜噜噜噜91Av| 91趴趴| 99精品无码| 99热色精品| 精品色色网| 99视频超级精品| 热99在线精品| 超碰93在线观看| 亚洲九九99精品视频在线播放| 九九99久久| 精品久热69| 99精色| 俺五月| 天天摸天天舔在线视频| 亚洲精品网站色视频| 一本久道综合99| 色射7856五月天激情四射| 九九99精品免费播放| 韩国真做片在线观看| 色香欲综合| 色五月婷婷操逼| 51avj视频大全| 激情五月六月丁香| 亚洲 五月 婷婷 成人| 色小说婷婷五月天天天| 色婷婷色五月丁香| 天天综合天综合| 色综合开心五月深爱五月| 亚洲久久视频| 婷婷精品性性性性性性性| 亚洲久久婷婷| 五月婷激情| 这里有精品2| 丁香五月天的网址。| 玖玖精品资源| 五月天婷久精视频| 久久婷婷热| 99精品久久久久久久婷婷| 日日夜夜天天| 99爱这里只有精品免费视频| 激情六月天| 最近中文字幕大全免费版在线| 无码操B| 色色五月天婷婷| 午夜成人AV在线| www.黄色片-久久成人国产精品在线播放-999AV | 99热这里只有精品热| 婷婷五月免费观看| www.婷婷五月| 九九久久99| 人妻久久久久久久| 日碰日| 婷婷久久欧美| 91操碰| 日韩人妻无码一区二区| 日韩色五月| 久99热在线观看| 亚洲综合五月天婷婷丁香| 国产操碰| 教师性爱毛片| 婷婷五月激情图片| 另类激情五月| 天天操加勒比| 一区二区成人电影免费播放| 色综合天堂| aaa丁香五月天| 九九这里精品| 激情五月天色网站| 97碰碰九九视频| 亚洲视频无| 99热9| 色小说婷婷五月天天天| 日韩人妻无码精品| 大香蕉伊人丁香五月| 激情婷| 九九re精品视频在线观看| 99re视频在线播放| 婷婷五月天成人小说| 色婷婷久久| 亚洲成人免费在线| 欧美人久久| 久久久久亚洲A∨成人乱码电影| 日韩欧美四五区| 五月天亭亭俺也| www.色9| 狠狠色综合网| 99精品久久久| 婷婷操婷婷干婷婷射| 综激情网| 影音先锋91视频| 中文字幕综合网| 色五月亚洲| 欧美日韩成人在线网| 亚洲精品va| 日日噜狠狠色| 少妇出轨做爰高潮A片| 99热 在线播放| 亚洲天堂亚洲色色色| 这里有精品2| 亚洲五月婷婷| 婷婷五月丁香综合| 婷婷综合成人| 天天操天天插天天射| 91欧美日韩综合| 丁香5月婷婷| 黄网在线免费观看| 五月婷婷六月丁香玖玖玫瑰91| 99成人网站| 超碰资源在线| 91丨九色熟女丨首页| 婷婷五月天Av| 五月天精品| 丁香六月婷婷开心婷婷网| 天天艹夜夜爽| 天天射影院| 久99久精品视频| 激情五月天色婷婷综合| 免看黄大片AA | 丁香六月婷婷| 五月婷在线| 日韩婷久| 色99网站| 秋霞丝袜啪啪啪| 欧美天天干天天草| 九九综合九| 激情五月激情综合俺也去婷婷小说| 亚洲无码99| 婷婷狠狠干| 5月激情天| 人妻激情在线| 99久久婷| 综合色久| 六月婷婷色综合| 午夜婷婷久久| 久久电影4399| 超碰碰碰碰| 六月色播| 99熟女| 丁香色成人| 久机视频这只有精品| 日韩AV无码影片| 丁香香五月激情免费视频| 六月丁香五月天| 国产色网站| 婷婷狠狠操| 六月婷婷操逼| 婷婷综合一二三| 丁香五月婷婷综合激情啪啪啪啪啪啪啪| 狠狠色丁香婷婷基地| 九九性视频| 无码se| 99热碰碰热| 婷婷六月视频| 久久久久9999| 九九sese| 亚洲av另类在线观看| 丁香五月激情月| 国产精产国品一二三在观看 | 五月婷综合| 五月天色婷婷网| 久久五月丁香综合| 99热这里都是精品| 另类图片天天影视在线观看| 九九热在线精品视频| 79精品在线视频| 国产熟妇的荡欲午夜视频| 久月丁香爱婷婷综合| 久久五月丁香| 亚洲人成人五月天| www.maotanji.com| 99精品偷自拍| 丁香五月天在线| 大胆伊人久久| 久久99网| 99这里是精品| 成人av在线网站| 第四色五月天| 丁香六月婷婷姐网| 色啪影院| 毛片九九九九九九九九18| 97色色色色色| 久久婷婷青草五月天| 婷婷五月天激情网| 婷婷六月激情综合| 婷婷她六月天| 日韩啪图| 丁香五月婷婷五月| 丁香六月婷婷色XXXXX| 蜜桃婷婷狠狠久久| 国产精品18久久久| 五月丁香六月激情综合| 久久这里99| 大香蕉丁香| 五月婷婷啪啪网| 色情·com| 91中文狠狠综合| 色五月六月| VA色婷婷| 婷婷久久在线| 一点色成人网| 久草a片| 人妻射精AV| 任你弄在线视频免费| 亚洲激情综合| 久久这里99| 9精品视频在线观看| 婷婷五月天色| 亚洲乱码日产精品BD在线观看| 天天综合亚洲综合| 九九热精品99| 五月婷婷很很色| 五月婷婷丁香大陆免费| 亚洲十月婷婷综合| 丁香5月激情网| 国产一级黄色影片,| 超碰亚洲天堂| www,天天干| 激情图片亚洲| 美女黄频aⅴ视频| 成人超碰网| 日日夜夜干| 丁香久久AV| 五月激情婷婷国产精品久久久久久| 337p大胆噜噜噜噜噜91Av| 99热这里只有精品2| 五月天丁香综合久久国产| 亚洲色视频| AV九九| 久久性都花花世界成人免费视频| 天天综合色| 五月婷婷六月丁香综合在线| 91dy.av| 中美日韩成人在线| 狠狠爱婷婷爱| 影音先锋 一区| 国产精产国品一二三在观看| 久久久久婷婷| 日日撸夜夜操| 五月天婷婷基地| 99爱在线精品视频免费观看| 婷婷激情五月| 国产精品美女| 久久这里只有精品8| 色综合播放| 五月婷中文字幕| 91AV视频| 久久人视频| 丁香五月花| 色色色免费视频| 91九色欧美| 五月激情六月婷婷| 婷婷五月天成人网站| 五月婷免费视频久久久| 热99视频精品| 五月丁香网中文字幕| 丁香五月婷婷深爱综合激情 | 九九色欲网| 激情五月婷婷五月| 欧美在线视频免费播放| 九色无码| 99人妻碰碰碰久久久久视| 丁香六月婷婷姐网| 欧美成人网99网| 五月色天五月色| 婷婷六月色丁香视频在线观看| 超碰成人在线观看| 五月丁香六月综合情在线观看| 天天搞天天色综合| www.91九色| 天堂五月婷婷| 欧美va视频| 丁香六月婷婷综合欧美| 五月丁香激情四射综合| 天天激情5月天亚洲| 婷婷综合网| 伊九九三级区| 开心丁五月| henhencao国产在线| 桃色Av色哟哟| 久久人人人人妻| 久久在线人妻| 色婷婷婷婷| 五月亭亭性| 色婷婷五月天在线观看| 五月婷婷黄色| 婷婷五月天小说| 国产日韩精品SUV| 男女啪啪做爰高潮无遮挡| 国产肥白大熟妇BBBB视频| 色欲一区二区三区精品A片| 久久艹 五月天| 五月婷婷很很色| 婷婷五月丁香性爱| 欧美在线97| 人人爱操| 综合图区激情| 日本激情91| 色五月综合激情| 97人妻碰碰中文无码久热丝袜| 激情久久久| 婷婷五月天97干| 天花AV无码| 丁香五月六月综合激情| 99热在线播放| 特黄三级又爽又粗又大| 色吧五月| 欧美啄木乌丝袜人妻系列| 婷婷金品综合视频| 51国精产品自偷自偷综合 | 五月婷婷深深的爱| 激情五月天激情综合网| 亭亭色色五月天| 99热在线观看| 国产视频福利| 男人综合网| 激情丁香六月| 天天干天天爽| 色婷婷在线影院| 丁香五月婷婷狠狠色| 人妻操在线看| 色婷婷成人| 伊人丁香五月天丁香在线婷| 久久99久久99精品免观看粉嫩| www.夜夜操.con| 韩国三级五月天婷婷。| 五月色 亚洲| 天堂AV在线看| 99免费| 婷婷五月丁香亚洲| 亚洲色综合| 精品人妻久久久久久久| 国产 码在线成人网站| 少妇AB又爽又紧无码网站| Av在线不卡一区| 激情四射五月天| 激情五月天小说视频| 欧美 日韩 成人| 性无码专区无码| 国产九九一区二区三区| 婷婷五月天手机版视频| 夜夜干天天操| 二级黄色毛片| 99色在线观看视频| 这里只有精品视频| 色婷婷四色| 亚洲美女高潮久久久久久69| 婷婷亚洲综合| 五月婷婷很很色| 玖玖婷婷色五月| 婷婷五日b| 激情综合网五月丁香| 91色性感五月婷婷丁香| 婷婷激情五月天激情在线| 激情网婷婷五月天| 中文AV网站| 亚洲激情 久久| 大香蕉伊人99| 大香蕉伊在| 翔田千里无码| 亚洲亚洲人成综合网络| 人人操Av| 成人片在线播放| 精品网站:999WWW| 狠狠五月激情婷婷直播片| 五月婷婷啪啪| 色色五月婷婷| 色婷婷丁香五月| 欧美日韩国产一区二区| 99精品免费欧美小视频 | 色综合久久88| 色播五月婷婷| 久久亚洲无码| 亚洲人成色A777777在线观看| 九月丁香八月婷婷加勒比| 五月天色婷婷激情综合| 婷婷五月天久久久| 色色色欧美| 久久东京热婷婷五月| 婷五月天| 综合图片色色| 亚洲无aV在线中文字幕 | 色九月丁香婷婷蜜桃在线观看| 五月丁香六月婷婷亚洲激情综合| 激情六月婷婷| 日韩综合大黄| 最新久久网址| 久久久五月婷婷| 久久性爱视频网站| 九九激情视频| 婷婷色综合av| 五月丁香激情综合六月涩涩爱| 中文字幕av网站| 色狠狠伊人久久五月丁香| 丁香五月综合| 五月婷婷六月激情在线| 三人荫蒂添的好舒服A片| 丁香九月综合| 老师的粉嫩小又紧水又多A片视频| VA日本视频| 在线只有精品| 在线综合婷婷| 日本波多野结衣视频| 日韩色情亚洲五月天婷婷| 婷婷97色| 综合网亚洲| 另类 在线| 久久五月激情| 五月丁了香蕉综合| 极骚大香蕉伊人| 99爱免费视频| 五月天丁香婷婷社区| www.色五月| 婷婷五月丁香综合激情| 五月丁香色婷婷| 婷婷黄色五月天在线视频| 久9视频| 在线观看欧美| 六月丁香激情网| 精品九九在线观看| 超级碰 久久9| 碰碰91| 成人深爱丁香五月| 久9热视频在线| 日日爽日日| 九九大香蕉黄色影院| 超碰人人艹| 日日噜狠狠色综| 少妇搡BBBB搡BBB搡毛茸茸| 99热这里只有精品1998| 色五月大| 久草热8精品视频在线观看| 九九热思思热| WWW.99视频| 天天爽天天| 色婷婷五月网| 99超级碰碰| 九九热在线精品视频| 婷婷五月天影视| 久久五月天激情婷婷| 在线视频另类| 婷婷亚洲在线| av网址在线| 亚洲视频一区| 婷婷色五月激情强奸四射| 高清一区二区三区日本久| 婷婷丁香色五月久久88| 99re免费精品视频| WWW.HENHENL.| www五月| 99视频一区| 另类激情五月| 一本到不卡高清DVD| 99热主页日本| 天天色天天爱天天爽| 在线资源av-超碰中文在线-成人AV| 五月天六月色| 婷婷五月天亚洲| 午夜丁香丁香婷婷| 97久久五月丁香婷婷| 丁香五月色| 五月天色不卡| 亚洲噜色| 很很操很很操| 97人人射| 色天堂97| 色五月激情问网站| 被强行糟蹋的女人A片| 99色中文| 99精品免费视频| 人妻五月天激情开心网| 久久激情视频| A在线观看| 色噜噜狠狠狠狠色综合久欧美| av大香蕉| 999精品乱码77777| 久久天天| 四色五月婷婷在线观看| 插插五月天| 大香蕉伊人久久| 久久五月天网| www.AV在线| 五月婷婷电影院| 婷婷五月色播| 一起草性爱不卡视频| 五月天国产婷婷精品视频在线| 婷婷丁香五月视频| 影音先锋色色色资源色资源色| 五月香蕉婷婷| 婷婷午夜综合| 99色综合| 久久最新色| 九九这里都是精品| 激情综合丁香五月| 天天摸色吧天天摸色吧| 激情综合色婷婷啪啪六月天| 开心五月婷婷在线| 森林影视大全,最好看的2019年视频 | 色色色网站| 色婷婷激情五月天| 激情丁香图片| 激情六月丁| 婷婷五月天狠狠| 99热在线观看这里只有精品| 婷婷五月六月激情| 思思国产99| 丁香五月激情无码视频| 狠狠狠夜夜夜| 99视频精品全部观看10| 六月婷婷八月丁香| 97碰碰在线看视频免费| 免费黄色视频网址| 婷婷色五月天在线| 丁香五月激情网| 99久久久久| 91久操| 生活片五区| 九九99免费理论| 狼人婷婷久久| 超碰免费人妻| 丁香五月社区| 丁香五月天啪啪| 五月天激情视频| 性爱久久| 五月天丁香| 婷婷色五月天在线| 欧美性生交XXXXX无码小说| www.色99| 色婷婷五月天| 九九爱精品网站| 97人人干视频| 99久久新视频| 久久综合首页| 一逼色综合| 婷婷色色狠狠| 涩涩五| 五月丁香婷婷婷婷综合网| AAA亚洲AV| 丁香婷在线| www.狠狠操| 婷婷五月综合色拍| 26UUU精品一区二区| 嫩BBB槡BBBB搡BBBB| 荫道BBWBBB高潮潮喷| 无码成人播放器| 久久色午夜在线导航| 大香婷婷| www.五月婷婷.com| 丁香五月大片| 婷婷噜噜| 激情色色色| 日本综合色图| 欧美97超碰| 丁香五月激情综合婷综| www.粉嫩av.com| 五月色情网| 中文字幕乱轮| 婷婷97碰碰| 婷婷五月成人| 操b视频在线观看一区二区| 热九九九九| 99成人网一区| 久久这里只有精品16| 九九热只有精品| 色婷婷综合网| 五月天婷婷丁香成人网| 色综合激情| 五月天六月天| 六月丁香婷婷综合在线| 欧洲第一无人区观看| 67194线路二在线观看| www.激情com| 《战争与艾拉》完整版| 婷婷开心五月| 五月婷婷色播| 五月丁香偷拍| 激情五月丁香综合蜜桃| 丁香六月婷婷| 蜜臀AV在线观看| 狠狠情色| 天天激情夜夜干| 五月丁香六月情| 色综合色| 99热综合色图| 婷婷五月天亚洲丁香| 亚洲另类婷婷综合| 婷婷五月天综合久久日| 综合欧美五月婷婷| 六月丁香婷婷综合在线| 99热精品在线观看| 1024婷婷综合久久五月天| 狠狠人妻色综合| 色婷婷六月综合| av一区免费看| 天天狠狠婷婷在线| 尔尔AV一区| AA片在线观看视频在线播放| 精典久久| 国产精品久久久海的味道| 99熟女| 亚洲色婷婷五月天| 婷婷五月18永久免费视频| 99re8这里只有精品99re8热视频| www色综合亚洲92| 情欲综合网| 欧美婷婷日本| 国产免费av在线| 人妻在线中文字幕久久| 激情小说五月天| www98日本小时间到了| 可以直接看的AV网站| 国产精品国产成人国产三级| 91色综合| 女同激情久久av久久| 色域五月丁香| 五月丁香婷婷激情在线| 色色婷婷丁香| www激情| 婷婷六月色| 97操在线资源| 亚洲无码九九| 欧美,日韩成人在线| 99色爱| 久久久久久久综合狠狠综合| 79精品视频在线观看,| 在线中文亚洲| 五月天丁香网站| 色婷婷综合在线| 五月天狠狠色| 国产精品电影网| 五月激情久久| 天天狠狠六月婷丁香影院| 91肏肏肏| 婷婷五月天激情影片| 综合色五月| 色色五月丁香婷婷| 婷婷综合激情| 综合网色| 九热...av| 九月丁香八月婷婷久久综合久97| 婷婷开心五月| 婷婷色基地在线看 | 偷偷操99| 天天搞天天色综合| 香蕉婷婷| 久久伊人五月天| 91操网| 91丨九色丨大屁股| 激情五月婷黄版| 天堂美国久久| 九月婷婷综合八月丁香在线观看| 天天插天天插| 麻豆123区| 色欲一区二区三区精品A片| 狠狠色综合777| 狠狠精品干练久久久无码中文字幕| 色婷婷五月天亚洲 | 无码区婷婷五月花开| 99精品国产在热久久婷婷| 日本美女五月天| 亚洲天堂99| 看片视频在线免费日产在线看| 妇激情基地| 亚洲精品色| 婷婷5月开心6月| 色九九九综合| 九九在线精点品| 97日在线视频| 婷婷五月天av| A A色色| 97五月综合网| 黄网在线免费观看| 亚洲AV无码久久精品色欲| av网站不卡在线| www.ppypp| 丁香久久综合| 99精品网| 丁香五月天激情综合| 97碰| 免看黄大片AA | 五月婷在线播放| 99干日本| 91无码一区人妻A片蜜| 99热免| 99re在线视频精品,这里只有精品18,| 午夜天堂一区人妻| 激情第四色| 色婷婷六月性| 丁香亚洲色综合| 91色久| 色视五月天婷婷| 免费AV在线| 色婷婷六月| 五月丁香淫淫婷婷婷| 久久免费9| www.婷婷| 丁香五月六月婷婷综合| 99热精品在线播放观看| 女人天堂久久| 国产XXXX搡XXXXX搡麻豆| 婷婷成人五月天成人文学| 五月婷婷啪| 丁香五月婷婷综合激情啪啪啪啪啪啪啪 | se99视频| 九九热视频免费的| 午夜婷婷| 丁香激情五月天| 五月天婷婷久久| 丁香五月激情在线| oVV4WIB3vFi8D| 日韩高清久久| 怡红院AV亚洲一区二区三区H | 婷婷丁香一月| 婷婷丁香在线| 99玖玖精品| 极品人妻VIDEOSSS人妻| 国产成人综合在线| 99热这里只有精品最新地址获取| 丁香五月婷婷久久综合激情网| 三日本无码| 久久免费精彩视频| 婷婷五月天丁香社区| 久色五月| 亚洲欧洲色色| 色九月| 五月丁香最新| 国产成人综合电影| 五月婷婷五月天| 超碰人人99| 欧美VA在线| 国产婷婷综合| 久久色在线视频| 91凹凸在线| 青青草婷婷久久| 99色色| 人人干人人看| 97性视频| A久久| 开心婷婷五月天激情网| 夜夜做天天爽| 五月婷婷丁香伦理网| 色色色五月婷婷| 五月综合激情| 91丨九色丨老农村| 五月天久久激情| 丁香五月天视频| 日本精品99| 亚洲性爱电影| 另类激情五月在线视频欧美| 天天干狠狠| 五月丁香狠狠| 噜噜噜噜噜色| www.激情五月天com| 激情综合网亚洲色图| 久久久精品99亚洲综合| 东北黄色一级| 久久久久久久久久久月丁| 青青草99re| 丁香社92视频| 丁J香六月首页| 韩日AV片| 九九热青青草| 97久操视频| 五月丁香婷婷综合网色欲| 9久操| 2022久久婷婷| 98永久精品| 一起草av在线观看| 色婷婷激情| 色综合大香蕉| 无码色色色色色| 婷婷五月综合在线| 性爱综合网| 激情深爱婷婷网| 梁铮版《蜘蛛女侠》在线| 色婷婷精品小视频| 五月丁香综合伦理片| 狠狠狠狠狠操| 五月激情天天干| 丁香婷婷激情| 另类A片| 五月天综合久久| 天天插天天插| 1024操逼| 久久精99| 六月婷婷综合激情| 午夜婷婷| 青青草六月丁香| 五月丁香激情婷婷| 成人网站免费在线播放| 激情av| 成人午夜视频精品一区| 久草婷婷在线| 五月丁香A片| 超碰精品国产首页| 亚洲啪啪视频| 五月伊人视频在线看| 精品成人无码A片观看香草视频| 五月婷婷天| 99九九在线视频| 五月丁香偷拍| 久久久一级AAA| 五月丁香综合影院| 婷婷99狠狠躁天天躁| 久久99热精品a片在线观看| 狠狠色噜噜色狠狠狠综合久久成人波| www,com,五月色色| 五月婷婷五月天| 亚洲成AV人片在线观看| 99碰视频| 狠狠va| 很很干夜夜干| 99在线精品视频| 日韩丁香涩| aaa久久| 热的国产,热的综合,热的有码| 色婷婷AV久久久久久久| 日韩精品999| 中文字幕在线aⅴ免费观看| 狠狠综合久久综合| 免费成人va| 五月天另类小说久久小说网| 日韩黄黄| 久cao香蕉影院| 九久9精品| 热99只有精品| 九九黄色网| 青青久久五月| 婷婷五月激情四月综合| 婷婷丁香五月天亚洲| 亚洲成人免费在线| 久久免费少妇高潮99精品| 香蕉婷婷| 亚洲经典小视频| 五月天桃色深爱网| 久久免费干| 草操网| 日欧大屏操| 无码人妻丰满熟妇奶水区码 | www.亭亭五月天| 国产67194| 久re在线| 色色色色色级无码| 五月婷婷影院| 99re欧美精品| 思思热久久阴99| 激情五月天在线视频| 国产SUV精品一区二区6| 九色91视频| 天天天综合网| 婷婷久久综合| 久久综合爱| 五月婷婷丁香瑟瑟视频| 欧美三级巜人妻互换| 99热日本精品| 操一操插一插| 人妻AV中文系列| 五月婷婷激情性爱| 综合久久99| 国产,欧美,学生妹,视频| 激情婷婷五月久久| 天天插天天干| 国产中文字幕在线视频免费观看| 精品久久人妻热| 色情综合网| 九色在线观看91av| 久久视频在线| 少妇性BBB搡BBB爽爽爽视頻| 人人草成人视频| 亚洲综合色成丁香五月色| 婷婷五月色丁香在线看| 久久激情综合| 人人综合91网| 亚州AV超碰人人操| 深夜婷婷 丁香| 99re这里只有精品9| 99精品自拍| 人人操女人| 五月婷婷综合在线| 熟妇天天综合| 99热99re6国产在线播放| 色色亚洲| 色婷婷丁香五月天在线视频| 五月丁香六月婷婷操操操| 激情五月综合网| 五月丁香啪啪啪| 99思思| 99久扒热| 91超碰九色| 久久综合网桃花| 久久丁香五月天| 色天使久久综合| 五月综合色播播丁香婷婷| 色欧美色色色| 99热久草| 九色亚洲| 婷婷六月久久综合导航| avh片在线观看| 国产裸舞表演WWWW| 色婷婷丁香五月| 五月激情婷婷色| 99ER热精品视频| 激情丁香淫荡婷婷| 亚洲字幕AV一区二区三区四区| 色婷婷丁香五月高清在线| 欧美69久成人做爰视频| 狠狠色激情在线| 97干干干丁香| 色婷婷五月天小说网| 免费色婷婷| 99视频只有这里精品| 亚洲天堂有码| 五月天播播中文字幕 | 26UUU欧美激情一区二区| 人妻激情综合| 激情五月婷婷免费视频| 9l视频自拍9l九色成人| 中国AV性爱观看| 久久五月婷综合| 久久美女五月天| 午夜婷婷久久| 亚洲综合激情五月久久| 66精品国产成人| 99国产精品久久久久久久久久久| 99在线观看亚洲| 双性美人被调教到喷水A片| www.av骚货| 综合九九久久| 色五月婷婷久久| 蜘蛛女免费观看完整版高清电影 | 婷婷大乡焦噜噜| 久久九九爽| 亚洲亚洲人成综合网络| 丁香婷婷色| 1024操逼视频| 天天操天天插| 色色色国产| 久久精品63| 日日噜噜夜夜狠狠久久丁香六月| 亚洲激情视频网| www.9色色色| 碰碰91| xxx综合在线| 9色在线视频精品观看| 色婷婷免费观看| 五月停停直播| 5五月综合网亚洲| 成片免费观看视频大全| 色视五月天婷婷| 婷婷五月天久| 日韩AAAAA| 五月好婷婷| 五月婷六月| 亚洲色图欧美色图日本视频| 五月开心激情| 无码一区二区日韩| 日本性视频| 99精品在这里| 99亚洲综合| 日本三级毛片| 国产av天堂| 亚洲情欲| 亚洲色色图片| 综合久久伊人| 欧美肉大捧一进一出免费视频| 99热这里只有精品亚洲| 天堂爱啪啪| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 亚洲综合色丁香五月天| 影音先锋男人AV资源站| 色情综合网| 五月丁香欧美在线| 久久只有精| 爱iii做iiii日日| 激情五月天婷婷五月天| 婷婷五月天六月| 日韩免费乱轮网站| 日韩无码人妻一区二区| 激情av| 2020日日干| 久久 这里只有精品1| 国产 亚洲 在线| 玖玖九九超碰| 五月天丁香网| 黄网免费看| 色情五月天婷婷| 丁香五月天在线视频| 日韩美女在线视频19| 白人荫道BBWBBB大荫道| 五月成人天| 2025天天爽天天摸| 99视频超级精品| 久久激情五月网| 五六月婷婷久久| 天天日夜夜爽| 婷婷大香蕉| 91成人看片| www久热com| 夜夜www| 91精品国产91久久久久青草| 九九热青青草| 99精品视频在线观看| 深爱激情五月天| 99久热在线精品| 久艹久| 99热香港| 亚洲熟妇AV乱码在线观看| 狠狠草在线观看| 8区视频在线| 婷婷午夜天| 久久久五月婷婷| 干亚洲天堂| 天天爽夜夜爽夜夜爽精品| 99九九99九九九视频精彩| 色吧99| 久久成人亚洲欧美电影| 极品人妻VIDEOSSS人妻| 久久九色| 99热亚洲| 久久大香蕉| 久久久精品色| AV在线免费网站| 丁香婷婷六月天| 大香蕉99热| 五月天婷婷丁香导航| 夜夜骑夜夜操| 99爱在线视频观看| 婷婷综合色播网| 婷婷五月激情在线视频| 色婷婷狠狠色| 婷婷色网站| 五月婷婷综合激情| 99热欧| 激情婷婷综合| 91热er| 能看的AV网站| 这里只有免费的精品| 婷婷综合五月激情| 天天色天天噜| 激情五月色综合国产精品| 婷婷五月色丁香在线看| 国精产品久久| 婷婷爱五月天人人爱| 五月天综合婷婷| 五月激情天天干| 色色色9| 天天影院色| 99激情视频| 91一起艹| 99re6久热只有精品6在线直播| 久久9久| 激情小说五月天| 五月婷婷综合在线| 最近中文字幕大全免费版在线 | 亚洲狠狠色丁香婷婷综合久久| 三级av在线| AV六月丁香| 大香蕉人在线65| 久久婷.com| 日日噜狠狠色综| 日本人妻丁香婷婷久久寝取熟女五月| 五月婷庭丁香在线| 五月婷导航| 99视频在线精品| 婷婷色影院| 久久精品国产一区二区三区四区| 极品人妻VIDEOSSS人妻| 啪啪九九色| 香蕉伊人综合| 久久精彩综合视频| 五月情综合| 久久精品视频9| 激情 婷婷| 狠狠操狠狠爱| 日韩青青| 四虎成人精品永久免费AV九九| 天天干天天日天天操| 亚洲精品视频在线| av亚洲国产小电影| 婷婷五月丁香性爱| 大香蕉啪啪| 婷婷五月天AV激情| 国产精品热搜丁香五月婷婷| 99热在线观看精品| 久久精品99国产精品日本| 91狼友视频网页更新| 91九色熟女| 激情综合亚洲| 精品久久久久久久人妻| 日韩久久色| 夜夜穞天天穞狠狠穞AV美女按摩| 超爽内射| 国产精品久久99| 婷婷开心激情综合五月天| 4399亚洲视频| 97超碰,人人舔,人人操,人人摸| 激情婷| 丁香婷婷五月天色综合| 成人性爱无码| 婷婷香蕉| 婷婷五月欧美| 中文字幕丰满乱孑伦无码专区| 六月亭亭久久综合激情| 久激情网| 色色婷婷综合| 亚洲综合九九| 婷婷五月天激情丁香| 久久久18| 久久38视频| 99rewww| 色婷狠狠| 午夜少妇在线观看视频| 99热丁香| 亚洲狠狠狠色婷婷综合激情久久久| 五月天伊人| seav天堂| 婷婷久久五月| 五月丁香六月综合基地| 狠狠色婷婷| 亚洲一区二区无遮挡A片| 狠狠狠激情网| 婷色五月| 九九伦子片| 色色色视频免费无码 | 婷婷五月天天| 九九九热精品| 五月丁香婷婷狠狠操| 久久99热这里只有精品23| 五月天久久综合| 日日噜噜夜夜狠狠久久丁香五月| 久热九九| 天天日日夜夜| 婷婷五月天桃花网| 五月丁香美女| 激情综合国产| 影音先锋男人站,影音先锋男人色资源网,影音先锋AV最新资源站,影音先锋AV资源 | 九月婷婷激情| 欧美97p| 日日夜夜干| 超碰在线视屏| 99成人免费热视频| 亚洲精品久久久久久久久久飞鱼 | 日韩欧洲亚洲| 色五月婷婷青娱乐| 人妻尝试久久久久久久久久久久| 五月天综合久久| 久久久久激情| 99re这里| 欧美综合五月天婷婷tin| 成年AAAA色情| 九九碰九九爱97| 日韩视频女神99| 婷婷五月天欧美| 人人色人人弄人人操| 丁香六月天AV| 日日噜噜夜夜狠狠久久丁香六月| 久久视频婷婷| 婷婷五月天激情网站| 五月天丁香婷婷视频网址| 婷婷5月色| 色五月综合| WWW,色五月| 九月av| 十区av| 亚洲精品婷婷| 超碰精品国产首页| 婷婷开心激情五月激情网| 丁香五月婷婷av影院| 综合久久99| 五月花激情| 日本一区二区三区精品视频| 亚洲激情99| 99性爱| 久久色五月| 免费观看的av| 婷婷综合一二三| 九九热最新| 91色吧网| 天天日夜夜| 91视频一起草| 色人久久| 五月丁香操婷逼| 日韩999| 99精品热视频只有精品10| 东京热免费视频| 色综合激情| 亚洲五月婷婷| www.91九色| 老司机伊人| WWW色五月天| 国产AV一区二区三区日韩| 强伦轩人妻一区二区电影| 久久狠狠高潮亚洲精品 天天摸夜夜摸夜夜狠狠摸| 综合网视频| 大香蕉人人人| 五月婷婷熟女| 久久久激情视频| 日韩视频99| 六月婷婷色五月| 99久在线精品99re8热| 色五月婷婷五月久久| 五月丁香婷婷五月色| 九九热免费| 91AV视频| 97精品欧美91久久久久久久| 欧美日韩成人在线| 亚洲国产精品VA在线看黑人| 日本天天综合| 婷婷最新地址| 另类激情五月| 久久婷婷五月综合色天| 五月婷婷色播| 色婷婷五月天激情| 疯狂做受XXXX高潮A片动画| 丁香六月亚洲综合| 人人操操| 99精品久久久久久久婷婷| 99久久国产宗和精品1上映| 一级AV片| 五月天四色房丁香亭亭| 激情五月天啪啪| 亚洲精品色| 亚洲经典小视频| 久久综合网桃花| 天天草天天爽| 色色亚卅| 欧美日韩成人高清在线| 99热偷拍| 欧洲综合视频在线观看。欧洲,亚洲综合食品在线观看。 | 夜色综合网| 99热最新精品| 在线看AV| 六月丁香婷婷综合狠狠爱夜夜爱| 久久综合这里只有精品1| 伊人喵咪a V| 久久人操| 开心五月丁香综合久久| 婷婷色色丁香| 99ri精品| 99成人小视频| 中文字幕av久久爽一区| 免费视频在线观看的网站| 播五月开心婷婷欧美综合| 五月婷婷啪啪| 色色色丁香| 丁香六月婷| 亚洲VA口|