亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

Linux字符設(shè)備驅(qū)動(dòng)開發(fā):從基礎(chǔ)概念到實(shí)戰(zhàn)實(shí)現(xiàn)

Linux字符設(shè)備驅(qū)動(dòng)開發(fā):從基礎(chǔ)概念到實(shí)戰(zhàn)實(shí)現(xiàn) 1. 項(xiàng)目概述為什么字符設(shè)備驅(qū)動(dòng)是Linux內(nèi)核的基石在嵌入式開發(fā)、服務(wù)器運(yùn)維乃至桌面應(yīng)用開發(fā)中只要你的程序需要和硬件打交道或者需要在內(nèi)核層面實(shí)現(xiàn)一個(gè)特殊的虛擬設(shè)備那么“驅(qū)動(dòng)”這個(gè)概念就繞不開。而字符設(shè)備驅(qū)動(dòng)可以說是Linux驅(qū)動(dòng)開發(fā)中最基礎(chǔ)、最經(jīng)典也是應(yīng)用最廣泛的一類。它不像塊設(shè)備驅(qū)動(dòng)那樣需要考慮復(fù)雜的緩存和I/O調(diào)度也不像網(wǎng)絡(luò)設(shè)備驅(qū)動(dòng)那樣需要處理協(xié)議棧它的核心任務(wù)就是提供一種“字節(jié)流”式的訪問方式。簡單來說你可以把它想象成一個(gè)特殊的文件用戶空間的程序通過標(biāo)準(zhǔn)的文件操作接口open,read,write,ioctl,close來和它交互而驅(qū)動(dòng)則負(fù)責(zé)將這些操作翻譯成對(duì)具體硬件或邏輯的操作。我見過很多剛接觸內(nèi)核開發(fā)的朋友一上來就想搞懂復(fù)雜的框架比如V4L2、DRM或者IIO結(jié)果往往一頭霧水。原因就在于這些高級(jí)框架的底層無一例外都建立在字符設(shè)備驅(qū)動(dòng)框架之上。不理解這個(gè)基礎(chǔ)框架就像蓋樓不打地基看再多的上層建筑也是空中樓閣。今天我們就來徹底拆解Linux的字符設(shè)備驅(qū)動(dòng)框架我會(huì)結(jié)合我過去在多個(gè)嵌入式項(xiàng)目從簡單的GPIO按鍵到復(fù)雜的傳感器數(shù)據(jù)采集中的實(shí)際踩坑經(jīng)驗(yàn)把它的設(shè)計(jì)思想、核心數(shù)據(jù)結(jié)構(gòu)、注冊(cè)流程以及如何與用戶空間通信掰開揉碎了講清楚。無論你是想為一塊自制的開發(fā)板寫驅(qū)動(dòng)還是想深入理解某個(gè)內(nèi)核子系統(tǒng)這篇文章都能給你提供一個(gè)堅(jiān)實(shí)、清晰的起點(diǎn)。2. 核心概念與框架設(shè)計(jì)思想2.1 什么是字符設(shè)備與塊設(shè)備、網(wǎng)絡(luò)設(shè)備的本質(zhì)區(qū)別在Linux的“一切皆文件”哲學(xué)里設(shè)備也被抽象成了文件。但不同類型的設(shè)備其“文件”的行為模式天差地別。理解這種差異是選擇正確驅(qū)動(dòng)框架的前提。字符設(shè)備的核心特征是“字節(jié)流”。數(shù)據(jù)像一個(gè)連續(xù)的水流按順序被讀取或?qū)懭?。典型的例子有終端(/dev/tty*): 你敲入的字符按順序被讀取。串口(/dev/ttyS*): 數(shù)據(jù)一個(gè)字節(jié)一個(gè)字節(jié)地收發(fā)。隨機(jī)數(shù)生成器(/dev/random,/dev/urandom): 每次讀取都得到一串隨機(jī)的字節(jié)流。大部分傳感器比如溫度傳感器你讀取它得到的是一個(gè)代表溫度值的字節(jié)序列。內(nèi)存(/dev/mem,/dev/null): 對(duì)內(nèi)存地址的線性訪問。它的訪問通常是“直接”的沒有中間緩存驅(qū)動(dòng)開發(fā)者可以自己實(shí)現(xiàn)緩存但內(nèi)核不強(qiáng)制提供。一個(gè)read系統(tǒng)調(diào)用可能只讀取幾個(gè)字節(jié)下一個(gè)read會(huì)從上次結(jié)束的地方繼續(xù)。塊設(shè)備則不同它的核心特征是“塊”。數(shù)據(jù)被組織成固定大小的塊如512字節(jié)、4KB并且訪問是“隨機(jī)”的。典型的例子是硬盤、SSD、U盤 (/dev/sda*)。內(nèi)核為塊設(shè)備提供了復(fù)雜的緩存機(jī)制Page Cache和I/O調(diào)度器以提高性能。你可以在文件的任意位置進(jìn)行讀寫而不必關(guān)心物理介質(zhì)上數(shù)據(jù)是否連續(xù)。網(wǎng)絡(luò)設(shè)備則完全脫離了“文件”的抽象。它沒有對(duì)應(yīng)的設(shè)備文件如/dev/eth0而是通過套接字接口進(jìn)行訪問。數(shù)據(jù)以“數(shù)據(jù)包”為單位處理涉及復(fù)雜的網(wǎng)絡(luò)協(xié)議棧。注意區(qū)分字符設(shè)備和塊設(shè)備的一個(gè)簡單方法是字符設(shè)備通常不支持“掛載文件系統(tǒng)”而塊設(shè)備可以。你不能把/dev/ttyS0掛載成一個(gè)目錄但可以把/dev/sda1掛載到/home。2.2 “文件操作”接口驅(qū)動(dòng)與用戶空間的契約字符設(shè)備驅(qū)動(dòng)框架的精髓在于它定義了一套清晰的“契約”。內(nèi)核提供了一套標(biāo)準(zhǔn)的操作函數(shù)集合struct file_operations驅(qū)動(dòng)開發(fā)者需要實(shí)現(xiàn)這個(gè)結(jié)構(gòu)體中與自己設(shè)備相關(guān)的函數(shù)指針。當(dāng)用戶空間程序調(diào)用open(“/dev/mydevice”)時(shí)內(nèi)核最終會(huì)調(diào)用到你驅(qū)動(dòng)中實(shí)現(xiàn)的.open方法。這套設(shè)計(jì)的好處是解耦和統(tǒng)一。用戶空間的應(yīng)用程序員不需要關(guān)心底層是真實(shí)的串口芯片還是一個(gè)虛擬的日志設(shè)備他們一律用read(fd, buf, size)來讀數(shù)據(jù)。驅(qū)動(dòng)開發(fā)者則只需要關(guān)注如何填充file_operations這個(gè)“填空題”內(nèi)核負(fù)責(zé)將系統(tǒng)調(diào)用路由到正確的驅(qū)動(dòng)函數(shù)。2.3 核心數(shù)據(jù)結(jié)構(gòu)關(guān)系圖邏輯層面理解驅(qū)動(dòng)框架必須理清幾個(gè)核心數(shù)據(jù)結(jié)構(gòu)之間的關(guān)系。它們構(gòu)成了驅(qū)動(dòng)模型的骨架。struct cdev: 這是內(nèi)核中代表一個(gè)字符設(shè)備對(duì)象的核心結(jié)構(gòu)。它內(nèi)部包含了一個(gè)struct kobject用于內(nèi)核對(duì)象管理和sysfs導(dǎo)出最重要的是它擁有一個(gè)指向struct file_operations的指針。你可以認(rèn)為一個(gè)cdev就是一個(gè)“驅(qū)動(dòng)實(shí)例”它綁定了具體的操作函數(shù)集。struct file_operations: 這是驅(qū)動(dòng)需要實(shí)現(xiàn)的“方法表”。包含了open、release、read、write、unlocked_ioctl、llseek等一系列函數(shù)指針。驅(qū)動(dòng)的工作就是填充這個(gè)表。struct inode: 索引節(jié)點(diǎn)。在文件系統(tǒng)中每個(gè)文件包括設(shè)備文件都有一個(gè)inode它存儲(chǔ)文件的元數(shù)據(jù)權(quán)限、所有者、時(shí)間戳等。對(duì)于設(shè)備文件inode中有一個(gè)關(guān)鍵的i_cdev字段指向其對(duì)應(yīng)的struct cdev對(duì)象。正是通過這個(gè)鏈接內(nèi)核在打開設(shè)備文件時(shí)能找到該由哪個(gè)驅(qū)動(dòng)來處理。struct file: 文件對(duì)象。每當(dāng)一個(gè)進(jìn)程打開一個(gè)文件包括設(shè)備文件內(nèi)核都會(huì)創(chuàng)建一個(gè)file對(duì)象。它代表了一次打開的上下文。它內(nèi)部包含了一個(gè)f_op指針在打開設(shè)備文件時(shí)這個(gè)指針會(huì)被初始化為對(duì)應(yīng)cdev所擁有的file_operations。此外它還包含一個(gè)private_data指針這是一個(gè)非常重要的字段驅(qū)動(dòng)可以用它來存儲(chǔ)本次文件打開相關(guān)的私有數(shù)據(jù)比如一個(gè)指向設(shè)備硬件寄存器映射地址的結(jié)構(gòu)體。它們的關(guān)系可以簡單描述為用戶程序打開/dev/mydev- 內(nèi)核找到其inode- 通過inode-i_cdev找到對(duì)應(yīng)的cdev- 將本次打開的file-f_op指向cdev-ops- 后續(xù)的read/write等調(diào)用便通過file-f_op-read等指針調(diào)用到驅(qū)動(dòng)實(shí)現(xiàn)的具體函數(shù)。3. 驅(qū)動(dòng)開發(fā)全流程拆解與實(shí)操理論說再多不如動(dòng)手寫一行代碼。下面我們以一個(gè)虛擬的“全局內(nèi)存”設(shè)備為例一步步實(shí)現(xiàn)一個(gè)完整的字符設(shè)備驅(qū)動(dòng)。這個(gè)設(shè)備的功能很簡單在內(nèi)核中分配一段內(nèi)存用戶空間可以通過讀寫/dev/gmem來操作這段內(nèi)存就像操作一個(gè)普通的字節(jié)數(shù)組文件一樣。3.1 環(huán)境準(zhǔn)備與模塊基礎(chǔ)首先你需要一個(gè)Linux開發(fā)環(huán)境??梢允菍?shí)體機(jī)也可以是虛擬機(jī)。確保安裝了對(duì)應(yīng)內(nèi)核版本的頭文件或開發(fā)包。例如在Ubuntu上sudo apt update sudo apt install linux-headers-$(uname -r) build-essential一個(gè)最簡單的內(nèi)核模塊“Hello World”是理解模塊加載/卸載機(jī)制的基礎(chǔ)。這里給出骨架// gmem_driver.c #include linux/init.h #include linux/module.h #include linux/kernel.h MODULE_LICENSE(GPL); MODULE_AUTHOR(Your Name); MODULE_DESCRIPTION(A simple global memory character device driver); static int __init gmem_init(void) { printk(KERN_INFO GMEM: Driver loaded.\n); return 0; } static void __exit gmem_exit(void) { printk(KERN_INFO GMEM: Driver unloaded.\n); } module_init(gmem_init); module_exit(gmem_exit);對(duì)應(yīng)的Makefileobj-m gmem_driver.o KDIR : /lib/modules/$(shell uname -r)/build PWD : $(shell pwd) all: $(MAKE) -C $(KDIR) M$(PWD) modules clean: $(MAKE) -C $(KDIR) M$(PWD) clean編譯 (make) 后使用sudo insmod gmem_driver.ko加載dmesg | tail查看內(nèi)核日志再用sudo rmmod gmem_driver卸載。這個(gè)流程是所有驅(qū)動(dòng)開發(fā)的起點(diǎn)。3.2 核心結(jié)構(gòu)體定義與初始化現(xiàn)在開始為我們的“全局內(nèi)存”設(shè)備定義核心數(shù)據(jù)。#include linux/fs.h // 包含 file_operations 定義 #include linux/cdev.h #include linux/slab.h // kmalloc, kfree #include linux/uaccess.h // copy_to_user, copy_from_user #define GMEM_DEVICE_NAME gmem #define GMEM_BUFFER_SIZE 1024 // 假設(shè)我們的“設(shè)備”只有1KB內(nèi)存 // 代表我們?cè)O(shè)備自身的數(shù)據(jù)結(jié)構(gòu) struct gmem_dev { struct cdev cdev; // 內(nèi)嵌的字符設(shè)備對(duì)象必須 unsigned char *buffer; // 指向設(shè)備內(nèi)存內(nèi)核空間的指針 unsigned long buffer_size; // 緩沖區(qū)大小 // 可以添加其他設(shè)備特定信息如信號(hào)量、自旋鎖等 }; static int gmem_major 0; // 主設(shè)備號(hào)0表示動(dòng)態(tài)分配 static struct gmem_dev *gmem_device;在模塊初始化函數(shù)gmem_init中我們需要做以下幾件事申請(qǐng)?jiān)O(shè)備號(hào)。分配并初始化我們的設(shè)備結(jié)構(gòu)體struct gmem_dev。初始化內(nèi)嵌的struct cdev并將其與file_operations綁定。將cdev添加到內(nèi)核中使其生效。3.3 實(shí)現(xiàn)文件操作集合 (file_operations)這是驅(qū)動(dòng)的“大腦”我們來實(shí)現(xiàn)最關(guān)鍵的幾個(gè)操作。// 首先定義 file_operations static struct file_operations gmem_fops { .owner THIS_MODULE, // 防止模塊在使用中被卸載 .open gmem_open, .release gmem_release, .read gmem_read, .write gmem_write, .llseek gmem_llseek, }; // open 方法 static int gmem_open(struct inode *inode, struct file *filp) { struct gmem_dev *dev; // 通過 inode 找到我們之前注冊(cè)的 cdev進(jìn)而找到我們的設(shè)備結(jié)構(gòu)體 dev container_of(inode-i_cdev, struct gmem_dev, cdev); // 將設(shè)備結(jié)構(gòu)體指針存儲(chǔ)到 file 的私有數(shù)據(jù)區(qū)方便其他函數(shù)使用 filp-private_data dev; printk(KERN_DEBUG GMEM: Device opened.\n); return 0; } // release 方法 (對(duì)應(yīng) close) static int gmem_release(struct inode *inode, struct file *filp) { printk(KERN_DEBUG GMEM: Device closed.\n); return 0; } // read 方法將設(shè)備內(nèi)存內(nèi)核空間的數(shù)據(jù)拷貝到用戶空間緩沖區(qū) static ssize_t gmem_read(struct file *filp, char __user *buf, size_t count, loff_t *f_pos) { struct gmem_dev *dev filp-private_data; ssize_t retval 0; // 計(jì)算可讀的最大字節(jié)數(shù)不能超過緩沖區(qū)大小也不能超過請(qǐng)求的count if (*f_pos dev-buffer_size) return 0; // 文件指針已到末尾 if (*f_pos count dev-buffer_size) count dev-buffer_size - *f_pos; // 核心將內(nèi)核緩沖區(qū)的數(shù)據(jù)拷貝到用戶空間。這是必須的一步不能直接傳遞指針。 if (copy_to_user(buf, dev-buffer *f_pos, count)) { retval -EFAULT; // 拷貝失敗返回錯(cuò)誤碼 goto out; } *f_pos count; // 更新文件指針 retval count; // 返回實(shí)際讀取的字節(jié)數(shù) out: return retval; } // write 方法將用戶空間緩沖區(qū)數(shù)據(jù)拷貝到設(shè)備內(nèi)存內(nèi)核空間 static ssize_t gmem_write(struct file *filp, const char __user *buf, size_t count, loff_t *f_pos) { struct gmem_dev *dev filp-private_data; ssize_t retval 0; // 計(jì)算可寫的最大字節(jié)數(shù) if (*f_pos dev-buffer_size) return -ENOSPC; // 設(shè)備已滿 if (*f_pos count dev-buffer_size) count dev-buffer_size - *f_pos; // 核心將用戶空間數(shù)據(jù)拷貝到內(nèi)核緩沖區(qū)。 if (copy_from_user(dev-buffer *f_pos, buf, count)) { retval -EFAULT; goto out; } *f_pos count; retval count; out: return retval; } // llseek 方法修改文件指針位置 static loff_t gmem_llseek(struct file *filp, loff_t offset, int whence) { struct gmem_dev *dev filp-private_data; loff_t newpos; switch (whence) { case SEEK_SET: // 從文件開始處偏移 newpos offset; break; case SEEK_CUR: // 從當(dāng)前位置偏移 newpos filp-f_pos offset; break; case SEEK_END: // 從文件末尾偏移 newpos dev-buffer_size offset; break; default: return -EINVAL; } // 檢查新位置是否合法 if (newpos 0 || newpos dev-buffer_size) return -EINVAL; filp-f_pos newpos; return newpos; }實(shí)操心得copy_to_user和copy_from_user是用戶空間與內(nèi)核空間數(shù)據(jù)交換的唯一安全通道。直接解引用用戶空間指針會(huì)導(dǎo)致內(nèi)核崩潰或安全漏洞。這兩個(gè)函數(shù)在拷貝失敗時(shí)會(huì)返回未拷貝的字節(jié)數(shù)成功時(shí)返回0所以判斷條件通常是if (copy_to_user(...))。3.4 設(shè)備號(hào)申請(qǐng)與cdev注冊(cè)現(xiàn)在我們?cè)诔跏蓟瘮?shù)中將這些部分串聯(lián)起來。static int __init gmem_init(void) { dev_t devno; int ret; // 1. 動(dòng)態(tài)申請(qǐng)一個(gè)主設(shè)備號(hào)以及此設(shè)備號(hào)下的次設(shè)備號(hào)范圍這里我們只用一個(gè)設(shè)備 ret alloc_chrdev_region(devno, 0, 1, GMEM_DEVICE_NAME); if (ret 0) { printk(KERN_ERR GMEM: Failed to allocate device number.\n); return ret; } gmem_major MAJOR(devno); // 提取主設(shè)備號(hào) printk(KERN_INFO GMEM: Allocated major number %d.\n, gmem_major); // 2. 分配設(shè)備結(jié)構(gòu)體內(nèi)存 gmem_device kzalloc(sizeof(struct gmem_dev), GFP_KERNEL); if (!gmem_device) { ret -ENOMEM; goto fail_alloc_dev; } // 3. 分配設(shè)備內(nèi)存緩沖區(qū) gmem_device-buffer kzalloc(GMEM_BUFFER_SIZE, GFP_KERNEL); if (!gmem_device-buffer) { ret -ENOMEM; goto fail_alloc_buf; } gmem_device-buffer_size GMEM_BUFFER_SIZE; // 4. 初始化 cdev 結(jié)構(gòu)并將其與 file_operations 綁定 cdev_init(gmem_device-cdev, gmem_fops); gmem_device-cdev.owner THIS_MODULE; // 5. 將 cdev 添加到內(nèi)核系統(tǒng)使其生效 ret cdev_add(gmem_device-cdev, devno, 1); if (ret) { printk(KERN_ERR GMEM: Failed to add cdev.\n); goto fail_add_cdev; } printk(KERN_INFO GMEM: Character device driver initialized successfully.\n); return 0; // 成功 // 錯(cuò)誤處理路徑內(nèi)核編程必須嚴(yán)謹(jǐn)處理每一步可能出現(xiàn)的錯(cuò)誤 fail_add_cdev: kfree(gmem_device-buffer); fail_alloc_buf: kfree(gmem_device); fail_alloc_dev: unregister_chrdev_region(devno, 1); return ret; }對(duì)應(yīng)的退出函數(shù)需要對(duì)稱地釋放所有資源static void __exit gmem_exit(void) { dev_t devno MKDEV(gmem_major, 0); // 根據(jù)主設(shè)備號(hào)生成完整的設(shè)備號(hào) // 1. 從系統(tǒng)刪除cdev cdev_del(gmem_device-cdev); // 2. 釋放設(shè)備緩沖區(qū) kfree(gmem_device-buffer); // 3. 釋放設(shè)備結(jié)構(gòu)體 kfree(gmem_device); // 4. 釋放設(shè)備號(hào) unregister_chrdev_region(devno, 1); printk(KERN_INFO GMEM: Driver unloaded.\n); }3.5 創(chuàng)建設(shè)備文件節(jié)點(diǎn)模塊加載成功后內(nèi)核里已經(jīng)有了我們的驅(qū)動(dòng)但用戶空間還沒有一個(gè)“文件”入口來訪問它。我們需要手動(dòng)創(chuàng)建設(shè)備文件節(jié)點(diǎn)。# 加載模塊后查看內(nèi)核日志獲取動(dòng)態(tài)分配的主設(shè)備號(hào) $ sudo insmod gmem_driver.ko $ dmesg | tail -2 [ 1234.567890] GMEM: Allocated major number 511. [ 1234.567891] GMEM: Character device driver initialized successfully. # 使用 mknod 命令創(chuàng)建設(shè)備文件。主設(shè)備號(hào)為511次設(shè)備號(hào)為0。 $ sudo mknod /dev/gmem c 511 0 # 設(shè)置合適的權(quán)限 $ sudo chmod 666 /dev/gmem現(xiàn)在你就可以像操作普通文件一樣測(cè)試這個(gè)驅(qū)動(dòng)了$ echo Hello, GMEM Driver! /dev/gmem $ cat /dev/gmem Hello, GMEM Driver! $ dd if/dev/zero of/dev/gmem bs1 count5 seek10 # 從偏移10處寫入5個(gè)字節(jié) $ hexdump -C /dev/gmem # 以十六進(jìn)制查看設(shè)備內(nèi)存內(nèi)容4. 高級(jí)話題與生產(chǎn)環(huán)境考量一個(gè)玩具級(jí)的驅(qū)動(dòng)和能在實(shí)際項(xiàng)目中使用的驅(qū)動(dòng)差距往往在于對(duì)細(xì)節(jié)和復(fù)雜場(chǎng)景的處理。下面這些點(diǎn)是你在開發(fā)真實(shí)驅(qū)動(dòng)時(shí)必須考慮的。4.1 并發(fā)控制與同步機(jī)制我們的示例驅(qū)動(dòng)有一個(gè)致命缺陷它沒有處理并發(fā)訪問。如果兩個(gè)進(jìn)程同時(shí)調(diào)用gmem_write它們可能會(huì)互相覆蓋數(shù)據(jù)導(dǎo)致數(shù)據(jù)錯(cuò)亂。在內(nèi)核中共享資源比如我們驅(qū)動(dòng)的buffer必須被保護(hù)。最常用的同步原語是自旋鎖和信號(hào)量。自旋鎖適用于臨界區(qū)執(zhí)行時(shí)間非常短如幾條指令且不能在睡眠的上下文如中斷處理程序中。等待鎖的線程會(huì)“忙等待”。信號(hào)量適用于臨界區(qū)可能執(zhí)行較長時(shí)間或操作可能睡眠如等待數(shù)據(jù)。等待鎖的線程會(huì)進(jìn)入睡眠狀態(tài)讓出CPU。對(duì)于我們的內(nèi)存緩沖區(qū)寫操作可能涉及copy_from_user這個(gè)函數(shù)可能引起缺頁異常而導(dǎo)致睡眠因此更適合使用信號(hào)量。我們使用內(nèi)核更推薦的mutex互斥鎖它是一種特殊的信號(hào)量。#include linux/mutex.h struct gmem_dev { struct cdev cdev; unsigned char *buffer; unsigned long buffer_size; struct mutex lock; // 添加一個(gè)互斥鎖 }; // 在初始化函數(shù)中初始化鎖 mutex_init(gmem_device-lock); // 在 read/write 函數(shù)中使用鎖保護(hù)臨界區(qū) static ssize_t gmem_write(struct file *filp, const char __user *buf, size_t count, loff_t *f_pos) { struct gmem_dev *dev filp-private_data; ssize_t retval 0; // 獲取鎖 if (mutex_lock_interruptible(dev-lock)) return -ERESTARTSYS; // 如果在獲取鎖時(shí)被信號(hào)中斷 // ... 原有的計(jì)算和拷貝邏輯 ... mutex_unlock(dev-lock); // 釋放鎖 return retval; } // read 函數(shù)也需要用同樣的鎖保護(hù)4.2 自動(dòng)創(chuàng)建設(shè)備節(jié)點(diǎn)udev/mdev手動(dòng)mknod太不專業(yè)了。在生產(chǎn)環(huán)境中我們期望模塊加載后/dev目錄下自動(dòng)出現(xiàn)設(shè)備節(jié)點(diǎn)。這需要驅(qū)動(dòng)向內(nèi)核的設(shè)備模型sysfs注冊(cè)一個(gè)類class和設(shè)備device。#include linux/device.h static struct class *gmem_class; static struct device *gmem_device_node; // 在初始化函數(shù)成功注冊(cè)cdev后 gmem_class class_create(THIS_MODULE, gmem_class); if (IS_ERR(gmem_class)) { ret PTR_ERR(gmem_class); goto fail_class_create; } // 創(chuàng)建設(shè)備節(jié)點(diǎn)udev/mdev會(huì)根據(jù)這個(gè)信息自動(dòng)創(chuàng)建 /dev/gmem gmem_device_node device_create(gmem_class, NULL, devno, NULL, GMEM_DEVICE_NAME); if (IS_ERR(gmem_device_node)) { ret PTR_ERR(gmem_device_node); goto fail_device_create; } // 在退出函數(shù)中對(duì)稱銷毀 device_destroy(gmem_class, devno); class_destroy(gmem_class);使用了class_create和device_create后加載模塊/dev/gmem會(huì)自動(dòng)出現(xiàn)權(quán)限由udev規(guī)則決定通常為root:root 666。4.3 ioctl實(shí)現(xiàn)自定義控制命令read/write是流式操作但設(shè)備往往需要一些控制命令比如“設(shè)置波特率”、“讀取設(shè)備狀態(tài)”、“啟動(dòng)校準(zhǔn)”等。這就是ioctl的用武之地。它允許用戶空間傳遞一個(gè)命令字和一個(gè)可選參數(shù)給驅(qū)動(dòng)。首先需要為你的驅(qū)動(dòng)定義一個(gè)唯一的“幻數(shù)”magic number并枚舉出所有命令。#include linux/ioctl.h #define GMEM_IOC_MAGIC G // 定義一個(gè)幻數(shù)通常是一個(gè)字符 // 定義命令_IO/_IOR/_IOW/_IOWR 是構(gòu)造命令號(hào)的宏 #define GMEM_IOC_RESET _IO(GMEM_IOC_MAGIC, 0) // 無參數(shù)命令 #define GMEM_IOC_GET_SIZE _IOR(GMEM_IOC_MAGIC, 1, int) // 從驅(qū)動(dòng)讀數(shù)據(jù)參數(shù)是指向int的指針 #define GMEM_IOC_SET_DATA _IOW(GMEM_IOC_MAGIC, 2, int) // 向驅(qū)動(dòng)寫數(shù)據(jù) #define GMEM_IOC_MAXNR 2 // 最大命令編號(hào)然后在file_operations中實(shí)現(xiàn).unlocked_ioctl新驅(qū)動(dòng)推薦使用這個(gè)而非舊的.ioctl。static long gmem_ioctl(struct file *filp, unsigned int cmd, unsigned long arg) { struct gmem_dev *dev filp-private_data; int ret 0; int size 0; // 檢查命令是否屬于本設(shè)備 if (_IOC_TYPE(cmd) ! GMEM_IOC_MAGIC) return -ENOTTY; if (_IOC_NR(cmd) GMEM_IOC_MAXNR) return -ENOTTY; switch (cmd) { case GMEM_IOC_RESET: mutex_lock(dev-lock); memset(dev-buffer, 0, dev-buffer_size); filp-f_pos 0; mutex_unlock(dev-lock); printk(KERN_INFO GMEM: Buffer reset.\n); break; case GMEM_IOC_GET_SIZE: size dev-buffer_size; // 將內(nèi)核數(shù)據(jù)拷貝到用戶空間指針 arg 指向的位置 if (copy_to_user((int __user *)arg, size, sizeof(size))) ret -EFAULT; break; case GMEM_IOC_SET_DATA: // 從用戶空間指針 arg 讀取一個(gè)整數(shù)作為填充值 if (copy_from_user(size, (int __user *)arg, sizeof(size))) { ret -EFAULT; break; } mutex_lock(dev-lock); memset(dev-buffer, size 0xFF, dev-buffer_size); // 用低8位填充緩沖區(qū) mutex_unlock(dev-lock); break; default: ret -ENOTTY; // 未知命令 } return ret; } // 別忘了在 file_operations 中添加 .unlocked_ioctl gmem_ioctl用戶空間程序可以這樣調(diào)用int fd open(/dev/gmem, O_RDWR); int size; ioctl(fd, GMEM_IOC_GET_SIZE, size); // 獲取緩沖區(qū)大小 ioctl(fd, GMEM_IOC_RESET); // 重置緩沖區(qū) int fill_value 0xAA; ioctl(fd, GMEM_IOC_SET_DATA, fill_value); // 用0xAA填充緩沖區(qū)5. 調(diào)試技巧與常見問題排查驅(qū)動(dòng)開發(fā)調(diào)試不像用戶態(tài)程序那樣方便但掌握一些核心工具和方法能極大提升效率。5.1 內(nèi)核日志printk 的藝術(shù)printk是你的眼睛。但它有幾個(gè)級(jí)別KERN_DEBUG,KERN_INFO,KERN_WARNING,KERN_ERR等默認(rèn)情況下KERN_DEBUG信息可能不會(huì)顯示在控制臺(tái)??梢酝ㄟ^dmesg查看所有級(jí)別的日志或者動(dòng)態(tài)調(diào)整內(nèi)核日志級(jí)別# 查看當(dāng)前控制臺(tái)日志級(jí)別 cat /proc/sys/kernel/printk # 臨時(shí)將控制臺(tái)日志級(jí)別調(diào)整為8打印所有信息 echo 8 /proc/sys/kernel/printk在驅(qū)動(dòng)中合理使用__FILE__,__LINE__,__func__宏可以幫助你快速定位打印信息的位置。5.2 使用 /proc 和 sysfs 進(jìn)行調(diào)試除了printk你還可以通過/proc或sysfs接口在運(yùn)行時(shí)導(dǎo)出驅(qū)動(dòng)內(nèi)部狀態(tài)這比反復(fù)修改代碼加printk更靈活。例如創(chuàng)建一個(gè)/proc/gmem_info文件來顯示緩沖區(qū)使用情況#include linux/proc_fs.h #include linux/seq_file.h static int gmem_proc_show(struct seq_file *m, void *v) { struct gmem_dev *dev gmem_device; // 假設(shè)是全局變量 seq_printf(m, GMEM Driver Status:\n); seq_printf(m, Buffer Size: %lu bytes\n, dev-buffer_size); seq_printf(m, Buffer Addr: %p\n, dev-buffer); // 可以打印更多信息如前10個(gè)字節(jié)內(nèi)容 seq_printf(m, First 10 bytes: ); for (int i 0; i 10 i dev-buffer_size; i) seq_printf(m, %02x , dev-buffer[i]); seq_printf(m, \n); return 0; } static int __init gmem_init(void) { // ... 其他初始化 ... proc_create_single(gmem_info, 0, NULL, gmem_proc_show); // ... } // 退出函數(shù)中需要 remove_proc_entry(gmem_info, NULL);加載驅(qū)動(dòng)后cat /proc/gmem_info就能看到這些信息。5.3 常見問題與排查表問題現(xiàn)象可能原因排查思路insmod失敗報(bào)Invalid module format模塊編譯的內(nèi)核版本與當(dāng)前運(yùn)行內(nèi)核版本不匹配。使用uname -r確認(rèn)運(yùn)行內(nèi)核版本確保編譯用的內(nèi)核頭文件路徑 (KDIR) 正確。insmod成功但dmesg看不到初始化信息。printk級(jí)別太低或者初始化函數(shù)出錯(cuò)提前返回。1. 檢查dmesg -l debug或調(diào)整printk級(jí)別。2. 在初始化函數(shù)每一步后都加printk看執(zhí)行到哪一步。open(“/dev/xxx”)失敗返回-1errno2(ENOENT)。設(shè)備文件節(jié)點(diǎn)不存在。1. 檢查設(shè)備號(hào)是否申請(qǐng)成功 (dmesg)。2. 檢查mknod命令的主次設(shè)備號(hào)是否正確或檢查udev/mdev是否自動(dòng)創(chuàng)建。3. 檢查/dev目錄下是否有該文件。open失敗返回-1errno13(EACCES)。權(quán)限不足。使用ls -l /dev/xxx檢查設(shè)備文件權(quán)限確保當(dāng)前用戶有讀寫權(quán)限。read/write返回-1errno14(EFAULT)。用戶空間指針非法。檢查驅(qū)動(dòng)中copy_to_user/copy_from_user的返回值。確保用戶空間傳入的緩沖區(qū)地址和大小有效。在用戶程序中使用malloc或棧數(shù)組并檢查指針是否為NULL。多進(jìn)程讀寫數(shù)據(jù)混亂或驅(qū)動(dòng)崩潰。缺乏并發(fā)控制鎖。檢查所有訪問共享資源全局變量、緩沖區(qū)的地方是否都用鎖如mutex保護(hù)。特別注意read,write,ioctl函數(shù)。模塊卸載 (rmmod) 失敗提示Module in use。設(shè)備文件仍被進(jìn)程打開。使用lsof /dev/xxx或fuser /dev/xxx查看是哪個(gè)進(jìn)程打開了設(shè)備關(guān)閉后再卸載。檢查驅(qū)動(dòng)的.release方法是否被正確調(diào)用。系統(tǒng)不穩(wěn)定或死機(jī)。內(nèi)核空間內(nèi)存訪問越界、使用了錯(cuò)誤的指針、死鎖。這是最棘手的問題。1. 使用KASAN內(nèi)核地址消毒劑工具編譯內(nèi)核它能檢測(cè)很多內(nèi)存錯(cuò)誤。2. 仔細(xì)檢查所有指針操作特別是數(shù)組索引。3. 檢查鎖的獲取和釋放是否成對(duì)出現(xiàn)避免死鎖如重復(fù)加鎖、鎖未釋放就返回。5.4 內(nèi)核調(diào)試器KGDB 與 ftrace對(duì)于極其復(fù)雜的問題可能需要更強(qiáng)大的工具。KGDB允許你像調(diào)試用戶態(tài)程序一樣通過GDB連接到一個(gè)運(yùn)行中的內(nèi)核設(shè)置斷點(diǎn)、單步執(zhí)行、查看變量。這需要兩臺(tái)機(jī)器或使用虛擬機(jī)配置較為復(fù)雜。ftrace內(nèi)核內(nèi)置的跟蹤工具可以跟蹤函數(shù)調(diào)用關(guān)系、測(cè)量延遲、分析中斷關(guān)閉時(shí)間等對(duì)性能分析和查找復(fù)雜執(zhí)行路徑問題非常有用。例如你可以跟蹤gmem_read函數(shù)的調(diào)用情況echo 0 /sys/kernel/debug/tracing/tracing_on echo function /sys/kernel/debug/tracing/current_tracer echo gmem_read /sys/kernel/debug/tracing/set_ftrace_filter echo 1 /sys/kernel/debug/tracing/tracing_on # ... 執(zhí)行你的測(cè)試 ... echo 0 /sys/kernel/debug/tracing/tracing_on cat /sys/kernel/debug/tracing/trace驅(qū)動(dòng)開發(fā)是一個(gè)對(duì)細(xì)節(jié)要求極高的工作一個(gè)微小的錯(cuò)誤就可能導(dǎo)致系統(tǒng)崩潰。從最簡單的框架開始逐步添加功能如鎖、自動(dòng)創(chuàng)建設(shè)備節(jié)點(diǎn)、ioctl并在每一步進(jìn)行充分的測(cè)試是穩(wěn)健推進(jìn)的不二法門。理解并熟練運(yùn)用字符設(shè)備驅(qū)動(dòng)框架就等于拿到了打開Linux內(nèi)核世界一扇大門的鑰匙后續(xù)無論是學(xué)習(xí)更復(fù)雜的子系統(tǒng)框架還是為自己的硬件編寫驅(qū)動(dòng)都將事半功倍。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
久久一本大香蕉| 久久精品熟女亚洲AV麻豆软件| 久久狠狠色噜噜狠狠狠狠97| 欧美综合天堂| 亚洲诱惑| 用力操死我| 亚洲女毛多水多21P| 91成人无码| 校园春色中文字幕AV| 五月综合色| 亚洲综合另类小说色区亚洲成av人片在www| 9.1小视频| 夜夜人妻爽| 亚洲国产第一页综合视频| 内射小黄片| 伊人性在线视频| 97免费视频网| 国产欧美伊人| 色色五月天婷婷| 黄骗免费| 精品丝袜无码一区二区三APP| 俺去啦自拍| 91国精产品| 亚洲天堂男人天堂网| 久草草一二三四区久久| 91新在线欧美| 国产农村妇女精品一| 久久五月视频| 六月丁香五月婷婷| 99这里有精品| 99精品无码| HEYZO高无码国产精品227| 日日操免费视频| 不卡日本一区二区| 韩国三级色呦呦| 日韩精品三级| 人妻天堂网| 中文字幕第95页| 少妇色综合| 91高跟美女在线播放| 有码人妻系列| 久久伊人东京热| 青青草日韩免费观看高清在线| 夜夜高潮夜夜爽高清视频一| 久久精品一区| 中文三一区| 久久熟女嫩草成人片免费| 精品九九九九九九九九九| 超硑97精品| 自拍视频大全亚洲专媒视频/一区二区三区 | 亚欧高清| 91久久免费视频互動交流| 亚洲 小说 欧美 激情 另类| 久久欲| 影音先锋每日最新资源在线观看| 人妻献身系列第54部| {男男暴菊gay无套网站| 污污汅18禁网站在线永久免费观看| 国产久久免费精品视频| 婷婷中文网| 女人被添高潮免费视频| 一区二区三区四区色图| 麻豆AV一区二区| 动漫片子网站3黄| 国产性爱欧美性爱在线| 少妇三p| 91五十路| 人人射人人操人人摸| 国产一级αv免费看片| 大香蕉操久久| 制服诱惑亚洲一区二区三区在线观看| 91M一社| 国产精品扒开腿做爽爽爽视频| 日本孕妇一区二区视频操逼免费看 | 国产AAAAAABBBBB| 国产精品久久久久无码A√| 国产精品自在自拍视频| 97久久精品亚洲| 精品视频97| 无码精品啪啪啪一区二区三区三州| 九九精品网| 欧美性爱精品七区| 大香蕉九九| 免费看污网址| 91亚洲人| 国产精品亚洲一区二区三区四区| n1038 一二三区| 大白逼三四级| 久久夜黄色无码A级大片| 日本天天色| 一本久久精品中文字| 精品无码少妇| 久久综合婷婷| 青青青草伊人精品| 大香蕉一区二区在线观看.| 超碰91在线| 99蜜桃臀亚洲成人在线观看| 超碰午夜| 亚洲自拍欧美国产首页网曝| 天天综合官网| 91黑人无码激情在线| 日本丝袜美腿人妻九九| 中文字幕乱码在线| 亚州色图第三区| 毛片99-全集电影手机免费观看完整-B029AV| 国产在线播放成人免费| 丁香激情五月| 校园春色AV天堂| 午夜寂寞欧美| 99后入| 亚洲 小说 欧美 激情 另类| 天天综合网一91网| 日本媚薬中文字幕在线| 99热欧美| 欧美色蜜桃97| 国产尹人在线视频免费| 99在线啪| 国产欧美伊人| 亚洲天堂,男人| 超碰97人人乐| 麻豆天美国美国产| 欧美激情久操网| 日韩国产品视频中文字| 99re免费| 天美传媒av一区二区| AV一区观看| 蜜臀AV一区二区三区激情综合| 少妇淫妇久久久久久久| 精品久久久无码| 蜜臀99久久国产| 狠狠干,狠狠操| 久久精品—区二区三区内射| 翘臀vidoes| 欧美色999| 亚洲有码 视频一区| 九九热九九| 国产欧美美女免费观看视频| 成全在线观看免费观看| 一区二区视频你懂的| 芊芊操逼视频无码| 国产9熟妇视频网站| 7777欧美成是人在线观看| 无码人妻毛片丰满熟妇精品区| 91黑人无码激情在线| 一本大道久| 夜夜操狠狠操| 中国AV美女| 制服诱惑亚洲一区二区三区在线观看| 大香蕉免费乱伦视频| 91日产桃蜜| 97在线视频网站| 亚洲色久| 在线观看高清AV| 亚洲性综合| 多乙久久久久久| 天天综合网在线91| 国产男女无套97| 国产精品久久久久亚洲av| 日韩在线观看AV| 久久久不能久久久久| 亚洲成人性爱网站在线播放| 久久成年片色大黄全免费网站| 97久久超碰国产网站| 操逼无码一区| 麻豆久久一区二区三区| 色狠狠一区二区三区香蕉| 国产又黄又猛又粗又爽的网站| 亚洲熟伦熟妇AV无码春色| 日韩特一级久久| 性色avv| 美国aaaaa一级黄片| 青青在线视频日韩欧美| 欧美激情专区| 国产和美国毛片| 五月丁香啪啪啪| 久久成人国产精品| 欧美 亚洲 第一页 | 先锋激情∨在线视频播放| 精品无人区麻豆乱码1区2区图片| 色九月综合| 六月激情婷婷| 艹少妇网站| 俄罗斯及免费在线看| 天欧美在线| 99婷婷一区二区| 婷婷九月丁香| 劲爆欧美人妖三区91| 伊人综合色网| www四虎| 成人性爱高清视频免费看| 久久精品国产精品一区| 人人操人人肉久久精品| 婷婷性网| 日韩欧美中文字亚洲慕| 色哟哟av网址| 大香蕉欧美国产日韩高潮| 热久久这里只有精品| 久久精品日韩| 影视综合无码少妇| 麻豆国产97在线| 久久东京热成人| 日韩 女同 综合| 亚洲国产青青| 久久亚码| 亚洲精品黄码久久久久| 亚洲情色 无码专区| 久久伦理视频久久大香蕉视频| 综合亚洲情色| 欧美色图成人网一区二区 | 久久久无码国精品无码三区三区| 国产精品青草综合久久| 免费观看的av| 精品国产一区二区久久| 亚洲综合113页| 麻豆区99999| 久久久亚洲精品电影免费看| 人妻在线臀日韩| 爱爱动态120秒| 97超碰国产亚洲精品资源| 久久草草欧美精品| 天天看少妇| 天天弄欧美| 97色视频在线| 亚洲精品国产熟女久久久| 青青草日韩免费观看高清在线| 欧美亚洲国产日本在线,久久精品国产| 台湾大香蕉99热| 欧美综合网1| 伊人在线大香蕉视频久久| 日本加勒比无码专区一二三| 老熟女综合网| 100啪啪视频大全| 色欲三区| 青娱乐日韩无码| 午夜免费视频1000| 日韩欧美丝袜诱惑| 老熟女91视频| AⅤ片水多多| 性爱视频啪啪啪啪| 人妻久久久| 欧美爆操91| 亚洲黄色网址| 日韩无码一区二区三区| 黄色视频60分钟| 丰满人妻av一区二区三区| 亚洲色色色| 久久国模av| 欧美图片校园春色| 国产精品久久久久中文字幕| 精品国产乱码久久久久久影片| 97久久精品亚洲中六字幕| 色亚州人久干视频在线观看免费版| 免费视频观看60秒| 欧美中文字幕日韩在线| 五月丁香啪啪网| 玖玖综合色| 夜夜做夜夜爽精品视频| 成人免费看吃奶视频网站| 日日碰狠狠添天天爽超| 麻豆成人av| 蜜桃久久一区二区| 日韩欧美经典在线观看| 蜜臀人妻少妇久久在线观看| 97美日韩视频| 国产精品久久久久久久黄无码| 六月丁丁香| 久污| 精品美女久久久久| 亚洲欧美精品一区天堂久久 | 视频一区二区免费在线| 国产成人网站在线观看| 加勒比少妇AV婷婷六月天超碰超碰| 一区二区三区四区理论片| 一牛影视成人片免费| 六九九九| 不卡视频一区蜜桃视频 | 五月天婷婷影院| 五十路人妻在线| 欧美人与动性人交a| 男人天堂一区二区| 激情欧美97| 睡产熟女乱伦| 天欧美在线| 18禁免费视频| 日本男人插女人的逼黄色| 亚洲网站一区二区在线| 久久久久无码| 中文字幕后石码三区四区| www.婷婷| 日韩三级伦理中文字幕| 日本三级人妻a人妻一在线| 青青草中文字幕| 久久婷婷五月综合| 99re视频这里只有精品| 99视频内射三四| 超碰综合97在线| 玖玖玖玖精品国产剧情| 亚洲中文字幕久久无码精品| 国产麻豆一级精品视频| 精品少妇高潮久久| 亚洲日韩AV视色| 亚洲综合在线第一页| 大香蕉婷婷| 啊啊啊啊免费视频| 日本久久久久久久久| 2019天天干| 性色一线| 无码高清少妇久久| 丝袜色综合| 91操人| 亚洲成人帖图| 婷婷五月花| 丰满人妻一区二区三区色-百度| 麻豆人妻精品一区二区| 国产精品麻豆免费视频| 五十路人妻在线| 竹菊影视国产一区二区| 蜜臀在线视频| AV色五月天| 国产精品一区二区黄片| 精品人妻一区二区免费蜜桃视频| 人人妻人人操人人乐| 久久久99免费| 青青草中出视频 | www.久久最新地址| 91精品导航| 国产人伦精品一区二区三区 | 手机av天堂久久久久| 一级黄色性爱裸体视频| 青青草原av| 国产视频三区四区| 一级啊性爱在线视频| 日夜尻逼网| 黄页大片在线观看| 中文字幕一区日韩精| 色综合91好| 日韩三级在线观看mp4| 日韩欧美亚洲一区二区三区影院| 啊啊啊爽爽| 五十路熟女工口| 久久久国产成人一区二区三区在线| 日本不卡一二区| 99re这里| 久久国99999| AV电影在线播放| 欧美福利视频啊啊啊啊| 一区二区无码视频| 啊操爽品善一区二区三区| 日本护士高潮| 人干人人人操人人摸| 九九九九九精品| 99re6在线视频精品免费完整版安卓版| 97福利视频| 中文字幕精品日韩中文字幕| 探花精品 一区二区| 97久久国产亚洲精品超碰热| 国产精品。| 日韩啪啪啪啪啪| 婷婷五月丁香五月| 欧美色图中文字幕| 国产精品亚洲免费| 8x福利精品第一福利视频导航| 蜜臀一二三区| 国产又大又粗又色生活片亚洲国产精品成人久久久综合免费 | av亚欧| 精品国产综合久久福利,热99这里有精品综合久久,99热这里只有免费国产精品,精 | 欧美综合天天| 一二三区视频在线观看| 欧美色图91p| 青青草伊人久久| 亚洲综合色男人网| 色五月av| 日本在线一二| 亚洲有码 欧美精品| 精品超碰国产| 免费综合亚洲中文| 人妻在线视频| 性色av网站| 岛国毛片手机在线观看| 中文字幕乱码人妻二区三区| 欧美福利视频啊啊啊啊| av网站免费线看| 99热官网| 久久女婷| 五月天激情小说网| 熟女丝袜视频| 嗯阿好爽好紧| 亚洲成人精品久久久| 久久人妻四季| 亚洲一区二区三区麻豆传媒| 开心六月色| 五月婷婷hd| 国产丰满少妇久久久精品影院| n1038 一二三区| 成人天天看站长推荐| 精品国产99| 亚洲免费97免费| 1二区9| 999 久久久| 粉嫩久久久极品| 九九九九精品在线| 欧亚无码视频| 国产精品无码论坛| 超碰超碰欧美| 国产丰满少妇久久久精品影院| 久久m| 色九九综合AV| 高清视频一区| 中文字幕一区二区日韩网| 一区二区三区探花在线观看| 久久97| 蜜臀久久99精品久久久久久久久| 东北老女人的激情视频| 天天天堂影视日韩亚洲91| 噜噜噜噜天天狠狠| 人妻色偷色噜| 久久露脸国产老熟女| 人妻碰碰碰碰碰碰| 99热大香蕉伊在线| 97日韩| 日韩在线性爱免费视频| 五月婷婷综合激情| 国产亚卅97| 毛片99-全集电影手机免费观看完整-B029AV | 91人妻久久久久久久久久久久久| 精品人妻一区二区三区视频在线| 色综合V| 亚洲九月丁香| 久久亚洲影院一区二区| 久久久96精品| 性影在线视频| 日本熟妇一区二区三区| 97资源站久久| 午夜福利无毒不卡| 97中文天堂| 国产日韩中文字幕欧美| 国产二区视频在线观看电影| 天天做天天爽| 天天爽入口| 国产一区二区免费福利片| 99综合网| chaopen97久久| 亚洲欧美国产中文视频| 99色婷婷| 日本熟妇自慰性高潮一区二区三区| 色色毛片| 六月婷婷综合| 91在线国产后入风骚翘臀美女素人| 综合夜夜| 日日夜夜天天| 色偷偷综合91久久噜噜| 岛国片国产成人亚洲播放| 国产精品一区人妻精品阁在线| 少好三P| 色欲三区| 极品久久久久久久久久久久久久| 成人小说另类在线| 欧美亚综合色图| 亚洲人妻精品一区二区| 男人的天堂一区三区| 欧美中字二区| 乱伦一区二区三区‘| 久久人妻四季| 黄色免费一级在线毛片| 欧美天堂日韩三级国产传媒| 丝袜大香蕉| 蜜乳av一区二区三区四区不卡| 女人与公拘交酡2020视频| 亚洲性爱高潮影院| 欧美亚洲91| 熟女性视频| 2017天天操| 亚洲丝袜二区| 97视频在线免费观看| 夜色五月天| 成人性生活高清视频在线播放| 欧美日韩91| 亚洲视频精选| 日韩女优中文字幕| 91大神精品长腿在线观看网站| 中文字幕国产精品1区| 上特色A在线| 成人AV素股で擦久久| 无码78| 99亚亚热| 国产偷人伦激情在线观看| 美腿色图| 欧美天天干| 操逼无毒无码免费视频| 色色色五月婷婷| 欧美美女视频| 中文字幕丝袜人妻| 盗摄女人妻在线| 四季av一区二区凹凸精品小说| 婷婷视频网| 久久东京热久久| 日韩情色视频| 日本操嫩b网| 78m啪啪啪| 超碰性爱97| 国产AV毛片| 国产区在线| 国产污视频麻豆传媒一区二区 | 伊人精品视频| 国产做?爰片久久毛片?片美国| 亚洲av资源| 久久久久久久久九九久孕交| 成人性爱美曰韩| 超碰诱惑| 亚熟hd视频在线| 色一情一乱一乱一区91Av| 电家庭影院午夜69久久夜色精品国产69乱| 亚洲淫乱骚妇AV| 女人高潮大叫一级毛片| 97精品一区二区视频| 久久人妻一区二区三区高清| 1区2区3区在线视频| 欧美成人一级免费电影| 久久狠狠色噜噜狠狠狠狠97| 毛片麻豆91糖心精品毛情片| 一个人在线看的黄色电影网站| 国产www色在线观看| 日日夜夜精品视频| 色九九久九九| 欧美猛交黑寡妇中文字幕| 婷婷五月天网| 91操人| 一级性爱视频免费在线| 欧美激情 亚洲色图| 亚洲精品国产精品乱码不卡| 久久99操天天日| 人人摸人人摸人人干| 亚洲色综合| 欧美色图另类图片| 9997se| 天美传媒在线一区| 91视频观看网站| 久久亚洲av成人无码国产| 一个国产在线综合网站| 国产精品爆乳懂色蜜乳| 偷拍盗拍亚洲色图图片 | 欧美一区二区亚洲天堂| 国产成人手机视频激情| 17c在线成人免费A片观看| 不卡在线观看视频| 97爱爱官网| 国产蜜臀在线| 国产中文日韩欧美一区二区三区人妻丝袜美腿| 日韩精品人妻系列无码天堂| 欧美夜夜狠| 六月婷婷色综合| 亚洲高清无码在线桃色| 亚洲国产精品有声| ji熟女.com| 亚洲在线网站| 三男一女不戴套的A片| 免费一二区| 日韩97P| 亚洲高清欧美总合| 日韩小电影| 婷婷爽人人婷婷爽视频| 欧美日韩在线小说| 一起草高清无码| 色色毛片| 日韩精品色呦呦| 高清无码久操视频| 6080YYY午夜理论片在线观看| 夜夜草我| 2019天天干天天操| 亚洲一区日韩| 激情婷婷五月天| 女优视频第10页| 国产11页| 久久男人网| 国产精品一区二区后入| 日日干夜夜欢| 日韩精品 欧美激情| 亚洲图片第一页| 边做饭边操逼逼| 国产av波波国产精品| 留下AⅤ黄色片| 狠狠狠狠狠| 毛片视频白嫩| 亭亭在线资源| 色臀AV| 国模无码人体一区二区三| 思思热久久成人| 国产 三级自拍| 亚洲最大91网| 中文字幕、久久精品国产2020、久久综合久久自在自线精品自、亚洲 | 97在线视频免费看| 黄色免费网| 操逼操逼逼操操逼91 | 人妻 欧美 中文| 99热99re6国产在线播放| 人妻激情视频| 国产精品无码成人精品| 26uuu国产免费观看| 天天综合精品| 天堂资源站| 国产精品农村妇女| 国产精品视频麻豆入口| 丁香激情网| 91挑色欧美| 欧美色视| 影音先锋乱| 成人熟女视频一区二区三区| 久久精品综合| 国产精品麻豆成人av| 熟女六十路| 97资源欧美| 992视频一区| 性色av蜜臀av色欲aV| 蜜桃色色网站视频三区| 97在线资源| 亚洲āv网址在线观看| 日本中文字幕在线视频| 狠狠夜色午夜久久综合在线| 97超碰9| 综合操逼| 国产偷仑| 亚洲欧美电影| 丁香五月AV| 2019男人的天堂| 午夜操逼不卡| 三级片大波波| 久久久96| 狠狠操狠狠| 91天天综合在线观看| 日韩欧美成人性爱在线| 国产婷婷一区| 日韩欧美亚洲自拍偷拍| 国产免费一区二区三区最新不卡| 丝袜视频网国产90| 欧美日本一区二区a人| 动漫区日韩区欧美区| 国产精品懂色tv影视免费观看| 九九AV| 欧美久久人体| 日韩性爱高清免费视频| 人妻少妇久久| 国产18精品亚洲精品| 夜夜青青无码影院| 国产精品久久99日日| 免费网色网站| 高清国产成人无码| 九九热精彩视频| 欧美性爱中文字幕无线码| 国产二区三区粉嫩在线| 久久久久久久伊人精品| 青青草色情网站视频| 可以免费看黄片的视频| 日韩av色图综合| 久久久国产av美女私房| 亚洲自拍欧美国产首页网曝| 亚洲,日韩,欧美,成人播放| 成人在线视频一区| 性色生活片久久毛片婬片免费放女人一级毛片 | 夜色97| 国产粉嫩出水在线播放| 欧美日韩制服| 成人五月香网在线| 亚洲欧美一区二区网址| 日日夜夜噜| av在线一区二区三区| 十八禁电影伊人网| 伊人五月天| 久久久无码视频| 美女久久久久久久| 日韩欧美国产一区二区三区四区 | 成人性爱电影一区二区| 国产激情在线| 色一射色一射| 青娱乐国产精品| 天天影视综合色| 日韩在线76| CCYY草草影院地址入口| 欧美在线中M| 婷婷综合五月天| 26uuu国产亚洲综合| 亚洲精品黑丝| 天天综合网一91网| 蜜乳AV一区| 欧美激情内射| 婷婷激情一区二区三区俺也去| 岛国毛片手机在线观看| 97视频播放| 亚洲色9| 国模精品娜娜一二三区| 亚洲欧美国产va在线播放频| 呦女网站| 麻豆黄色五月天| 特级毛片特黄久久免费看| 男人的天堂com| 96爱综合| 丁香五月偷拍| 国产欧美精选自拍一区| 91爱啪| 天天超级碰碰碰| 亚洲第一页色| 国产精品久久久久久片| 伊人影院日本| 欧美激情 一区| 久久久久9999妇女| 欧美一级三级| 黄色性爱网网| 国产成人99久久亚洲综合| 嗯嗯不要 视频| 天天看高清麻豆| 99999无码| 婷婷深爱五月| 思思热久久成人| 蜜臀无码视频在线观看| 91四海无码日韩欧美| 好舒服视频| julia在线观看久久| 欧美性生活综合| jizzjizz欧美| 免费久久一级毛片大黄| 大香蕉欧美| 伊香蕉综合久久久久久久噜噜噜| 十八禁一区二区无码观看| 9999伦理视频| 伊人综合色网| 9九九九九视频在线观看| 久久鲁干| 国产一级作爱毛片| 国产A v无码专区| 日韩在线欧美精品一区二区| 久久久久九九九| 中文不卡视频| 91 综合网| 亚洲丝袜二区在线| 色天天野狼综合社区| 骚人妻少妇视频| 少妇内射www在线观看视频| 中文字幕55555| 欧美中文字幕一区| 亚洲日韩青青草色月| 嗯嗯啊啊操死我| 99.色网| 91丝袜美女| 91暧暧| 91国产大片| 99亚洲人人| 激情综合av| 精品九九九九九九九九九| 亚洲 另类 丝袜 自拍 动漫| 青青草国产盗摄一二三区| 久操在97| 97伦乱| 中文字幕一二三av| 丝袜 中出 制服 人妻 美腿 中文字幕| av橘色网站| 国产9l 大屁股| 亚洲全色网| 亚洲日韩人妻中文字幕一区| 综合av社区| 国产精品免费日韩| aaa一级黄片| 亚洲五月丁香花狠狠干一区二区三区 | 麻豆天美传媒毛片| 一级岛国大片| α√在线| 嗯嗯啊在线视频| 国产夜夜艹| 神马久久69| 欧美后入式| 偷拍 亚洲 欧美| 手机午夜电影神马久久| 特级毛片特黄久久免费看| 亚洲第一在线视频| 天天操女人| 不卡一区视频| 亚洲人妻精品一区二区| 岛国黄片网站| 国产美女高潮叫床视频| 67914亚洲精品| 久久大线蕉一区| 欧美日韩国产色五月综合在线| 91狠狠综合久久| 日欧操屄| 高清在线偷拍自拍视频| 日本一区二区三区欧美日韩中文字幕| 亚洲少妇色图自慰直播| 免费视频观看60秒| 久久丁香久草综合网| 国产精品自拍欧美在线| 91久青| 女上位精品在线| 99色网| 色综合网1| 亚洲情色1区| 亚欧操逼片在线观看 | 色区97| 无码 黑人一区二区三区| 秋霞视频一区二区 | 精品在线78| 黄色电影在线播放综合网站| 色眯眯av| 日本二三四区| 高清无码 国产精品| 玖玖视频在线资源一区二区三区| 亚州高清色综合| 电家庭影院午夜69久久夜色精品国产69乱| 91精品人妻电影| 春色校园综合网| 丝袜综合网| 亚洲av无线观看| 青青草日本中文字幕| 日本久久超碰| 久久综合激情| 久久网亚洲| 欧美日韩亚洲一区二区在线观看| 青青草九九九九九| 清纯唯美综合| 亚洲国产高清福利视频| 国产白丝在线| 欧美一级黄色免费专区| 中文字暮97| 少妇蹲下露出大唇5| 操逼网免费无码视频| 99re6国产精品99re| 久久久久久69国产一区二区| 欧美日韩黄色片一区二区三区四区人与兽做爱| 日夜精品| 97操碰| 久久久天堂| 亚洲av乱伦色图网站| 99re在线视频这里只有精品 | a片亚洲一本通视频| 免费观看网黄| 久久超碰、| 最新无码国产| 色 婷97| 视频一区二区免费在线| 精品无码一区二区| 久久亚洲AV无码白度| 91网站18在线观看| 九九九久久久| 欧美成不卡网| 强奸乱伦免费网站| 久久久久久久久久黄色网| 在线岛国新天堂8| 99啪啪| 金莲网址| 国产少妇内射| 亚洲激情AV| 97精品免费视频网站| 天天综合亚在线| 亚洲国产综合视频| 特级大荫道BBwBBwBBW| 性暴力欧美猛交在线直播| 美腿丝袜偷拍亚洲欧美| AAAAAAAAA黄片| 9九九国产| 91视频国品一二三区| 久久伊人最新网址视频| 狠插 制服 自拍| 免费精品人妻一区二区三| 伊人96在线| 色婷婷狠狠| 国产91影院| 情色五月天网| 黄色av一区二区在线| 日韩色香| 97精品97| 九色PORNY9l原创自拍| 九九无码| 无码人妻精品一区二区三区九九| 日韩av影片在线观看| 啊v在线观看视频| 精品十三区| 色婷婷五月综合激情中文字幕| 天天伊人| 亚洲熟女乱综合一区二区三区| 亚洲欧洲国产综合av| 亚州91| 亚洲美女黄色| 国产精品一区二区三区在线密挑| 亚洲乱色熟女一区| 91少妇高潮| 99re只有精品| 亚洲色五月| 国产高清吃奶免费视频网站| 骚熟女AV网| 特级大荫道BBwBBwBBW| 97任你吞精| a男人的天堂久久一级A毛片| 亚洲综人| 欧洲乱码视频| 色色热| 久久精品高清AV| 中文字幕三四区| 午夜精品久久久久久久99| 99热99re超碰精品| 欧美一级黄片免费播放| 人人操,人人插| www欧美91| 国产乱青青草久久| 大香蕉色网| 人妻丝袜无 码视频专区| 日韩图区 偷拍| 97爱爱| 蜜臀AV一区二区三区| 性交一区二区在线播放| 蜜伊人色综合97| 天天日少妇逼AV| 裸体美女久久久| 超硑97精品| 成视频在线观看免费看| 久久男人的天堂| 亚欧高清| 青青五月天| 一区二区三区色综合| 夜夜高潮夜夜爽高清视频一| 九九久久99| 日韩在线观看字幕精品| 伊人黄色片| 一起草三级AV电影在线观看| 男人的天堂com| 在线五区| 国产精品天干天干综合网麻豆| 大香蕉伊人亚洲| 日本免费中文一区二区三区四区| 中文字幕av亚洲在线| 国产精品无码久久久久2028| 美女操逼A A| 国产亚洲99久久精品熟| 欧亚日韩一区在线| 亚洲图片欧美| 精…码一二三区| 91精品人妻一区二区三区蜜桃| 欧美色老汉| 蜜桃传媒视频第一区入口在线看| 久久九九精品一区二区| 九9精品| 日韩精品电影| 欧洲精品欧洲精品| 国产精品午夜福利视频| 激情小说亚洲图片| 欧美性五月| 99精品在线| 欧美桃色网| 精品人妻高清麻豆av| 青青久草| 亚洲熟妇A V黑人| 天美传媒AV在线| 人人操人人色网| 日本韩国国产精品一区| 日本爽爽爽爽爽爽免费视频| 久久精品午夜国产亚洲AV无码| 9国产超碰| 亚欧成人综合影院| 久久久久国产精品片区无码直播| 日本亚洲熟女视频| renqi久久久久久久久久久久| 久久精品人体| 91国产大片| 91老熟女91老女人| 欧美熟妇精品黑人巨大91| 天天干电影| 日韩免费福利在线观看| 国产亚洲精品农村妇女| 久久性爱城| 99久久这里只有精品| 91网站18在线| 日日骚av| 香蕉欧美| 人人摸人人添人人操| 婷婷综合在线| 久久九七| 九九九九一区| 日本韩高清无砖码22o| 高清国产性猛交xxxx乱大交| 高清国产av无码| 久久综合18p| 成人在线午夜视频一区| 热热色91| www.黄色在线| 男人天堂2019亚洲| 96国产污污污丝袜| 亚洲综合网91| 乱伦a片视频| 99久热| 97精品综合久久网| 超碰碰97资源站| 九九综合久久中文字幕| 首页亚洲国产高跟丝袜诱惑视频| 白丝少妇一区二区| 99re这里只有| 青椒国产97在线熟女| 啊灬啊灬啊灬好深灬快高潮了动漫-国产字幕国产在线观看-B049AV | 少妇精品久久久八区九区| av中亚| 一级特级aaaa毛片免费观看 | 国产乱弄免费在线视频。| 999久久芭蕾| www.99色| 囯产精品一区二区三区线|亚洲人成无码网WWW动漫|国产精品免费一级... | 啊啊啊啊好大好硬啊啊啊啊啊| 超碰九7免费| 国产 日韩 欧美 中文 另类,国产 欧美 另类 制服 变态,高清 日韩 欧美 中文,高 | 九九九热| 欧美视频边做饭边橾| AV天堂电影网| 欧美激情在线观看视频| 操逼操逼逼操操逼91| 爱干爱射网啊啊啊| 女生久久网| 777奇米影视777四色| 91九九九逼| 久久男人的天堂| 久久99综合| 国产AB视频| 眼镜人妻101.com| 一区久久久二区| 亚洲国产精品无石码久久| 在线无码操| 亚洲欧美日韩国产丝袜自拍中文| 一本色道无码DVD中文字幕| 亚洲色五月| julia国产在线| 伊人久久大香大香线蕉中文| 亚洲色情在线影视| 大学生口爆吞精| 国产专区路线| 欧美成人免费在线观看| 开心激情站| 久久99九九九九6666免费观看软件| 国人欧美精品一区二区| 狠操91,com| 麻花传媒免费网站在线观看| 久久国产对白激情浪潮 | 日韩钢筋无码高清啾啾啾| 视频国产欧美在线播放| 91人妻超碰| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师黑人潮喷一 | 婷婷五月天久久精品视频一区二区三区| 欧美日韩亚洲天堂| 久久天堂婷婷网| 91骚熟女| 亚洲人精品久久久喷水| 日日夜夜精品视频| 人妻夜夜爽天天爽麻豆三区网站 | 94色色电影网| 人妻天堂综合网| 天美传媒AV在线播放| 97色冈| 久久久久9999| 综合网亚| 樱花蜜乳av| 成人精品欧洲亚洲| 亚洲一区二区精品福利| 亚洲久草AV色图| 日韩午夜啪啪视频| 嗯嗯啊啊啊好爽| 亚洲精品视频二区| 免费岛国一级片| 欧美在线55555| 影音先锋乱| 极品少妇久久久| 久久9 9 9精品| 亚洲AV无码翔田千里网站| 久久精品国产精品| 97人人超| 亚洲成人激情小说视频| 久久爽爽精品| 人人透人人操| 亚洲国产精品无码AV久久| 天天日天天射天天干| 午夜爽爽爽在线观看永久入口姬片| www.成人无码| 另类综合另类| 草草影院最新网址| 亚洲欧美综合图片| 青青草吊丝| 婷婷影院入口| 亚洲天天在线| 午夜综合在线| 亚洲色偷偷色噜噜狠狠99网| 成人97人人超碰人人| 91精品操美女| 九九九久千久久激情蜜桃在线看| 久久黄色性爱视频| 夜夜高潮夜夜爽夜夜爱爱一区| 欧美有码亚洲中文字幕一区二区三区四区| 不卡av在线中文字幕| 91热| 手机久操欧美综合色码| 99在线精品观看99| 天天躁日日躁成人字幕aⅴ| 久久精品国产97欧美精品亚洲 | A V少妇特黄三级| 免费一级黄色录像影片| 婷婷激情四射| 五月天加勒比啪| 国产精品情侣啪啪| 极品色www影院| 眼镜人妻101.com| 农村妇女精品一二区| 精品人妻一区二区三区视频| 久久精品人体AV| 亚洲最大AV网| 欧洲亚洲国产综合在线| 超碰人妻97| 色香综合天天影视综合 | 国产色精品午夜大片| 综合久久97| 欧美少妇高潮视频| 伦理弟一页| 嗯……啊…嗯嗯…啊…好舒服| 国产成人+综合亚洲+天堂| 国产乱色国产精品免费视| 淫荡网址| 欧美草草高清日韩视频| 97一区二压| av在线人气| 密桃99999| 99超级碰免费视频| 欧美三级中文字幕hd| 色就色综合| 自拍偷拍第26| 国产捆绑一区| 精品国产乱码久久久久久蜜臀| 欧美丰满少妇交换91欧美精品| 国产精品亚洲日韩骚欢乐谷最新地址发布页huanieguty性屋娱乐妖精视频 | 色悠久久久av| 97亚洲性爱| 超碰欧美COM| 美女让帅哥通她小鸡鸡| 美腿色图| 亚洲国产欧美日韩人妻日中文| 日本午夜福利影院| 亚洲一区二区三区欧美日韩| 精品少妇人妻av久久免费| 黄色成人网久久久久久| 秋霞色色影院| 国产色图乱伦| 97超碰站| 日日摸天天爽夜夜欢| 午夜九九九九九九| 96久久久久久久| 欧洲精品二区| 欧美激情区| 欧美一二三| 九九碰九九爱97超碰| 91久久青青草原精品| 97亚洲综合| 亚洲AV成人精品网站在AV| 久久性爱视频免费看| jizz啪啪| 亚洲欧美在线观看无码| 成人a级高清视频在线观看| 蜜乳av一区二区| 熟女乱伦A| 欧美性爱系列| 久久久久久人妻| 欧美日韩性感| 大香蕉欧美伊|