免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Python+CUDA時域有限差分法:電磁仿真加速實踐與避坑指南

Python+CUDA時域有限差分法:電磁仿真加速實踐與避坑指南 簡介面向電磁場、聲學(xué)與熱傳導(dǎo)等波動問題的 Python 與 CUDA 加速 FDTD時域有限差分學(xué)習(xí)項目適合具備一定 Python 基礎(chǔ)、希望理解數(shù)值求解偏微分方程并借助 GPU 提速的讀者。壓縮包共 35 個文件以 Python 腳本為主20 個 py另有 2 個 CUDA 內(nèi)核文件、9 個 txt 物理量與說明文件以及實現(xiàn)文檔和開發(fā)歷程記錄整體僅 1.19MB結(jié)構(gòu)緊湊已有 183 人學(xué)習(xí)瀏覽。內(nèi)容覆蓋一維到二維的多種仿真示例如波導(dǎo)、分束器、環(huán)形振蕩器、PML 吸收邊界、Ricker 子波源等并包含 dipole 的 CUDA 加速實現(xiàn)按一維變化、二維結(jié)構(gòu)、廣義坐標(biāo)、正交柱坐標(biāo)等主題分類便于按需查閱。配套文本給出 h-mu、h-phi 等物理量與坐標(biāo)定義可對照公式理解 FDTD 的離散化、時間步進、邊界處理以及 GPU 線程分配、內(nèi)存管理、并行效率等優(yōu)化要點。下載后可快速復(fù)現(xiàn)仿真場景也能在此基礎(chǔ)上擴展自己的電磁場或聲學(xué)模擬任務(wù)適合作為學(xué)習(xí) FDTD 與 PyCUDA 的參考素材。1. 一個“下載.zip”背后的完整電磁仿真方案Python CUDA 時域有限差分法拿到帶“Python_Cuda_下載.zip”后綴的項目懂行的人第一反應(yīng)不是急著解壓而是先問這套時域有限差分法FDTD代碼包給到我手里的到底是一個能直接跑的求解器還是一堆需要自己拼裝的零件FDTD 是電磁場數(shù)值模擬里最成熟的時域算法之一它把麥克斯韋方程組在空間和時間上交錯離散直接模擬波的傳播、散射與耦合過程。純 Python 寫一個一維教學(xué)版 FDTD 不難但網(wǎng)格一旦鋪到百萬級解釋器逐層循環(huán)會慢到讓人懷疑人生CUDA 加速正好卡在這個痛點上。這篇筆記面向準(zhǔn)備拿這套代碼做光學(xué)、天線或射頻仿真的工程師和學(xué)生從原理、最小實現(xiàn)到 CUDA 遷移路徑把每一步的選型理由和常見坑位一次講透。2. 時域有限差分法先立住原理Yee 網(wǎng)格、交替更新與 Courant 條件2.1 為什么 FDTD 能在電磁仿真里當(dāng)“萬金油”FDTD 能成為工程界的常青樹靠的不是精度天下第一而是它在時域正面求解的獨特優(yōu)勢。頻域方法通常一次求解只給一個頻率點的響應(yīng)想拿到寬頻結(jié)果就要掃頻計算量線性疊加FDTD 則是對一個寬帶脈沖源做時間步進一次算完就能通過傅里葉變換得到整個頻段的響應(yīng)。做天線、濾波器、超材料這類強色散、強諧振問題這個特性省下的時間不是一倍兩倍。另一個被低估的優(yōu)點是對非線性介質(zhì)和時變材料的天然適配。很多頻域方法的核心假設(shè)是線性時不變遇到光學(xué)非線性效應(yīng)只能繞路FDTD 的迭代結(jié)構(gòu)里每個網(wǎng)格點的介電常數(shù)可以隨局部場強變化當(dāng)場更新非線性效應(yīng)只是多寫一行賦值的事。加上 FDTD 處理復(fù)雜幾何只需要網(wǎng)格填充不需要像有限元那樣生成高質(zhì)量網(wǎng)格程序結(jié)構(gòu)的魯棒性也高出一截。代價同樣明顯網(wǎng)格分辨率直接決定了內(nèi)存和算力。工程經(jīng)驗是每個波長至少鋪 10 到 20 個網(wǎng)格三維場景下網(wǎng)格數(shù)是波長分辨率的立方增長。一個 10 微米見方的近紅外光子器件在 1550 nm 波長下粗略也要鋪 100 乘 100 乘 100 的網(wǎng)格如果時間步再被 Courant 條件卡住步進上萬步是常態(tài)。這就是 CUDA 進來的理由搞不定性能FDTD 只能停留在教學(xué)玩具階段。2.2 Yee 晶格與 E/H 場的交錯離散代碼里那兩行更新公式從哪來FDTD 最核心的設(shè)計出自 Kane Yee 在 1966 年的論文把電場和磁場在空間上錯開半個網(wǎng)格在時間上錯開半個步長。以三維為例每個電場分量周圍環(huán)繞四個磁場分量每個磁場分量周圍同樣環(huán)繞四個電場分量。這個交錯布局讓麥克斯韋旋度方程可以被二階中心差分直接離散不用解任何線性方程組當(dāng)前時刻的場值只由上一時刻的相鄰場值決定。一維情況下假設(shè)波沿 x 方向傳播只保留 Ez 和 Hy 兩個分量離散位置寫成Ez 定義在整數(shù)網(wǎng)格點 i 上Hy 定義在半整數(shù)網(wǎng)格點 i 0.5 上從法拉第定律和安培定律出發(fā)展開旋度方程后得到# 安培定律E 的更新用 H 在相鄰兩個半網(wǎng)格點的差值 ez[i] ez[i] courant * (hy[i] - hy[i-1]) # 法拉第定律H 的更新用 E 在相鄰兩個整數(shù)網(wǎng)格點的差值 hy[i] hy[i] courant * (ez[i1] - ez[i])courant 在這里是庫朗數(shù)真空歸一化單位下等于 c 乘以 dt 除以 dx。這套交錯更新的意義在于E 場的旋度只依賴 H 場的空間差分H 場同理每個網(wǎng)格點上的值獨立更新天然適合并行。三維場景只是重復(fù)六次相同模式的更新分別對應(yīng) Ex、Ey、Ez 和 Hx、Hy、Hz索引錯位的套路完全一致。真正容易寫錯的是索引邊界。Ez 的更新用到了 hy[i] 和 hy[i-1]那么 Ez 最左邊一個格子依賴不存在的 hy[-1]Hy 的更新用到了 ez[i1]最右邊一個格子同樣越界。代碼里必須把兩端單獨處理或者把更新的索引范圍收窄不然數(shù)組越界在 Python 里可能不報錯直接用垃圾值污染所有結(jié)果這也是新手最容易翻車的地方。2.3 Courant 穩(wěn)定性條件與網(wǎng)格分辨率參數(shù)設(shè)錯的典型翻車現(xiàn)場FDTD 是顯式時間步進算法時間步長不能隨便取。穩(wěn)定性條件由庫朗數(shù)約束三維情況下 courant 必須小于等于 1 除以根號 3二維是 1 除以根號 2一維就是小于 1。實際使用時通常取 0.9 倍的安全系數(shù)三維用 0.5 到 0.7 都是常見做法。這個限制來源于差分格式的特征值譜超了之后誤差會隨時間步指數(shù)放大表現(xiàn)出來就是波形跑到幾百步突然變成 NaN。比發(fā)散更隱蔽的是數(shù)值色散。即使?jié)M足穩(wěn)定性條件時間和空間差分近似本身會引入與頻率相關(guān)的相速度誤差。網(wǎng)格分辨率越低誤差越大。對寬頻脈沖而言不同頻率成分的波會以略有差異的速度傳播導(dǎo)致波形在傳播幾個波長后展寬變形。這種數(shù)值色散是個“玄學(xué)”問題不報錯但污染結(jié)果唯一可靠的對策就是把網(wǎng)格取到每波長 20 個網(wǎng)格以上然后在關(guān)鍵算例里做分辨率收斂性驗證。網(wǎng)格分辨率還直接和內(nèi)存掛鉤這里給一個預(yù)估值。一個 256 立方網(wǎng)格的單精度場數(shù)組6 個分量Ex、Ey、Ez、Hx、Hy、Hz大約占用 400 MB雙精度翻倍。如果網(wǎng)格翻到 512 立方單精度也要 3.2 GB。加上 PML 吸收邊界和源區(qū)網(wǎng)格趁早用單精度能省一半顯存這在高分辨率三維模擬里往往是成敗手。3. 用 Python 跑通一維 FDTD最小代碼、參數(shù)含義與結(jié)果自檢3.1 代碼骨架源項注入、場更新、邊界處理三步走一套可復(fù)現(xiàn)的 FDTD 主循環(huán)不管幾維都繞不開四個環(huán)節(jié)更新 E 場、注入源項、更新 H 場、吸收邊界。順序不能亂因為 E 和 H 在時間上差半步先算誰后算誰決定了時間對齊關(guān)系。常規(guī)做法是先更新 E用上一時刻的 H然后注入源再更新 H用剛算好的 E這樣源項對 E 的影響會在下一步傳遞到 H物理上是對的。源項的類型決定了模擬的用途。高斯脈沖是默認選擇因為它的頻譜是平滑的高斯形覆蓋從低頻到高頻的連續(xù)范圍適合寬頻響應(yīng)分析正弦連續(xù)波適合單頻穩(wěn)態(tài)問題比如諧振腔的 Q 值計算調(diào)制高斯脈沖則兼顧兩者適合需要頻帶限制的場景。做散射問題還可以用平面波源加總場散射場分區(qū)不過那屬于進階玩法先把點源跑通再升級。邊界處理是最容易被忽略的一部分初學(xué)者經(jīng)常用零邊界或者硬邊界結(jié)果波一到邊界就彈回來在域內(nèi)來回反射模擬結(jié)果被污染得面目全非。我一般建議從一階 Mur 邊界起步它只需要一個賦值語句把邊界格子的場值設(shè)為相鄰格子場值本質(zhì)上是行波假設(shè)下的簡易無反射截斷對教學(xué)和小規(guī)模驗證足夠。追求低反射率就用 PML這留到最后一章展開。3.2 一維自由空間傳播的完整腳本與逐段說明import numpy as np # 網(wǎng)格與物理參數(shù) nx 800 # 空間網(wǎng)格數(shù) dx 1e-3 # 空間步長單位米 courant 0.8 # 庫朗數(shù)必須小于 1 dt courant * dx / 3e8 # 時間步長單位秒 nt 600 # 總步進數(shù) # 場初始化 ez np.zeros(nx) hy np.zeros(nx) # 高斯脈沖源參數(shù) src_pos nx // 2 # 源放在域中間 t0 80 # 脈沖峰值時刻 spread 20 # 脈沖寬度控制 # 主循環(huán) for n in range(nt): # 第一步安培定律更新 Ez for i in range(1, nx): ez[i] ez[i] courant * (hy[i] - hy[i-1]) # 第二步注入高斯脈沖源 ez[src_pos] np.exp(-((n - t0) / spread) ** 2) # 第三步法拉第定律更新 Hy for i in range(nx - 1): hy[i] hy[i] courant * (ez[i1] - ez[i]) # 第四步一階 Mur 吸收邊界 ez[0] ez[1] ez[-1] ez[-2] # 每 100 步打印一次峰值確認場沒有發(fā)散 if n % 100 0: print(fstep{n}, max|Ez|{np.max(np.abs(ez)):.4f})這段代碼的核心邏輯就是上一章的兩條更新公式套進循環(huán)。courant 取 0.8 是因為一維穩(wěn)定性上限是 1.0留 20% 余量既保證數(shù)值穩(wěn)定又不會因為步長太小拖慢完成時間。dt 由 courant 除以光速換算而來這一步不能省后續(xù)做有耗介質(zhì)或色散介質(zhì)時會遇到物理時間相關(guān)信息提前把這個換算關(guān)系寫清楚省得到時候?qū)χ綌?shù)換算物理時間。源項注入放在 E 更新之后、H 更新之前時間對齊順序前面已經(jīng)說明。高斯源的表達式里 t0 控制峰值出現(xiàn)的步數(shù)spread 控制脈沖時域?qū)挾人麄児餐瑳Q定了激勵信號的頻譜覆蓋范圍。想激勵高頻分量就縮小 spread但網(wǎng)格分辨率跟不上時高頻分量會被數(shù)值色散歪曲這是一個需要協(xié)作調(diào)節(jié)的參數(shù)對。Mur 邊界的實現(xiàn)就是把邊界格子的場值復(fù)制為內(nèi)側(cè)相鄰格子的值。這個操作相當(dāng)于假裝波從邊界“走出去”對垂直入射的波有效斜入射時反射系數(shù)會明顯上升。這也是為什么后面要做 PML 的根本原因一階 Mur 應(yīng)付教學(xué)場景可以做工程算例必須換方案。3.3 怎么確認代碼沒寫錯能量守恒與波形形態(tài)兩個判據(jù)代碼能跑通是一回事跑出的結(jié)果是對的是另一回事。FDTD 代碼寫好后第一步不是上大網(wǎng)格而是先用這個一維腳本做兩件事觀察波形是否按預(yù)期向兩側(cè)傳播以及檢查能量是否守恒。兩個判據(jù)都能在代碼里以很低的成本實現(xiàn)。能量守恒判據(jù)的做法是每步計算電磁場總能量公式是電場能量密度加磁場能量密度的空間積分。在一維自由空間里沒有源和損耗時總能量應(yīng)該基本不變只會在源注入期間上升隨后保持平穩(wěn)。如果能量一直在漲說明 Courant 條件被破壞如果能量突然掉頭檢查邊界和網(wǎng)格是否異常。# 在每個時間步末尾累加可以發(fā)現(xiàn)早期發(fā)散 total_energy 0.5 * np.sum(ez**2) 0.5 * np.sum(hy**2)波形形態(tài)的判據(jù)更好操作運行模擬后取某一時刻的 ez 快照應(yīng)該看到源點兩側(cè)各有一個對稱的脈沖向外傳播。脈沖峰值位置大致等于源位置加減光速乘以物理時間可以用這個位置偏差來驗證 dt 換算對不對。我見過不少 dt 錯算成 1 導(dǎo)致波形直接飛出域外的案例這種一眼就能看穿的低級錯誤跑一次波形快照比查半天代碼快得多。如果這兩項都過關(guān)這個一維骨架就可以放心作為后續(xù)功能開發(fā)的基座。加介質(zhì)層、加 Mur 邊界升級、加金屬板反射都是在這個循環(huán)里插代碼的事。等三維版本跑不動了再進入 CUDA 遷移階段。4. 從 Python 到 CUDA三種加速路徑與一條實踐路線4.1 純 Python 循環(huán)慢在哪三維網(wǎng)格就是顯存和算力的黑洞一維 FDTD 用 Python 雙循環(huán)完全沒問題但三維場景下問題就來了。一個常見測試是 256 立方網(wǎng)格跑 1000 步光場數(shù)組就有 6 個分量約 400 MB純 Python 循環(huán)每步要更新約 1600 萬網(wǎng)格點乘 6 個分量接近一億次賦值操作Python 解釋器逐行執(zhí)行這個量級的循環(huán)一個算例跑到天荒地老。用 NumPy 切片能救一部分把內(nèi)層循環(huán)換成數(shù)組運算后單步耗時能降到毫秒級。但三維數(shù)組切片加廣播引入的臨時數(shù)組和內(nèi)存拷貝在顯存有限的場景里依然是瓶頸。更麻煩的是 FDTD 的時間步進是串行的每步依賴上一步完成沒法把時間循環(huán)也并行掉。所以真正的出路是把空間網(wǎng)格的更新并行化而這正是 CUDA 最擅長的形態(tài)一大塊同構(gòu)數(shù)據(jù)、大量線程、少量邏輯判斷。加速還得先搞清楚天花板在哪。FDTD 每個網(wǎng)格點的運算量很小主要耗時來自從顯存讀入兩個相鄰場值再寫回一次屬于典型的帶寬密集型任務(wù)。實測經(jīng)驗是一個現(xiàn)代 GPU 的顯存帶寬能達到 1 TB/s 級別按每個網(wǎng)格點更新需要讀 16 字節(jié)寫 4 字節(jié)來算理論吞吐量也能到百億級網(wǎng)格更新每秒。相比 CPU 單核的個位數(shù)億次數(shù)量級差在這里。4.2 路徑一Numba 的 cuda 目標(biāo)改動最小、上手最快Numba 是 Python 加速里門檻最低的選項不需要離開 Python 環(huán)境也不需要手寫 C/C。把之前的一維循環(huán)搬進 GPU只需要把更新函數(shù)換成cuda.jit裝飾器再顯式配置線程塊和網(wǎng)格。代價是你必須把數(shù)組顯式傳進 GPU 顯存并且接受 Numba 的 CUDA 支持版本綁定的約束。from numba import cuda import numpy as np nx 800 nt 600 courant 0.8 # 在 GPU 顯存上分配場數(shù)組 ez cuda.to_device(np.zeros(nx, dtypenp.float32)) hy cuda.to_device(np.zeros(nx, dtypenp.float32)) cuda.jit def update_e(ez, hy, courant): i cuda.grid(1) if 0 i ez.shape[0] - 1: ez[i] ez[i] courant * (hy[i] - hy[i-1]) cuda.jit def update_h(ez, hy, courant): i cuda.grid(1) if 0 i hy.shape[0] - 1: hy[i] hy[i] courant * (ez[i1] - ez[i]) threads_per_block 128 blocks_per_grid (nx threads_per_block - 1) // threads_per_block src_pos nx // 2 t0 80 spread 20 for n in range(nt): update_e[blocks_per_grid, threads_per_block](ez, hy, courant) # 源項注入只能從 host 端訪問到設(shè)備數(shù)組先用 copy 回再寫 if n % 50 0: # 示例低頻次注入模擬源 host_ez ez.copy_to_host() host_ez[src_pos] np.exp(-((n - t0) / spread) ** 2) ez cuda.to_device(host_ez) update_h[blocks_per_grid, threads_per_block](ez, hy, courant)Numba 分兩個 kernel 更新 E 和 H而不是在同一個 kernel 內(nèi)做完是為了避開線程間同步問題。FDTD 的 E 更新依賴上一時刻 HH 更新依賴新 E如果放進同一個 kernel必須在中間插入cuda.syncthreads()而 syncthreads 要求所有線程都到達同步點線程塊內(nèi)的邏輯分支不一致時會卡死。拆成兩個 kernel 調(diào)用后kernel 之間天然同步安全省心。一個明顯的坑是源項注入。Numba CUDA kernel 內(nèi)部做ez[src_pos] 這種單點操作效率不高而且需要把數(shù)組拷回 host 再寫再傳回雖然一維場景無所謂但三維里頻繁搬運會成為性能殺手。常見做法是把源項改成點源數(shù)組在 kernel 內(nèi)部按時間步判斷全局線程 ID 是否命中源位置把注入邏輯并進 update_e 一起算。4.3 路徑二PyCUDA 手寫 kernel控制最細、調(diào)試最痛苦PyCUDA 把 CUDA 的 C 風(fēng)格 kernel 直接塞進 Python 源碼里用運行時編譯生成 GPU 機器碼。它能精確控制每個線程做什么、用多少寄存器、怎么對齊顯存訪問是三維大規(guī)模算例里性能最穩(wěn)定的路徑。代價是你要同時維護 Python 側(cè)的數(shù)據(jù)流和 C 側(cè)的 kernel 代碼編譯報錯時還得看 C 的語法。import pycuda.autoinit import pycuda.driver as drv from pycuda.compiler import SourceModule import pycuda.gpuarray as ga import numpy as np mod SourceModule( __global__ void update_e(float *ez, const float *hy, float courant, int nx) { int i blockIdx.x * blockDim.x threadIdx.x; if (i 0 i nx - 1) { ez[i] ez[i] courant * (hy[i] - hy[i-1]); } } __global__ void update_h(float *ez, float *hy, float courant, int nx) { int i blockIdx.x * blockDim.x threadIdx.x; if (i 0 i nx - 1) { hy[i] hy[i] courant * (ez[i1] - ez[i]); } } ) update_e mod.get_function(update_e) update_h mod.get_function(update_h) nx 800 ez ga.zeros(nx, dtypenp.float32) hy ga.zeros(nx, dtypenp.float32) block (128, 1, 1) grid ((nx 127) // 128, 1) for n in range(nt): update_e(ez, hy, np.float32(courant), np.int32(nx), blockblock, gridgrid) # 源注入直接操作 GPU 數(shù)組 ez[src_pos] ez[src_pos] np.exp(-((n - t0) / spread) ** 2) update_h(ez, hy, np.float32(courant), np.int32(nx), blockblock, gridgrid)PyCUDA 的get_function返回的 kernel 對象支持block和grid配置參數(shù)在調(diào)用時通過 Python 對象直接傳入kernel 內(nèi)部按 C 的指針語義訪問顯存。這里比 Numba 多了一個能力源項注入可以直接在 host 端操作 GPU 數(shù)組的一個元素PyCUDA 會自動處理單元素讀寫省去了 Numba 里的來回拷貝。這是 PyCUDA 在工程效率上的實在優(yōu)勢。索引和步長的匹配是 PyCUDA 新手最常犯的錯。C kernel 里的nx參數(shù)和 Python 側(cè)的數(shù)組長度必須一致block 大小要和網(wǎng)格劃分配合。例子里的grid ((nx 127) // 128, 1)是把總網(wǎng)格數(shù)按每塊 128 線程切分如果 nx 不是 128 的整數(shù)倍最后一個塊會有部分線程不滿足邊界條件退出這是正確的寫法。很多人圖省事直接grid(10,1)導(dǎo)致線程數(shù)超過數(shù)組長度越界訪問是硬隔離的直接崩掉。4.4 路徑三C/CUDA 編譯擴展留給性能強迫癥Numba 和 PyCUDA 的運行時編譯都有小幅啟動開銷kernel 本身也受限于各自代碼生成器的優(yōu)化能力。當(dāng)網(wǎng)格規(guī)模上到千萬級、單次仿真要跑幾萬步時用 C/CUDA 寫 kernel 編譯成 Python 擴展模塊是性能上限最高的路線。BDF 的維護成本高但數(shù)據(jù)結(jié)構(gòu)完全自己掌控還能用 shared memory 做相鄰場值的緩存優(yōu)化。// fdtd_kernel.cu 核心更新一維示例三維同理擴展到三個方向 __global__ void update_e(float *ez, const float *hy, float courant, int nx) { int i blockIdx.x * blockDim.x threadIdx.x; if (i 0 i nx - 1) { ez[i] ez[i] courant * (hy[i] - hy[i-1]); } }編譯命令大致長這樣注意-arch參數(shù)要匹配目標(biāo) GPU 的計算能力。以 RTX 4060 Ti 為例它的計算能力是 8.9對應(yīng)sm_89編譯時指定這個參數(shù)讓編譯器生成適配指令集的機器碼。用舊的默認架構(gòu)編譯也能跑但性能可能差 20% 到 30%屬于白扔的算力。nvcc -O3 -archsm_89 -Xcompiler -fPIC -shared fdtd_kernel.cu -o fdtd_kernel.so拿到.so動態(tài)庫后在 Python 里用ctypes或cffi加載調(diào)用。這要求你對 C ABI 和內(nèi)存生命周期有足夠把握因為數(shù)組指針要顯式從 NumPy 轉(zhuǎn)換并保持引用否則 Python 側(cè)可能把底層緩沖釋放kernel 訪問到懸空指針表現(xiàn)為偶發(fā)的 Segmentation Fault這類問題極難排查。所以我的建議是沒有明確的性能瓶頸不要上編譯擴展Numba 和 PyCUDA 對絕大多數(shù)情況已經(jīng)夠用。4.5 加速比不是玄學(xué)顯存帶寬、網(wǎng)格規(guī)模與 kernel 合并訪問很多人拿一維 FDTD 跑完 GPU 版本后抱怨加速比只有幾倍這不是 CUDA 不行而是問題形態(tài)決定了它跑不滿 GPU。一維網(wǎng)格只有 800 個點一個 kernel 只啟動幾個線程塊GPU 的數(shù)千個計算核心大部分在空轉(zhuǎn)。CUDA 的優(yōu)勢在大規(guī)模并行一維場景連顯存帶寬都吃不滿自然拿不到好看的數(shù)字。真正讓 GPU 發(fā)揮實力的是二維和三維。二維 512 乘 512 網(wǎng)格單次更新就是 26 萬線程三維一個面就有百萬線程這時候并行度才夠。實測數(shù)據(jù)可以參考同樣 256 立方網(wǎng)格跑 1000 步純 Python 需要小時級NumPy 向量化大約幾十分鐘PyCUDA 能壓到一兩分鐘數(shù)量級差距通常在 20 到 50 倍具體數(shù)字取決于顯卡型號和參數(shù)設(shè)置。如果加速比達不到預(yù)期優(yōu)先檢查內(nèi)存訪問合并。FDTD 更新時每個線程讀相鄰兩個網(wǎng)格的值如果線程 ID 與網(wǎng)格索引一一對應(yīng)相鄰線程讀的是相鄰內(nèi)存地址這條訪問路徑是合并的帶寬利用率接近理論峰值。如果索引映射走了形比如線程 ID 乘了 2同一個 warp 的線程讀的內(nèi)存跨度翻倍帶寬利用率直接腰斬。另一個常見問題是數(shù)據(jù)類型double 的訪問帶寬只有 float 的一半能上 float 就別用 double除非雙精度需求硬性存在。# 檢查當(dāng)前顯卡計算能力確認 kernel 能覆蓋目標(biāo)架構(gòu) import pycuda.driver as drv dev drv.Device(0) print(fcompute capability: {dev.compute_capability()})5. 實戰(zhàn)避坑CUDA 環(huán)境、顯存邊界與數(shù)值發(fā)散的五個典型現(xiàn)場5.1 現(xiàn)象一CUDA out of memory三維網(wǎng)格把顯存吃光了現(xiàn)象代碼跑得好好的網(wǎng)格規(guī)模一放大啟動 kernel 時直接報CUDA out of memory或者程序在數(shù)組分配階段就掛掉。常見于從二維測試切到三維正式算例的時候。原因三維場數(shù)組的內(nèi)存占用按立方增長。一個 N 立方網(wǎng)格6 個場分量float32 單精度的占用是 N 的立方乘以 24 字節(jié)N256 時約 400 MBN512 時約 3.2 GB加上 PML 區(qū)域和源數(shù)組8 GB 顯存的卡很快就見底。這是硬件邊界的數(shù)學(xué)現(xiàn)實不是代碼 bug。解決先算后跑別開盲盒。把目標(biāo)網(wǎng)格規(guī)模代入/ 1e9算 GB 數(shù)低于顯存一半才開工。然后優(yōu)先把 double 降到 float32很多模擬場景對精度的需求并沒有高到非雙精度不可再用網(wǎng)格漸變或者子區(qū)域拆分把大問題化小。還有一個實用招數(shù)只用一個場數(shù)組做滾動更新不要為了代碼美觀為每個時間步保留歷史快照歷史數(shù)據(jù)用磁盤流式存儲。5.2 現(xiàn)象二驅(qū)動版本與 CUDA Toolkit 對不上設(shè)備初始化直接失敗現(xiàn)象pycuda.driver.Error: CUDA driver version is insufficient for CUDA runtime version或者 Numba 報cuda.cuda_error.CudaSupportError??雌饋硐翊a問題實際是環(huán)境不匹配。原因NVIDIA 驅(qū)動向后兼容新驅(qū)動能跑舊版 CUDA runtime但舊驅(qū)動跑不了新版 runtime。比如驅(qū)動 550.144.03 支持 CUDA 12.x如果你裝了 CUDA 12.6沒問題但環(huán)境里殘存著 CUDA 13 的 runtime 庫就必然報 insufficient。這是加速器生態(tài)環(huán)境里最常見的“裝完就跑不通”場景。解決先看硬件支持的 CUDA 上限再看代碼依賴的上限最后取交集。命令行直接查nvidia-smi # 看右上角 CUDA Version這是驅(qū)動支持的最大 runtime 版本 nvcc --version # 看當(dāng)前激活的 CUDA Toolkit 版本Toolkit 版本必須小于等于驅(qū)動支持版本。如果不得已要多版本共存用conda install cudatoolkit裝指定版本的 CUDA 運行庫和系統(tǒng)的nvcc解耦能解決九成環(huán)境沖突。Numba 用戶還要額外檢查numba.__version__對應(yīng)的 CUDA 綁定Numba 0.58 綁 CUDA 11.8Numba 0.59 綁 CUDA 12.x版本錯位會出現(xiàn)找不到運行時函數(shù)的詭異報錯。5.3 現(xiàn)象三WSL2 里找不到設(shè)備CUDA 在 Linux 子系統(tǒng)里的特殊要求現(xiàn)象在 WSL2 的 Ubuntu 里 import pycuda 或 numba.cuda報錯說找不到 CUDA 設(shè)備nvidia-smi命令也不存在但 Windows 側(cè)驅(qū)動工作正常。原因WSL2 的 CUDA 架構(gòu)和原生 Linux 不一樣。它復(fù)用 Windows 側(cè)安裝的 NVIDIA 驅(qū)動WSL 內(nèi)部不需要也不能直接安裝單獨的驅(qū)動內(nèi)核模塊。很多人按 Linux 教程在 WSL 里裝了一堆驅(qū)動相關(guān)包裝完反而把驅(qū)動版本搞亂設(shè)備還是起不來。解決按 WSL 專用路徑走。第一步在 Windows 側(cè)安裝 NVIDIA WSL 驅(qū)動不是標(biāo)準(zhǔn)桌面版驅(qū)動是帶 WSL 支持的版本第二步在 WSL 內(nèi)部只裝 CUDA Toolkit 用戶態(tài)部分不要碰內(nèi)核驅(qū)動。驗證方式是nvidia-smi # 能看到 GPU 型號和驅(qū)動版本但 CUDA 版本可能顯示 12.x python -c import pycuda.autoinit; print(pycuda.driver.Device(0).name())WSL2 下跑 CUDA 的性能接近原生 Linux但 PCIe 直通和顯存訪問的延遲會比原生高一些對 FDTD 這種帶寬敏感型任務(wù)影響有限。如果跑出來性能明顯不對勁優(yōu)先檢查是不是誤用了 Windows 側(cè)的路徑和庫。5.4 現(xiàn)象四波形發(fā)散成 NaNCourant 條件被破壞現(xiàn)象模擬跑到幾百步后場值逐漸變大然后變成 NaN或者直接一步跳變。打印每個時間步的能量曲線能看到指數(shù)增長。原因最常見的是 courant 大于 1。三維情況下穩(wěn)定性上限是 1 除以根號 3約 0.577很多人直接沿用一維 0.8 的經(jīng)驗值直接爆了。另一個隱蔽原因是網(wǎng)格里包含不同介質(zhì)區(qū)域介質(zhì)的折射率不同導(dǎo)致局部光速不同如果 courant 是在真空參數(shù)下算的在折射率大于 1 的介質(zhì)里 dt 不變但局部 c 變小等效庫朗數(shù)下降這不會導(dǎo)致不穩(wěn)定但會讓誤差變大。反過來在折射率小于 1 的色散介質(zhì)里就可能突破穩(wěn)定上限。解決全局按最壞情況取 courant。三維固定取 0.5二維取 0.7一維取 0.8這是個不容易出錯的規(guī)則。然后每 10 步打印一次np.max(np.abs(ez))和總能量看到數(shù)值開始單調(diào)上漲就立刻停用二分法找臨界步長比一次跑完看結(jié)果再猜高效得多。還有個被人忽視的細節(jié)邊界條件寫成了硬邊界而不是吸收邊界時波會在域內(nèi)來回反射并疊加雖然數(shù)值本身不發(fā)散但峰值會明顯虛高波形永遠平穩(wěn)不下來。這種看起來不像報錯的“隱性翻車”只能靠能量守恒判據(jù)來抓。5.5 現(xiàn)象五邊界反射把結(jié)果污染了缺了吸收邊界現(xiàn)象波形在傳播到模擬區(qū)域邊界后反射回來在域內(nèi)形成駐波狀干涉條紋反射波的峰值甚至能和原始波形疊加出錯誤的共振峰。原因一階 Mur 邊界只對垂直入射波有效斜入射反射系數(shù)隨角度增大三維模擬中波從任意角度打到邊界的情況太普遍Mur 邊界撐不住。更關(guān)鍵的是如果干脆把邊界設(shè)成零值硬邊界PEC 默認行為波會在邊界全反射數(shù)值上有解但物理上完全不是你想模擬的場景。解決上 PML。PML 的思路是在邊界區(qū)域植入一層有損耗介質(zhì)讓進入的波指數(shù)衰減到最外層再反射回來時已經(jīng)衰減到可以忽略的程度。一個設(shè)計良好的 PML理論反射系數(shù)能到 1e-6 以下遠好于 Mur 邊界的百分之一量級。代價是邊界區(qū)域要多算十幾個網(wǎng)格層的更新并引入額外的輔助變量內(nèi)存和算力多消耗約 20% 到 30%。我測試過最直接的反差同樣的 100 乘 100 二維 FDTD用 Mur 邊界跑出來的透射率曲線在高頻段有明顯波紋換成 10 層 PML 后波紋消失曲線干凈得像教科書插圖。這個改善不值得猶豫從工程第一天就應(yīng)該用 PML。6. 把這個代碼包用出價值PML 吸收邊界與近遠場外推的落地技巧PML 是這個代碼包里最值得先吃透的模塊因為幾乎所有真實算例都依賴它。它的數(shù)學(xué)形式看起來復(fù)雜實現(xiàn)上卻有一層窗戶紙。以 x 方向 PML 為例要點是在 PBL 區(qū)域內(nèi)把每個電場分量的更新公式改成帶損耗系數(shù)的形式損耗系數(shù) sigma 從邊界內(nèi)沿向最外層按多項式梯度遞增。常見做法是 10 層厚度、4 次方坡度理論反射率在 1e-5 以下。# 一維 PML 區(qū)域中 Ez 的更新sig 按層數(shù)梯度分布 # ca 和 cb 是最重要的參數(shù)拿回來和總是 1 的自由空間公式對照 sig sigma_max * (x_in_pml / pml_thickness) ** 4 ca (1 - dt * sig / 2) / (1 dt * sig / 2) cb courant / (1 dt * sig / 2) ez[i] ca[i] * ez[i] cb[i] * (hy[i] - hy[i-1])ca 項逐漸把舊場值壓下去cb 項仍然傳遞相鄰網(wǎng)格的耦合兩者配合讓波在層層推進中不斷衰減。調(diào)參的核心是 sigma_max取太小衰減不夠取太大數(shù)值反射反而上升工程上先在自由空間場景里測一遍反射率用峰值反射系數(shù)作為調(diào)參目標(biāo)再投入正式算例。近遠場外推是讓這個代碼包從“能算場分布”升級到“能算遠場方向圖”的關(guān)鍵一步。FDTD 天然算的是近場區(qū)域的場值而天線遠場方向圖、雷達散射截面這些工程指標(biāo)是在遠場定義。常規(guī)做法是在包圍目標(biāo)的閉合曲面上記錄等效電流和等效磁流用等效原理在頻域做積分變換。這個過程不復(fù)雜但要記得在時間步進結(jié)束后把所有記錄場值做一次傅里葉變換再到關(guān)心的頻率點上執(zhí)行外推計算。拿這套代碼做工程項目我最想提醒的是控制預(yù)期。別一上來就鋪三維大網(wǎng)格加 PML 加近遠場外推這套鏈路里每一環(huán)都有一到兩個隱藏參數(shù)任何一個設(shè)錯都讓結(jié)果失真。最好的習(xí)慣是先跑通一維透射驗證再上二維環(huán)形諧振腔最后才碰三維天線模型。給自己寫一個回歸腳本模擬自由空間高斯源傳播斷言波形峰值位置與理論位置偏差不超過一個網(wǎng)格改任何代碼后先跑這個腳本全綠之前不碰新功能。這個習(xí)慣幫我躲過了無數(shù)個從下午修到凌晨的 debug 局。希望幫到你。本文還有配套的精品資源點擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
婷婷五月花| 99激情视频| 五月婷婷六月激情| www.久久久.com| 色综久久久| 大香伊人婷婷影院| 爱久久小说下载网| 任你艹| 性99网站| 色婷婷五月天堂资源| 国产婷婷五月| 91综合视频丁香| 九色91国产| 东北婷婷五月天| 五月婷网| 久操热线| 五月天丁香网| 99色婷婷视频| 丁香五月激情综合| 99视频精品全部免费看| 91一起操| 五月婷婷综合网| 在线观看欧美3区| 亚洲丁香花色| 五月婷婷六月丁香| 色噜噜综合网| 蜜桃人妻无码AV天堂三区| 另类视频五月天| 综合狠狠五月婷婷| 色色aⅤ網| 丁香五月综合色婷婷| 91久久综合亚洲噜噜成人在线| 国产乱妇乱子在线播视频播放网站 | 久久婷婷五月综合色奶水99啪| 天天天天做夜夜夜夜做| 激情九九这里只有精品| 五月丁香六月婷婷久久久综合| 美女五月天婷婷| 超碰成人在线观看| 天天操天天爱天天日| 蜜乳人妻一区二区三区| 婷婷丁香花五月天| 99视频内射三四| 天天综合色丁香| 丁香五月天激情四射网络不好| 亚洲九N| 亚洲成人综合在线| 亚洲春色奇米影视| 丁香五月成人自拍| 五月综合激情| 丁香五月婷婷少妇| 色婷婷丁香香香蕉视频| 九九无码| 五月天婷婷综合网| 丝雨一区二区| 日韩精品一品二区三区的使用体验 | 五月丁香操婷逼| 色综合视频| 9超碰在线| www.九月婷婷丁香.com| 亚洲五月天婷婷| 26UUU欧美激情一区二区| 婷婷六月天天| 五月天六月丁香| site:xiongshengzz.com| 日本va欧美va欧美va精品| 九月丁香亭亭| 婷婷五月天日日日干干干| 亚洲丁香五月天在线视频| 精品综合久久久久久五月天| 丁香六月婷婷综合缴| 婷婷五月天美女21p| 婷婷 色 丁香 夜| 天天做天天爱天天爽综合网| www.久热| 五月天激情图片网| 欧美日韩大黄| 五月丁香综合激情| 五月婷婷丁香六月| 五月丁香色综合| 玖玖资源站国产| 五月色情婷婷开心五月色情| 久久99网| 亚洲精品国产熟女久久久| 国产综合A片| 亚洲视频无| XX久久| 丁香五月婷婷激情小说| 可以看的AV| 色综合区| 婷婷丁香婷婷97| AV在线大香蕉| 天天色宗合| 色一情一乱一乱一区91Av| 亚洲精品久久久久久久久久飞鱼| 婷婷丁香宗合888| 性爱动图国产麻豆一区二区三区 | 丁香五月色情av| www.99热这里精品| 国产99视频永久免费| 天天摸天天舔| 婷婷五月天久草在线| 99热销国产这里有精品| 婷婷五月天电影在线| 热久久91| 色婷久| 五月色亭丁香| 色色色综合网| 五月丁香激情婷婷| 色久丁香五| 五月丁香六月婷| 六月激情丁香一道本7777| aⅤ79成人片| 色婷婷丁香五月色综合网| 日本色婷婷| www。五月,com| 激情久久久| 丁香五月六月婷婷殴美综合| 综合av在线| 色五月成人| 天天色官网| 久久六月天| 91久久精品视频| 思思色综合网站| 国产精品社区| 激情九月天天天天婷婷| 成人在线视频一区| 婷婷99丁香| VA婷婷亚洲| 色香欲综合| 五月婷婷综合性爱噜噜| 天天做天天爱天天爽综合网| 日韩AV在线免费| 激情开心五月婷婷| 《战争与艾拉》完整版| 婷婷色色五月天| 婷婷五月综合色中文字幕| 丁香五月网在线观看| 日日爽夜夜爽| 婷婷五月天va| 熟女色色一区二区| 天天夜夜爽| 国产毛多水多女人A片| 91操片| 色色色色网站| 亚洲综合视频网| 亚洲人人操| 亚洲综合激情五月久久| 久久思思99| 综合久久人妻| 中文字幕激情综合| 国产免费一区二区在线A片视频| 色五月激情综合| 婷婷激情综合| 色欲久久综合| 91九色最新视频| 精品综合久久久久久五月天| 99热伊人综合| 激情五月天天狠狠久久| 异能之下短剧免费观看全集| 午夜性做爰电影| 开心丁五月| 六月丁香五月婷婷| 丁香婷婷色| 亚洲国产黄色电影| 久操激情| 丁香色啪综合| 亚洲激情五月| 色综合天天综合成人网| 亚洲bt丁香五月天婷婷激情小说| 日本99视频精品免费播放| 五月婷婷综合在线视频小说| 亚洲成人AV在线播放| 婷婷五月天久久久| 五月丁香在线精品| 色色色色区| 色婷婷天堂| 97影院一级片| 思思re最新视频| 国产高清精品色| 五月婷婷久久爱| 色欲色香综合网| 麻豆雪千夏| 五月天丁香网| 婷婷丁香综合| 99综合色色色| 五月丁香婷婷老司机| 九九99香蕉在线视频播放| 婷婷射图五月天| 亚洲操操操| 草AV9999| 久久婷婷六月综合| 99玖玖视频| 亚洲网站999| 五月天激情小说婷婷| 爱久久小说下载网| 五月天另类小说| 99热这里只有精品33| 97五月天婷婷综合激情网| 囯产精品久久欠久久久久久九大| 五月天开心婷婷激情网站| 久久精品这里只有精品免费首页| 99热在线观看这里只有精品| 伊人婷婷青青cao| 五月婷婷香蕉| 99精品视频在线观看| 欧美日本一区二区三区| 三级三久久线久久99久目本WW| 超级碰碰97在线| 播五月丁香三月婷婷| 99热只有精品在线播放| 九月丁香亭亭| 69色婷婷| 天天日P天天射P| 天天插综合| 激情婷婷六月| 一个色的综合| 6月丁香婷婷| 99视频日韩| 亚洲中文字幕av| 丁香五月天婷婷中文字幕| 色婷婷影院| 91日婷婷在线| 成人网在线观看视频| 9久久久久| 丁香五月冃欧美| 99色色爰| 国产欧美日韩性爱| 丁香婷婷五月激情| 九九亚洲综合| 9l视频自拍9l九色9l成人| 成人做爰黄A片免费看直播室男男| 欧美人人操| 丁香五月婷综合网| 日韩视频99| 五月丁香综合久久| 人妻在线中文字幕久久| 久久人妻情侣| 人妻肉射免费观看| 天天色天天舔天天爱天天爽 | 天干干夜夜操| 精品网站99| 久久九九色| 99热这里只有精品9| 婷婷成人丁香色情基地30| 亚洲国产精品成人免费一区久久久在线观看AAAA | 婷婷六月亚洲综合| 久草a片| 可以看的AV网站| 六月天无码网址| 五月天婷五月天综合网小说首页-五月天激激婷婷大综合,婷婷亚洲综合五月天小说 | 伊人五月久久| 亚洲婷婷激情888精品久| 久思思热视频在线观看| 日操| 思思色综合网站| 五月天激情网址| 婷婷五月天色综合翘| www.99热最新视频8| 超碰在线91| 99热亚洲| 台湾综合丁香五月蜜桃| 97久久香草精品视频| 色婷婷丁香五月天在线视频| 韩国久久少妇视屏| 五月激情站| 天天日夜夜爽| 噜噜噜狠狠色综合| 日本不卡高字幕在线2019| 一级片操逼视频| 色色色五月天婷婷| 激情伊人网| 五月婷在线影院| 婷婷亚洲影院| 久色五月| 狠狠干婷婷| 色婷婷五月天偷拍| 影音先锋AV男人站| AV中文在线| 性爱视频99| 色噜噜综合网| 丁香九色不卡aaa| 97五月婷婷| 五月丁香六月婷| 玖玖99福利| 丁香五月天激情综合网| 91九色熟女| 五月婷婷六月天| 国产成人精品一区二三区熟女在线| 国产av一区二区三区| 无码字幕中文| 国产99久久久| 中文字幕色色| 99久久6| 婷婷成人基地| 精品牛仔裤超碰| 五月天无码| 我爱婷婷五月天综合88| 免费婷婷| 婷婷五月天av小说| 第2色五月婷| 97碰 在线视频观看| 97碰碰电影| 丁香五月激情婷婷视频| 亚洲综合五月天婷婷| 九九视频这里只有精品| 六月丁香成人| 99爱免费在线视频| 色婷婷丁香五月| 亚洲人人干| 五月天婷婷丁香| 色五月天在线观看| 色噜久| 最新日本A片| 五月停停激情网| 五月婷婷干干干| 婷婷五月色丁香在线看| 夜夜撸夜夜骑| 国产操B视频| 五月天激情国产综合AV| 天天拍天天操| 婷婷涩五月| 国产精品A片| 五月丁香婷婷综合| 午夜爱爱网站| 亚洲色婷婷五月天| 超级碰碰碰久久网站视频| 色婷婷婷av| 色婷婷婷婷五月天| 99热有精品在线观看| 91丨九色丨国产打屁股| 五月丁香久久久久| 大香蕉 伊人夜| 思思热再线视频| 婷婷五月婷婷| 91操网| 五月丁香六月婷婷亚洲综合| 色吧婷婷五月亚洲| 五月情婷婷五月| 99久久婷婷国产综合| 九九久久玖玖爱| 天天天天天色| 亚洲亚洲人成综合网络 | 久久九色| 九九Av| 91要啪| 人人操AV| 97在线刺激| 在线观看中文字幕| 欧美一线视频| 色综合五月| 大香蕉人人网| 九九热精品在线| 丁香五月婷婷少妇| 无人精品在线视频| 久久综合色五月| 人妻久久人妻久久第一区| 七月丁香婷婷 色色| 婷婷狠狠久久| 91 九色大美女| 深爱激情AV| 天天天天操| 欧美狠狠草| 在线观看中文字幕| 人妻操逼| 日韩三十六页| 激情六月色| 日本毛片内射| 操人无码| 五月激情丁香五月宗合| 亚洲AV日韩在线观看| 五月激情丁香| 亚洲操B视频| 色情五月天丁香社区| 中文AV在线观看| 色综合久久88色综合天天99| 婷婷五月亚洲激情| 亚洲免费综合一区| 日本九九网| 99日在线视频| 麻豆AV一区二区三区| 久久96热| 黄网免费观看| 国产精品A成V人在线播放| 逼逼AV| 性爱激情久久| 六月丁香婷| 伊人大香五月天| 亚洲愉拍99热成人精品| 婷婷久久综合| 丁香婷婷免费| 国产伊人大香蕉| 天天肏天天肏天天肏| 久久综合五月天| 爱射综合| 色综合色色色| 99色综合网| 亚洲丁香五冃97色| 五月婷婷丁香| 精品无码99| 色婷婷久久天天性爱| 伊人在线视频| 久久久这里有精品| 亚洲天天免费| 五月丁香啪综合| 精品一二三区久久AAA片| 婷婷六月天亚州| 成人精品人妻| 丁香五月婷婷综合激情啪啪啪| www.婷婷,com| 久噜久噜| 人妻性爱| av色婷婷| 日逼影音先锋AV男人资源站| 成人片在线播放| 99热99热在线| 26uuu欧美亚洲日韩| h亚洲| 成人.在线日韩| 免费AV在线| renre人人操国产超碰在线 | 五月丁香网中文字幕| 99九九在线视频| 日本一级黄色片。| 九九热在线精品| 99在线精品免费视频| 九九九精品视频免费观看| 色 噜噜 九月 婷婷| 久久伊人五月天| 五月天六月婷婷| 婷婷丁香五月天综合网| 五月天婷婷激情网| 亚洲AV日韩无码| 亚洲在线播放| 丁香五月婷婷综合激情啪啪啪| 日韩1区2区| 狠狠操狠狠操| 99热6色| 全部老头和老太XXXXX| 丁香五月天.com| 五月婷婷亞洲中文| 插插五月天| se99高清无码| 久久久五月天| 久久婷婷五月天懂色| 热久久婷婷| 成人.在线日韩| 深爱婷婷网| 久久久精品AV| 日韩成人AV在线播放 | 9999三级片| 蜘蛛女侠2003满天星免费观看| 婷婷五月伦理| 激情五月天激情综合网| 免费观看2018www黄色操逼网站| 丁香五月天视频| 二色av| 五月婷婷五月天| 天天爽天天干| 97丁香五月| 天天干,夜夜爽| 丁香涩涩爱| 精品A√| 米奇影视资源777狠狠色婷婷五月天激情网| 五月婷丁香花| 丁香五月视频在线观看| 激情婷婷丁香色五月综合| 亚洲区,视频区,视频区免费| 青青草搞屄视频网站| 色五月激情问网站| 五月天三级| 五月婷色丁香| 久久精品亚洲一级牲爱综合| 五月丁香六月激情欧美综合| 婷婷中文字幕网| 丁香久月| 五月丁香六月激情欧美综合| 97人人干| 六月色丁香婷婷| 欧美色激情四射| 婷婷五月在线观看| www.jiujiujiu| 五月丁香啪啪啪啪| 黄网在线播放| 热99视频精品在线| 激情亚洲婷婷| 少妇丁香婷婷| 五月婷AV| 久99久精品| 伊人久久婷婷| 超碰人人摸人人操| 91色干| 色婷婷丁香| 九九热再线九九视频免费在线观看 | 99热精品一区| 婷五月天| 久久婷婷五月草视频在线播放| 日日操,日日爽| 99免费视频网| 色婷婷影院| 婷婷丁香社区| 97碰人人操| 九九国产视频| 日日夜夜狠狠干| 久久久久亚洲AV无码网影音先锋| 国产精品美女久久久久AV超清| 丁香五月大香蕉在线99| 久久超级碰碰| 思思精品久久艹| 国产激情在线| 国产精品久久久久9999小说| 婷婷五月电影| 国产精品久久久60086| 天天摸天天舔| 另类少妇人与禽zOZZ0性伦| 日本三级日本黄色| 婷婷大香蕉| 日日撸日日操| 久久小视频| 97色一二三| 色婷婷狠狠| 九色色| 综合久久综合| 超级碰碰碰久久网站| 另类激情综合| 色综合色色色| 第四色在线观看| 91九色无码日韩| 综合六月激情婷婷| 五月天婷婷久久视频| av首页在线| 99精品视频免费在线播放| 人妻久久久久久久久久| 五月丁香六月花| 五月天激情四射| 高清a片基地| 天天综合网、天天综合色| 五月色影院| 欧美搡BBBBB摔BBBBB| 中文字幕,综合,91| 精品乱码久久久久| 日韩国产AV播放| 99这里只有免费的小视频在线观看| 97色操| 9999热在线| 婷婷丁香午夜综合影视| 99色色| 激情婷婷丁香五月天| 怡红院视频| 乱乱av| 色黑鬼导航| 99热婷婷| 91操网| 五月婷婷日| 成人精品网站在线观看| 伊人网色婷婷五月天| 97操碰| 99久久精| 婷婷丁香五月综合| 4399在线观看免费高清电视剧| 综合久久影院| 五月婷久久| 九九综合伊人| 综合久久影院| 思思热精品在线视频| 五月丁香六月综合基地| 久99久在线| 操操人人| 丁香婷婷六月| 色六月丁香婷婷狠狠干| 最近免费中文字幕大全高清大全1| 中文字幕永久在线| 五月丁香婷婷啪啪| 亚洲人人干| 小香蕉av| 欧美人人草| 一本狠婷婷综合| 综合久久六月| 日本系列_4页_777FP| 99热只有精品在线| 欧美大香蕉视频| 亚洲视频二区| 五月丁香六月激情| 丁香五月激情婷婷| 五月花激情网| 思思热视频| 欧美精品久久久久久视频观看| 国色天香成人网| 日日夜夜噜噜爽爽| www.99热这里精品| 色情综合网| 99re思思热在线视频| 最新高清无码专区| 日屌日日操日日色| 久久久久婷婷| 久久R激情| 欧美黄色韩日网| 色v综合网| 91丨九色丨熟女高潮| 亚洲性爱日韩无码| 日本久久性| 日本丁香五月| 丁香美女主播视频在线观看| 五月天丁香成人社| 粉嫩AV久久一区二区三区| 热久久视频99| AV在线观看网站| 99在线免费观看| 96五月丁香熟女| 9久热在线视频精品| 丁香六月婷| 天天爽日日爽夜夜爽| 99九九99九九九视频精彩| 久久怡红院| 激情五月婷婷五月| 久久99热免费| 91疯狂操操操操| 97色色网| 日本99在线| 五月情综合| 冬月かえでAV无码播放| 思思久久99热只有频精品66| 丁香六月激情四射| 色情五月天婷婷| 91偷拍视频| 伊人婷婷99热精品| 色综合天天| 久久丁香五月天| 五月婷婷五月天激情视频| 91窝窝| 国产FREESEXVIDEOS性中国| 色五月亚洲| 99er在线观看| 99热99ai| 日本三级中文字幕| 中文字幕欧美精品久久| 全部老头和老太XXXXX| 中文字幕丰满人妻无码专区| 亚洲小视频| www.激情在线| 91久久| 亚洲乱啪| 色五月丁香91| 成人国产欧美大片一区| 亚洲激情网| 日本天堂爱爱| 日本色综合| 思思精品热在线| 日日噜噜久久婷婷五月天| 内射综合网| 超碰在线观看成人视| 亚洲综合五月天婷婷| 91久久久久久| 综合色五月| 综合视频久久| A在线观看| 亚洲无码色色| 九九色综合视频| 五月丁香六月激情综合在线| 色色啊| 99热99网| 人人澡天天色天天做| 日本久久综合| 中文字幕永久免费| 九九伊人网| 久久曰曰| av 一区三区四区| 亭亭五月丁香综合欧美| 九九人人操| 五月丁香香蕉| 五月丁香美女| 激情综合五月色在线| 久这里只有精品| 激情五月图| 婷婷五月天激情偷拍| 婷婷爱综合| 激情五月丁香色婷婷| 婷婷狠狠久久| 精品人妻久久久久久久| 有哪些A片网站| 五月婷婷亞洲中文| 99精品免费| 色婷婷A| 99精品人人| 9久久精品| 久久久久久xxxxx| 国内婷婷丁香社区在线播放| 狠狠色噜噜狠狠狠888了| 激情五月婷婷在线| 狠狠五月天| 97热精品| 欧美99| 婷婷丁香九色| 婷婷七月丁香色色| 26UUU| 久久成人综合五月天| 天天色激情| 97欧美在线| 五月天激情影院| 99久热| 亚洲人操亚洲人| 玖玖婷婷视频| 天天骑日日爽| 五月婷六月丁| 91丨九色丨白浆| 99热思思| 免费在线观看av网站| 欧美超级视频97| 久99热| 婷婷四色五月| 99久在线观看| 99热久久这里只有精品| 大香蕉丁香| 亚洲综合九九| 五月天深爱激情网| 99热国产精品| 99精品视频播放| 婷婷五月综合网| 插插网爽妇五月丁香| 99A片| 欧美色婷婷| 高清 码 免费看片短视频| 99精品在线| 久久婷婷色五月| 夜夜夜天天操| 久久丁香久久| 九九在线精点品| bukadeavzaixian| 26uuu.| 五月婷婷激情中文字幕| 熟惀91九色在线| 色综合久久88色综合天天99| 色婷婷视频综合| 91丨九色丨大屁股| 婷婷激情五月天激情小说| 婷婷亚洲五| 五月婷婷色五月| 亚洲色婷婷| 色天使色婷婷| 五月草影视| 婷婷五月婷婷| 色婷婷五月色| 五月丁香777| 亚洲色无码A片一区二区麻豆| 七七九色| 色色射| 天天色综网| 99在线精品视频观看免费下载| 99网99热| 日本在线观看aaa 99| 99热国产国产| 99热这里有精品| 综合AV在线| 偷拍九九五月丁香婷婷| va亚洲中文在线| 国产古装妇女野外A片| 无码se| 五月天开心色情网| 丁香五月婷婷大香蕉| 99热这里只有精品最新| 国产人妻777人伦精品HD| 婷五月丁香俺| 色色色免费视频| 夜夜爱伊人| 丁香成人五月天| 九九精品系列| 婷婷五月亚洲一本在线丁香| 亚洲综合色婷婷文学| Va另类视频| 嫩草AV久久伊人妇女超级A| 婷婷丁香视频在线观看免费 | 特黄三级片| 2017狠狠干| 婷婷综合精品| 亚洲免费观看高清完整版AV线| 亚洲色五月婷婷| 99综合色| 77777亚洲午夜久久| 色色色色色色色色网站| www.狠狠| 欧美三日本三级少妇三99| 99久精品视频| 久99视频在线观看| 成人AV在线电影| 国产亚洲色婷婷久久99精品91| 操久久网| 六月亚洲婷婷6月中文字幕| 无码色| 色婷婷六月激情| 国产精品人成A片一区二区| 天天拍天天做视频| 久久黄色片| 夜丁香五月婷婷| 日本在线视频看se99| 婷婷五月天综合AV| 激情图片亚洲| 精热在线综合网| 九九sese| 五月天激情婷婷小说| 久久精品熟女亚洲AV麻豆| 人妻操在线看| 色五月婷婷影视| 丁香五月人妻| 97色色色色| 黄色视频网站在线播放| 九九这里都是精品| 五月丁香久久网| 五月丁香啪啪网| 日韩久久这里只有精品| 777久久久| 婷婷综合网站| 激情校园 亚洲| 九 九九九AV| 99九色视频在线观看| 99丁香五月婷| 久久久久久久久久久久久久久久久精典| 激情五月影院| 97色色色色色色色| 就爱日五月天| 五月婷婷av| 五月婷婷久久综合| 麻豆精品| 婷婷激情五月| 色久丁香五| 丁香婷婷综合激情五月色,开心五月丁香花综合网,激情综合五月亚洲婷婷,五月天 | 狠狠va| 久热婷婷在线视频| 国产激情久久久| 啄木鸟丝袜美女福利视频| 丁香五月婷婷亚洲综合精品| 国产AV一区二区三区日韩| 久久免费精彩视频| 婷婷久久夜| 99ri在线播放| 男同91| 日日噜噜夜夜狠狠久久丁香六月| 婷婷五月天亚洲激情戏精品| 丁香九月综合激情| 99ri网站在线观看| 99热这里只有精品3| 久久色这里只有精品| 婷婷精品| 五月丁香婷婷啪啪网| 亚洲V国产V欧美V久久久久久| 99精品综合| 极品人妻videosss人妻| 97人人超| 激情熟女网| 九九成人电影婷婷| 亚洲色五月天| 激情五月天视频| 久99久热只有精品国产99| 日本久热| 丁香久久九九99| 99视频在线观看地址| 婷婷久草| 国产激情在线| 狠狠五月激情丁香六月| 五月天成人网婷婷| www.久久| 丁香五月网址| 免费人人操| 超碰69天堂| 国产成人精品一区二区三区视频| 99热在线精品观看| 五月丁香激情婷婷| 夜夜谢天天干| 色色COm| 色婷婷六月精品| 欧美激情丁香五月| 激情性爱五月天| 亚洲人妻电影| 久久婷婷五| 五月丁香婷婷伊人日韩| 黄桃AV无码免费一区二区三区| 五月丁香六月色| 五月丁香婷婷在线| 五月天激情四射网站| 成年人丁香五月| 欧美xx激情视频在线观看| 婷婷涩五月天综合| 99精品网站| 五月丁香六月色情网欧美| 色婷婷基地在线| 亚洲av综合网| 九九激情综合| 热九九精品| 中文字幕成人| 激情图片亚洲| 久久老码第一| 婷婷五月天国产手机在线视频观看| 婷婷日在线观看| www久久99com| 综合99在线| 六月婷五月丁香| 99在线视频精品| 深爱激情五月天婷婷网| 这里只有精品久| 欧美Va在线| 第四色首页| 天天色天天| 99热久草| 狠狠做婷婷| 少妇人妻人伦A片| 亚洲无AV在线中文字幕| 大香蕉伊人丁香五月| 色综合五月| 天久久久久| 久久伦乱| 国产欧美日韩性爱| 色五月久久成人婷婷| 中文字幕日韩无码制服诱或| 天天综合网亚洲综合网| 久久婷婷成人综合色怡春院| 欧美激情VA永久在线播放| 99免费热视频在线| 成人精品在线| 香蕉久操| 成人网丁香五月| 五月激情啪啪啪| 婷婷六月婷婷| 免费观看欧美成人AA片爱我多深| 五月婷婷六月丁香玖玖玫瑰91| 亚洲av网站| 无码99| 色九四色| 大香蕉久久草| 99热99日…..| 丁香五月婷婷色偷偷| 日韩AV片| 免费看欧美成人A片无码| 人人操大| 五月色综合网欧美网| 欧美丁香五月天| 五月丁香大相交| 亚洲精品V天堂中文字幕| 丁香五月久久社区| 天天插天天狠| 色狠狠色综合| a网站免费观看| 99@久久@99精品视频| 中文资源在线a | 日本三级成人秘书精品片| 成人AV网站在线| 六月五月丁香五月欧美| 激情五月色综合| 婷婷五月天丁香| 日本性视频| 丁香五月天网站| 五月婷婷花| 成人精品在线| 五月天婷婷色综合| 大香蕉九九| 五月天天天色| 天天日天天爽| 色噜噜五月天| 激情亚洲婷婷六月| 中文激情网| 夜色.cnm| 五月色婷婷影视在线电影| 激情九九六月激情免费视频| 国产日韩精品SUV| 成人版视频在线观看| 五月天婷婷永久免费视频| 中文字幕AV在线播放| 亚洲人操亚洲人| 亚洲网站在线鸭子av| 俺去也婷婷| 男女啪啪做爰高潮无遮挡 | 婷婷色片| 成人AV片播放| 成人婷婷色五月天| 99精品自拍视频| 99视频日韩| 天天爱天天日| 97久久久久| 成人网页在线观看| 九九爱看亚洲| 欧美性爱五月天| 极品色丁香| 国产午夜一区二区三区| 精品一二三区久久AAA片| 日日噜噜夜夜狠狠久久丁香六月| 五月天激情婷婷久久| 欧美成人AAA片一区国产精品| 丁香五月激情婷婷| 99国产精品久久久久久久久久久 | 亚洲精品V天堂中文字幕| 五月天激情综合网俺也去| 婷婷综合一二三| 欧美婷婷综合网| 99热只有这里才是精品| 内射在线CHINESE| 丁香婷婷综合精品六月初| 九九综合色| 中文字幕不卡+婷婷五月| 丁香五月天社区| 岛国操B不卡在线| 婷婷开心激情| 九月婷婷在线观看| 亚洲激情综合免费| 99re视频在线精品| 婷婷开心六月| 天天肏视奸| 五月婷婷丁香狠狠撸久久| 99欧美热| 五月天停停成人网| 99热午夜精品| 99这里只有精品99| 亚洲综合碰| 亚洲五月花| 丁香视频| 亚洲免费观看高清完整版AV线| 色www.con| 日韩高清成人| 丁香五月影视| 婷婷色在线| 婷婷六月丁香激情| 99色在线| 五月天全国最大成人网| aaa久久久| 日韩在线婷婷五月天综合| 99九九免费精品| www.操.com| 婷婷免费无马| 激情六月综合| 亚洲精品操一操、噜一噜、摸一摸、爽 | 棕合影院色色| 久久ww| 综合激情五月丁香9999久久精| 成人无码髙潮喷水A片| 天插天啪天啪天啪| 伊人成综合五月婷婷| 色香久久| 99热这里只有精品26| 国产乱子轮XXX农村| 色婷婷yy久| 丁香五月婷婷AV在线| 成人短视频在线| 狠狠色丁香| 狠狠狠狠狠操| 久久精品五月| 婷婷五月综合激情| 狠狠搞综合色| 激情色情五月天| 香蕉综合在线| 婷婷六月插屄激情| 在线综合91| 五月丁香大香蕉| 六月色色婷婷| 韩国19 主播内部福利vip免费播放| 九九五月天| 激情综合激情五月| 免费啪啪啪网站| 亚洲综合在线视频| www开心激情网| 亚洲AV第二区国产精品| 日日日日日| 激情综合色播| www.婷婷五月天,com| 玖玖99婷婷| 日日干天天射| 天天摸日日舔狠狠添婷婷婷| 丁香五月777| 国外亚洲成AV人片在线观看| 色五月激情五月| 亚洲精品乱码久久久久久按摩观| 岛国AAAV| 色一情一乱一乱一区91Av| 五月天婷婷青青草| 久久久99视频| 九九色插| 性综合网| 天天做天天爱天天爽综合网| 夜夜操夜夜爽| 4438成人电影| 精品欧美一区二区三区久久久| 在线视频99| WWW.桔色成人.COM| 91人妻PORNY九色大屁股| 久久五月天精品视频| 九九aV| 天天综合色| 五月婷婷婷婷婷婷艺术| 五月丁香啪啪啪| 天天透天天干| 日本视频久久| 色五月婷婷五月| 婷婷色导航| 婷婷色Av| 丁香五月激情天AV无码| 9超碰在线| av在线婷婷| 色综合99| 色九九综合| www.狠狠| 日韩十国产极品久久| 琪琪理论片| 久久九色| 九九综合色综合| 久久精彩视频99| 久久大香蕉丁香| 丁香五月性| 亭亭色色五月天| 国产性爱一级| 天天婷婷综合亚洲亚洲| 国产成人va在线| 丁香五月婷婷色五月| 这里只有精品视频视频在线观看| 五月婷婷导航| 综合日本婷婷| 日韩av免费版| 狠狠色噜噜狠| 51精品国自产在线| 激情六月婷婷| 1024日韩| 91Chinese在线| 亚洲热视频| 九九色综合九九色| Av大香蕉| 99综合免费视频| 九九AV在线| 97精品在线| 91碰在线| 操碰99| 九九热中文| 人人妻人人澡| 色综合久久中文| 婷婷狠狠18禁久久| 色色色在线观看| 婷婷五月天AV在线| 丁香婷婷91在线观看视频| 日韩av网站在线观看| 婷婷色操| 久久性刺激| 成人AV免费观看| 大香蕉婷婷丁香视频在线| 久久久香| 激情深爱五月婷婷| 99re思思在线视频| 五月激激网w'w'w| www.com操| 都市激情五月婷婷亚洲| 亚洲第一第二网站| 五月婷婷综合网| 97碰啪啪| 天天射影院| 嫩BBB搡BBBB榛BBBB| 国产毛片操B| 色五月婷婷91在线| 午夜丁香 婷婷| 97在线观视频免费观看| 免费看欧美成人A片无码| 久久综合26p| 九九热免费| 婷婷久久丁香| 99视频35精品视频在线观看| 色啪影院| 久久99视频| 丁香激情综合| 久久9RE热视频精品98| 久久性刺激| 天天爽成人综合网站| 天天添天天摸天天天天做| 婷婷五月天综合小说网| 丁香久月| 亚洲操逼网| 90色免费视频| 99视频久久久| 六月丁香激情综合网| 丁香激情合作五月| 99热在线这里| 天天看A片| 欧美成人猛片AAAAAAA| 青青日韩| 9.1综合网| 久久思思热视频| 成人av在线网址| 99热在线播放| 91伦| 五月丁香激情啪啪| 夜夜夜叫天天天做| 99色热| 超碰碰碰碰| 欧美色偷偷大香| 五月丁香美女视频| 丁香五月六月婷婷殴美综合| 综合AV在线| 国产,欧美,学生妹,视频| 成人av观看| 色综合色欲综合天天免费| 亚洲成人五月| 九九色热| 婷婷丁香社区| 婷婷激情综合色五月久久,色婷婷丁香花,丁香婷婷五月情天,久久婷婷五月综合色 | 蜜桃五月天| 丁香婷婷六月| 91久久精品视频| 精品色情一区二区三区四区| 天天做夜夜爽| 337p大胆噜噜噜噜噜91Av| 五月婷天堂视频| 精品一二三区视频立| 婷婷色五月婷| WwW色婷婷| 噜噜噜噜噜在线| 色五月丁香五月| 免看黄大片AA | 67194成I人在线观看线路1| 婷婷五月天成人综合网| 五月亭亭开心网| 色婷婷五月影院| 五月精品免费XXX| 97久久久| 日韩人妻在线观看| 五月丁香激情婷婷| 香蕉AV福利精品导航| 超碰色综合| rr天天操| 综合久久激情久久| 91精品久久久久久77777| 婷婷五月激情丁香| 五月美女婷婷风骚| 91免费在线视频6| 丁香五月电影| 六月婷婷七月丁香| 五月天精品视频| 无码激情AAAAA片-区区| 99久久精| 亚洲精品国产成人AV在线| 丁香婷婷五月人体| 激情丁香五月婷婷啪啪| 欧美交换配乱吟粗大25P| 五月丁香影院| 色五月超碰| 久热精品在看| 思思精品热在线| 成人做爰黄A片免费看直播室男男| 婷婷五月四狠狠| 97av在线视频| 五月丁香操婷逼| 久热99热| 婷婷婷久久久| 天天插天天干| 国产44页| 六月婷婷色综合| 五月天久久激情| va婷婷| 色五月婷婷91在线| 99久久玖玖| 中文字幕精品推荐免费在线观| 久久精品永久免费| 亚洲乱码日产精品BD| 亚洲综合干| 大陆极品少妇内射AAAAAA| 99国产小视频2013| 岛国av网站| 日本女va| 欧美搡BBBBB摔BBBBB| 激情五月天无码| 亚洲精品白浆高清久久久久久 | 超碰激情五月| 五月天激情网站| 一起草无码| 五月婷婷影| 99热这只有|