免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Python+CUDA時域有限差分法:電磁仿真加速實踐與避坑指南

Python+CUDA時域有限差分法:電磁仿真加速實踐與避坑指南 簡介面向電磁場、聲學(xué)與熱傳導(dǎo)等波動問題的 Python 與 CUDA 加速 FDTD時域有限差分學(xué)習(xí)項目適合具備一定 Python 基礎(chǔ)、希望理解數(shù)值求解偏微分方程并借助 GPU 提速的讀者。壓縮包共 35 個文件以 Python 腳本為主20 個 py另有 2 個 CUDA 內(nèi)核文件、9 個 txt 物理量與說明文件以及實現(xiàn)文檔和開發(fā)歷程記錄整體僅 1.19MB結(jié)構(gòu)緊湊已有 183 人學(xué)習(xí)瀏覽。內(nèi)容覆蓋一維到二維的多種仿真示例如波導(dǎo)、分束器、環(huán)形振蕩器、PML 吸收邊界、Ricker 子波源等并包含 dipole 的 CUDA 加速實現(xiàn)按一維變化、二維結(jié)構(gòu)、廣義坐標(biāo)、正交柱坐標(biāo)等主題分類便于按需查閱。配套文本給出 h-mu、h-phi 等物理量與坐標(biāo)定義可對照公式理解 FDTD 的離散化、時間步進、邊界處理以及 GPU 線程分配、內(nèi)存管理、并行效率等優(yōu)化要點。下載后可快速復(fù)現(xiàn)仿真場景也能在此基礎(chǔ)上擴展自己的電磁場或聲學(xué)模擬任務(wù)適合作為學(xué)習(xí) FDTD 與 PyCUDA 的參考素材。1. 一個“下載.zip”背后的完整電磁仿真方案Python CUDA 時域有限差分法拿到帶“Python_Cuda_下載.zip”后綴的項目懂行的人第一反應(yīng)不是急著解壓而是先問這套時域有限差分法FDTD代碼包給到我手里的到底是一個能直接跑的求解器還是一堆需要自己拼裝的零件FDTD 是電磁場數(shù)值模擬里最成熟的時域算法之一它把麥克斯韋方程組在空間和時間上交錯離散直接模擬波的傳播、散射與耦合過程。純 Python 寫一個一維教學(xué)版 FDTD 不難但網(wǎng)格一旦鋪到百萬級解釋器逐層循環(huán)會慢到讓人懷疑人生CUDA 加速正好卡在這個痛點上。這篇筆記面向準(zhǔn)備拿這套代碼做光學(xué)、天線或射頻仿真的工程師和學(xué)生從原理、最小實現(xiàn)到 CUDA 遷移路徑把每一步的選型理由和常見坑位一次講透。2. 時域有限差分法先立住原理Yee 網(wǎng)格、交替更新與 Courant 條件2.1 為什么 FDTD 能在電磁仿真里當(dāng)“萬金油”FDTD 能成為工程界的常青樹靠的不是精度天下第一而是它在時域正面求解的獨特優(yōu)勢。頻域方法通常一次求解只給一個頻率點的響應(yīng)想拿到寬頻結(jié)果就要掃頻計算量線性疊加FDTD 則是對一個寬帶脈沖源做時間步進一次算完就能通過傅里葉變換得到整個頻段的響應(yīng)。做天線、濾波器、超材料這類強色散、強諧振問題這個特性省下的時間不是一倍兩倍。另一個被低估的優(yōu)點是對非線性介質(zhì)和時變材料的天然適配。很多頻域方法的核心假設(shè)是線性時不變遇到光學(xué)非線性效應(yīng)只能繞路FDTD 的迭代結(jié)構(gòu)里每個網(wǎng)格點的介電常數(shù)可以隨局部場強變化當(dāng)場更新非線性效應(yīng)只是多寫一行賦值的事。加上 FDTD 處理復(fù)雜幾何只需要網(wǎng)格填充不需要像有限元那樣生成高質(zhì)量網(wǎng)格程序結(jié)構(gòu)的魯棒性也高出一截。代價同樣明顯網(wǎng)格分辨率直接決定了內(nèi)存和算力。工程經(jīng)驗是每個波長至少鋪 10 到 20 個網(wǎng)格三維場景下網(wǎng)格數(shù)是波長分辨率的立方增長。一個 10 微米見方的近紅外光子器件在 1550 nm 波長下粗略也要鋪 100 乘 100 乘 100 的網(wǎng)格如果時間步再被 Courant 條件卡住步進上萬步是常態(tài)。這就是 CUDA 進來的理由搞不定性能FDTD 只能停留在教學(xué)玩具階段。2.2 Yee 晶格與 E/H 場的交錯離散代碼里那兩行更新公式從哪來FDTD 最核心的設(shè)計出自 Kane Yee 在 1966 年的論文把電場和磁場在空間上錯開半個網(wǎng)格在時間上錯開半個步長。以三維為例每個電場分量周圍環(huán)繞四個磁場分量每個磁場分量周圍同樣環(huán)繞四個電場分量。這個交錯布局讓麥克斯韋旋度方程可以被二階中心差分直接離散不用解任何線性方程組當(dāng)前時刻的場值只由上一時刻的相鄰場值決定。一維情況下假設(shè)波沿 x 方向傳播只保留 Ez 和 Hy 兩個分量離散位置寫成Ez 定義在整數(shù)網(wǎng)格點 i 上Hy 定義在半整數(shù)網(wǎng)格點 i 0.5 上從法拉第定律和安培定律出發(fā)展開旋度方程后得到# 安培定律E 的更新用 H 在相鄰兩個半網(wǎng)格點的差值 ez[i] ez[i] courant * (hy[i] - hy[i-1]) # 法拉第定律H 的更新用 E 在相鄰兩個整數(shù)網(wǎng)格點的差值 hy[i] hy[i] courant * (ez[i1] - ez[i])courant 在這里是庫朗數(shù)真空歸一化單位下等于 c 乘以 dt 除以 dx。這套交錯更新的意義在于E 場的旋度只依賴 H 場的空間差分H 場同理每個網(wǎng)格點上的值獨立更新天然適合并行。三維場景只是重復(fù)六次相同模式的更新分別對應(yīng) Ex、Ey、Ez 和 Hx、Hy、Hz索引錯位的套路完全一致。真正容易寫錯的是索引邊界。Ez 的更新用到了 hy[i] 和 hy[i-1]那么 Ez 最左邊一個格子依賴不存在的 hy[-1]Hy 的更新用到了 ez[i1]最右邊一個格子同樣越界。代碼里必須把兩端單獨處理或者把更新的索引范圍收窄不然數(shù)組越界在 Python 里可能不報錯直接用垃圾值污染所有結(jié)果這也是新手最容易翻車的地方。2.3 Courant 穩(wěn)定性條件與網(wǎng)格分辨率參數(shù)設(shè)錯的典型翻車現(xiàn)場FDTD 是顯式時間步進算法時間步長不能隨便取。穩(wěn)定性條件由庫朗數(shù)約束三維情況下 courant 必須小于等于 1 除以根號 3二維是 1 除以根號 2一維就是小于 1。實際使用時通常取 0.9 倍的安全系數(shù)三維用 0.5 到 0.7 都是常見做法。這個限制來源于差分格式的特征值譜超了之后誤差會隨時間步指數(shù)放大表現(xiàn)出來就是波形跑到幾百步突然變成 NaN。比發(fā)散更隱蔽的是數(shù)值色散。即使?jié)M足穩(wěn)定性條件時間和空間差分近似本身會引入與頻率相關(guān)的相速度誤差。網(wǎng)格分辨率越低誤差越大。對寬頻脈沖而言不同頻率成分的波會以略有差異的速度傳播導(dǎo)致波形在傳播幾個波長后展寬變形。這種數(shù)值色散是個“玄學(xué)”問題不報錯但污染結(jié)果唯一可靠的對策就是把網(wǎng)格取到每波長 20 個網(wǎng)格以上然后在關(guān)鍵算例里做分辨率收斂性驗證。網(wǎng)格分辨率還直接和內(nèi)存掛鉤這里給一個預(yù)估值。一個 256 立方網(wǎng)格的單精度場數(shù)組6 個分量Ex、Ey、Ez、Hx、Hy、Hz大約占用 400 MB雙精度翻倍。如果網(wǎng)格翻到 512 立方單精度也要 3.2 GB。加上 PML 吸收邊界和源區(qū)網(wǎng)格趁早用單精度能省一半顯存這在高分辨率三維模擬里往往是成敗手。3. 用 Python 跑通一維 FDTD最小代碼、參數(shù)含義與結(jié)果自檢3.1 代碼骨架源項注入、場更新、邊界處理三步走一套可復(fù)現(xiàn)的 FDTD 主循環(huán)不管幾維都繞不開四個環(huán)節(jié)更新 E 場、注入源項、更新 H 場、吸收邊界。順序不能亂因為 E 和 H 在時間上差半步先算誰后算誰決定了時間對齊關(guān)系。常規(guī)做法是先更新 E用上一時刻的 H然后注入源再更新 H用剛算好的 E這樣源項對 E 的影響會在下一步傳遞到 H物理上是對的。源項的類型決定了模擬的用途。高斯脈沖是默認選擇因為它的頻譜是平滑的高斯形覆蓋從低頻到高頻的連續(xù)范圍適合寬頻響應(yīng)分析正弦連續(xù)波適合單頻穩(wěn)態(tài)問題比如諧振腔的 Q 值計算調(diào)制高斯脈沖則兼顧兩者適合需要頻帶限制的場景。做散射問題還可以用平面波源加總場散射場分區(qū)不過那屬于進階玩法先把點源跑通再升級。邊界處理是最容易被忽略的一部分初學(xué)者經(jīng)常用零邊界或者硬邊界結(jié)果波一到邊界就彈回來在域內(nèi)來回反射模擬結(jié)果被污染得面目全非。我一般建議從一階 Mur 邊界起步它只需要一個賦值語句把邊界格子的場值設(shè)為相鄰格子場值本質(zhì)上是行波假設(shè)下的簡易無反射截斷對教學(xué)和小規(guī)模驗證足夠。追求低反射率就用 PML這留到最后一章展開。3.2 一維自由空間傳播的完整腳本與逐段說明import numpy as np # 網(wǎng)格與物理參數(shù) nx 800 # 空間網(wǎng)格數(shù) dx 1e-3 # 空間步長單位米 courant 0.8 # 庫朗數(shù)必須小于 1 dt courant * dx / 3e8 # 時間步長單位秒 nt 600 # 總步進數(shù) # 場初始化 ez np.zeros(nx) hy np.zeros(nx) # 高斯脈沖源參數(shù) src_pos nx // 2 # 源放在域中間 t0 80 # 脈沖峰值時刻 spread 20 # 脈沖寬度控制 # 主循環(huán) for n in range(nt): # 第一步安培定律更新 Ez for i in range(1, nx): ez[i] ez[i] courant * (hy[i] - hy[i-1]) # 第二步注入高斯脈沖源 ez[src_pos] np.exp(-((n - t0) / spread) ** 2) # 第三步法拉第定律更新 Hy for i in range(nx - 1): hy[i] hy[i] courant * (ez[i1] - ez[i]) # 第四步一階 Mur 吸收邊界 ez[0] ez[1] ez[-1] ez[-2] # 每 100 步打印一次峰值確認場沒有發(fā)散 if n % 100 0: print(fstep{n}, max|Ez|{np.max(np.abs(ez)):.4f})這段代碼的核心邏輯就是上一章的兩條更新公式套進循環(huán)。courant 取 0.8 是因為一維穩(wěn)定性上限是 1.0留 20% 余量既保證數(shù)值穩(wěn)定又不會因為步長太小拖慢完成時間。dt 由 courant 除以光速換算而來這一步不能省后續(xù)做有耗介質(zhì)或色散介質(zhì)時會遇到物理時間相關(guān)信息提前把這個換算關(guān)系寫清楚省得到時候?qū)χ綌?shù)換算物理時間。源項注入放在 E 更新之后、H 更新之前時間對齊順序前面已經(jīng)說明。高斯源的表達式里 t0 控制峰值出現(xiàn)的步數(shù)spread 控制脈沖時域?qū)挾人麄児餐瑳Q定了激勵信號的頻譜覆蓋范圍。想激勵高頻分量就縮小 spread但網(wǎng)格分辨率跟不上時高頻分量會被數(shù)值色散歪曲這是一個需要協(xié)作調(diào)節(jié)的參數(shù)對。Mur 邊界的實現(xiàn)就是把邊界格子的場值復(fù)制為內(nèi)側(cè)相鄰格子的值。這個操作相當(dāng)于假裝波從邊界“走出去”對垂直入射的波有效斜入射時反射系數(shù)會明顯上升。這也是為什么后面要做 PML 的根本原因一階 Mur 應(yīng)付教學(xué)場景可以做工程算例必須換方案。3.3 怎么確認代碼沒寫錯能量守恒與波形形態(tài)兩個判據(jù)代碼能跑通是一回事跑出的結(jié)果是對的是另一回事。FDTD 代碼寫好后第一步不是上大網(wǎng)格而是先用這個一維腳本做兩件事觀察波形是否按預(yù)期向兩側(cè)傳播以及檢查能量是否守恒。兩個判據(jù)都能在代碼里以很低的成本實現(xiàn)。能量守恒判據(jù)的做法是每步計算電磁場總能量公式是電場能量密度加磁場能量密度的空間積分。在一維自由空間里沒有源和損耗時總能量應(yīng)該基本不變只會在源注入期間上升隨后保持平穩(wěn)。如果能量一直在漲說明 Courant 條件被破壞如果能量突然掉頭檢查邊界和網(wǎng)格是否異常。# 在每個時間步末尾累加可以發(fā)現(xiàn)早期發(fā)散 total_energy 0.5 * np.sum(ez**2) 0.5 * np.sum(hy**2)波形形態(tài)的判據(jù)更好操作運行模擬后取某一時刻的 ez 快照應(yīng)該看到源點兩側(cè)各有一個對稱的脈沖向外傳播。脈沖峰值位置大致等于源位置加減光速乘以物理時間可以用這個位置偏差來驗證 dt 換算對不對。我見過不少 dt 錯算成 1 導(dǎo)致波形直接飛出域外的案例這種一眼就能看穿的低級錯誤跑一次波形快照比查半天代碼快得多。如果這兩項都過關(guān)這個一維骨架就可以放心作為后續(xù)功能開發(fā)的基座。加介質(zhì)層、加 Mur 邊界升級、加金屬板反射都是在這個循環(huán)里插代碼的事。等三維版本跑不動了再進入 CUDA 遷移階段。4. 從 Python 到 CUDA三種加速路徑與一條實踐路線4.1 純 Python 循環(huán)慢在哪三維網(wǎng)格就是顯存和算力的黑洞一維 FDTD 用 Python 雙循環(huán)完全沒問題但三維場景下問題就來了。一個常見測試是 256 立方網(wǎng)格跑 1000 步光場數(shù)組就有 6 個分量約 400 MB純 Python 循環(huán)每步要更新約 1600 萬網(wǎng)格點乘 6 個分量接近一億次賦值操作Python 解釋器逐行執(zhí)行這個量級的循環(huán)一個算例跑到天荒地老。用 NumPy 切片能救一部分把內(nèi)層循環(huán)換成數(shù)組運算后單步耗時能降到毫秒級。但三維數(shù)組切片加廣播引入的臨時數(shù)組和內(nèi)存拷貝在顯存有限的場景里依然是瓶頸。更麻煩的是 FDTD 的時間步進是串行的每步依賴上一步完成沒法把時間循環(huán)也并行掉。所以真正的出路是把空間網(wǎng)格的更新并行化而這正是 CUDA 最擅長的形態(tài)一大塊同構(gòu)數(shù)據(jù)、大量線程、少量邏輯判斷。加速還得先搞清楚天花板在哪。FDTD 每個網(wǎng)格點的運算量很小主要耗時來自從顯存讀入兩個相鄰場值再寫回一次屬于典型的帶寬密集型任務(wù)。實測經(jīng)驗是一個現(xiàn)代 GPU 的顯存帶寬能達到 1 TB/s 級別按每個網(wǎng)格點更新需要讀 16 字節(jié)寫 4 字節(jié)來算理論吞吐量也能到百億級網(wǎng)格更新每秒。相比 CPU 單核的個位數(shù)億次數(shù)量級差在這里。4.2 路徑一Numba 的 cuda 目標(biāo)改動最小、上手最快Numba 是 Python 加速里門檻最低的選項不需要離開 Python 環(huán)境也不需要手寫 C/C。把之前的一維循環(huán)搬進 GPU只需要把更新函數(shù)換成cuda.jit裝飾器再顯式配置線程塊和網(wǎng)格。代價是你必須把數(shù)組顯式傳進 GPU 顯存并且接受 Numba 的 CUDA 支持版本綁定的約束。from numba import cuda import numpy as np nx 800 nt 600 courant 0.8 # 在 GPU 顯存上分配場數(shù)組 ez cuda.to_device(np.zeros(nx, dtypenp.float32)) hy cuda.to_device(np.zeros(nx, dtypenp.float32)) cuda.jit def update_e(ez, hy, courant): i cuda.grid(1) if 0 i ez.shape[0] - 1: ez[i] ez[i] courant * (hy[i] - hy[i-1]) cuda.jit def update_h(ez, hy, courant): i cuda.grid(1) if 0 i hy.shape[0] - 1: hy[i] hy[i] courant * (ez[i1] - ez[i]) threads_per_block 128 blocks_per_grid (nx threads_per_block - 1) // threads_per_block src_pos nx // 2 t0 80 spread 20 for n in range(nt): update_e[blocks_per_grid, threads_per_block](ez, hy, courant) # 源項注入只能從 host 端訪問到設(shè)備數(shù)組先用 copy 回再寫 if n % 50 0: # 示例低頻次注入模擬源 host_ez ez.copy_to_host() host_ez[src_pos] np.exp(-((n - t0) / spread) ** 2) ez cuda.to_device(host_ez) update_h[blocks_per_grid, threads_per_block](ez, hy, courant)Numba 分兩個 kernel 更新 E 和 H而不是在同一個 kernel 內(nèi)做完是為了避開線程間同步問題。FDTD 的 E 更新依賴上一時刻 HH 更新依賴新 E如果放進同一個 kernel必須在中間插入cuda.syncthreads()而 syncthreads 要求所有線程都到達同步點線程塊內(nèi)的邏輯分支不一致時會卡死。拆成兩個 kernel 調(diào)用后kernel 之間天然同步安全省心。一個明顯的坑是源項注入。Numba CUDA kernel 內(nèi)部做ez[src_pos] 這種單點操作效率不高而且需要把數(shù)組拷回 host 再寫再傳回雖然一維場景無所謂但三維里頻繁搬運會成為性能殺手。常見做法是把源項改成點源數(shù)組在 kernel 內(nèi)部按時間步判斷全局線程 ID 是否命中源位置把注入邏輯并進 update_e 一起算。4.3 路徑二PyCUDA 手寫 kernel控制最細、調(diào)試最痛苦PyCUDA 把 CUDA 的 C 風(fēng)格 kernel 直接塞進 Python 源碼里用運行時編譯生成 GPU 機器碼。它能精確控制每個線程做什么、用多少寄存器、怎么對齊顯存訪問是三維大規(guī)模算例里性能最穩(wěn)定的路徑。代價是你要同時維護 Python 側(cè)的數(shù)據(jù)流和 C 側(cè)的 kernel 代碼編譯報錯時還得看 C 的語法。import pycuda.autoinit import pycuda.driver as drv from pycuda.compiler import SourceModule import pycuda.gpuarray as ga import numpy as np mod SourceModule( __global__ void update_e(float *ez, const float *hy, float courant, int nx) { int i blockIdx.x * blockDim.x threadIdx.x; if (i 0 i nx - 1) { ez[i] ez[i] courant * (hy[i] - hy[i-1]); } } __global__ void update_h(float *ez, float *hy, float courant, int nx) { int i blockIdx.x * blockDim.x threadIdx.x; if (i 0 i nx - 1) { hy[i] hy[i] courant * (ez[i1] - ez[i]); } } ) update_e mod.get_function(update_e) update_h mod.get_function(update_h) nx 800 ez ga.zeros(nx, dtypenp.float32) hy ga.zeros(nx, dtypenp.float32) block (128, 1, 1) grid ((nx 127) // 128, 1) for n in range(nt): update_e(ez, hy, np.float32(courant), np.int32(nx), blockblock, gridgrid) # 源注入直接操作 GPU 數(shù)組 ez[src_pos] ez[src_pos] np.exp(-((n - t0) / spread) ** 2) update_h(ez, hy, np.float32(courant), np.int32(nx), blockblock, gridgrid)PyCUDA 的get_function返回的 kernel 對象支持block和grid配置參數(shù)在調(diào)用時通過 Python 對象直接傳入kernel 內(nèi)部按 C 的指針語義訪問顯存。這里比 Numba 多了一個能力源項注入可以直接在 host 端操作 GPU 數(shù)組的一個元素PyCUDA 會自動處理單元素讀寫省去了 Numba 里的來回拷貝。這是 PyCUDA 在工程效率上的實在優(yōu)勢。索引和步長的匹配是 PyCUDA 新手最常犯的錯。C kernel 里的nx參數(shù)和 Python 側(cè)的數(shù)組長度必須一致block 大小要和網(wǎng)格劃分配合。例子里的grid ((nx 127) // 128, 1)是把總網(wǎng)格數(shù)按每塊 128 線程切分如果 nx 不是 128 的整數(shù)倍最后一個塊會有部分線程不滿足邊界條件退出這是正確的寫法。很多人圖省事直接grid(10,1)導(dǎo)致線程數(shù)超過數(shù)組長度越界訪問是硬隔離的直接崩掉。4.4 路徑三C/CUDA 編譯擴展留給性能強迫癥Numba 和 PyCUDA 的運行時編譯都有小幅啟動開銷kernel 本身也受限于各自代碼生成器的優(yōu)化能力。當(dāng)網(wǎng)格規(guī)模上到千萬級、單次仿真要跑幾萬步時用 C/CUDA 寫 kernel 編譯成 Python 擴展模塊是性能上限最高的路線。BDF 的維護成本高但數(shù)據(jù)結(jié)構(gòu)完全自己掌控還能用 shared memory 做相鄰場值的緩存優(yōu)化。// fdtd_kernel.cu 核心更新一維示例三維同理擴展到三個方向 __global__ void update_e(float *ez, const float *hy, float courant, int nx) { int i blockIdx.x * blockDim.x threadIdx.x; if (i 0 i nx - 1) { ez[i] ez[i] courant * (hy[i] - hy[i-1]); } }編譯命令大致長這樣注意-arch參數(shù)要匹配目標(biāo) GPU 的計算能力。以 RTX 4060 Ti 為例它的計算能力是 8.9對應(yīng)sm_89編譯時指定這個參數(shù)讓編譯器生成適配指令集的機器碼。用舊的默認架構(gòu)編譯也能跑但性能可能差 20% 到 30%屬于白扔的算力。nvcc -O3 -archsm_89 -Xcompiler -fPIC -shared fdtd_kernel.cu -o fdtd_kernel.so拿到.so動態(tài)庫后在 Python 里用ctypes或cffi加載調(diào)用。這要求你對 C ABI 和內(nèi)存生命周期有足夠把握因為數(shù)組指針要顯式從 NumPy 轉(zhuǎn)換并保持引用否則 Python 側(cè)可能把底層緩沖釋放kernel 訪問到懸空指針表現(xiàn)為偶發(fā)的 Segmentation Fault這類問題極難排查。所以我的建議是沒有明確的性能瓶頸不要上編譯擴展Numba 和 PyCUDA 對絕大多數(shù)情況已經(jīng)夠用。4.5 加速比不是玄學(xué)顯存帶寬、網(wǎng)格規(guī)模與 kernel 合并訪問很多人拿一維 FDTD 跑完 GPU 版本后抱怨加速比只有幾倍這不是 CUDA 不行而是問題形態(tài)決定了它跑不滿 GPU。一維網(wǎng)格只有 800 個點一個 kernel 只啟動幾個線程塊GPU 的數(shù)千個計算核心大部分在空轉(zhuǎn)。CUDA 的優(yōu)勢在大規(guī)模并行一維場景連顯存帶寬都吃不滿自然拿不到好看的數(shù)字。真正讓 GPU 發(fā)揮實力的是二維和三維。二維 512 乘 512 網(wǎng)格單次更新就是 26 萬線程三維一個面就有百萬線程這時候并行度才夠。實測數(shù)據(jù)可以參考同樣 256 立方網(wǎng)格跑 1000 步純 Python 需要小時級NumPy 向量化大約幾十分鐘PyCUDA 能壓到一兩分鐘數(shù)量級差距通常在 20 到 50 倍具體數(shù)字取決于顯卡型號和參數(shù)設(shè)置。如果加速比達不到預(yù)期優(yōu)先檢查內(nèi)存訪問合并。FDTD 更新時每個線程讀相鄰兩個網(wǎng)格的值如果線程 ID 與網(wǎng)格索引一一對應(yīng)相鄰線程讀的是相鄰內(nèi)存地址這條訪問路徑是合并的帶寬利用率接近理論峰值。如果索引映射走了形比如線程 ID 乘了 2同一個 warp 的線程讀的內(nèi)存跨度翻倍帶寬利用率直接腰斬。另一個常見問題是數(shù)據(jù)類型double 的訪問帶寬只有 float 的一半能上 float 就別用 double除非雙精度需求硬性存在。# 檢查當(dāng)前顯卡計算能力確認 kernel 能覆蓋目標(biāo)架構(gòu) import pycuda.driver as drv dev drv.Device(0) print(fcompute capability: {dev.compute_capability()})5. 實戰(zhàn)避坑CUDA 環(huán)境、顯存邊界與數(shù)值發(fā)散的五個典型現(xiàn)場5.1 現(xiàn)象一CUDA out of memory三維網(wǎng)格把顯存吃光了現(xiàn)象代碼跑得好好的網(wǎng)格規(guī)模一放大啟動 kernel 時直接報CUDA out of memory或者程序在數(shù)組分配階段就掛掉。常見于從二維測試切到三維正式算例的時候。原因三維場數(shù)組的內(nèi)存占用按立方增長。一個 N 立方網(wǎng)格6 個場分量float32 單精度的占用是 N 的立方乘以 24 字節(jié)N256 時約 400 MBN512 時約 3.2 GB加上 PML 區(qū)域和源數(shù)組8 GB 顯存的卡很快就見底。這是硬件邊界的數(shù)學(xué)現(xiàn)實不是代碼 bug。解決先算后跑別開盲盒。把目標(biāo)網(wǎng)格規(guī)模代入/ 1e9算 GB 數(shù)低于顯存一半才開工。然后優(yōu)先把 double 降到 float32很多模擬場景對精度的需求并沒有高到非雙精度不可再用網(wǎng)格漸變或者子區(qū)域拆分把大問題化小。還有一個實用招數(shù)只用一個場數(shù)組做滾動更新不要為了代碼美觀為每個時間步保留歷史快照歷史數(shù)據(jù)用磁盤流式存儲。5.2 現(xiàn)象二驅(qū)動版本與 CUDA Toolkit 對不上設(shè)備初始化直接失敗現(xiàn)象pycuda.driver.Error: CUDA driver version is insufficient for CUDA runtime version或者 Numba 報cuda.cuda_error.CudaSupportError??雌饋硐翊a問題實際是環(huán)境不匹配。原因NVIDIA 驅(qū)動向后兼容新驅(qū)動能跑舊版 CUDA runtime但舊驅(qū)動跑不了新版 runtime。比如驅(qū)動 550.144.03 支持 CUDA 12.x如果你裝了 CUDA 12.6沒問題但環(huán)境里殘存著 CUDA 13 的 runtime 庫就必然報 insufficient。這是加速器生態(tài)環(huán)境里最常見的“裝完就跑不通”場景。解決先看硬件支持的 CUDA 上限再看代碼依賴的上限最后取交集。命令行直接查nvidia-smi # 看右上角 CUDA Version這是驅(qū)動支持的最大 runtime 版本 nvcc --version # 看當(dāng)前激活的 CUDA Toolkit 版本Toolkit 版本必須小于等于驅(qū)動支持版本。如果不得已要多版本共存用conda install cudatoolkit裝指定版本的 CUDA 運行庫和系統(tǒng)的nvcc解耦能解決九成環(huán)境沖突。Numba 用戶還要額外檢查numba.__version__對應(yīng)的 CUDA 綁定Numba 0.58 綁 CUDA 11.8Numba 0.59 綁 CUDA 12.x版本錯位會出現(xiàn)找不到運行時函數(shù)的詭異報錯。5.3 現(xiàn)象三WSL2 里找不到設(shè)備CUDA 在 Linux 子系統(tǒng)里的特殊要求現(xiàn)象在 WSL2 的 Ubuntu 里 import pycuda 或 numba.cuda報錯說找不到 CUDA 設(shè)備nvidia-smi命令也不存在但 Windows 側(cè)驅(qū)動工作正常。原因WSL2 的 CUDA 架構(gòu)和原生 Linux 不一樣。它復(fù)用 Windows 側(cè)安裝的 NVIDIA 驅(qū)動WSL 內(nèi)部不需要也不能直接安裝單獨的驅(qū)動內(nèi)核模塊。很多人按 Linux 教程在 WSL 里裝了一堆驅(qū)動相關(guān)包裝完反而把驅(qū)動版本搞亂設(shè)備還是起不來。解決按 WSL 專用路徑走。第一步在 Windows 側(cè)安裝 NVIDIA WSL 驅(qū)動不是標(biāo)準(zhǔn)桌面版驅(qū)動是帶 WSL 支持的版本第二步在 WSL 內(nèi)部只裝 CUDA Toolkit 用戶態(tài)部分不要碰內(nèi)核驅(qū)動。驗證方式是nvidia-smi # 能看到 GPU 型號和驅(qū)動版本但 CUDA 版本可能顯示 12.x python -c import pycuda.autoinit; print(pycuda.driver.Device(0).name())WSL2 下跑 CUDA 的性能接近原生 Linux但 PCIe 直通和顯存訪問的延遲會比原生高一些對 FDTD 這種帶寬敏感型任務(wù)影響有限。如果跑出來性能明顯不對勁優(yōu)先檢查是不是誤用了 Windows 側(cè)的路徑和庫。5.4 現(xiàn)象四波形發(fā)散成 NaNCourant 條件被破壞現(xiàn)象模擬跑到幾百步后場值逐漸變大然后變成 NaN或者直接一步跳變。打印每個時間步的能量曲線能看到指數(shù)增長。原因最常見的是 courant 大于 1。三維情況下穩(wěn)定性上限是 1 除以根號 3約 0.577很多人直接沿用一維 0.8 的經(jīng)驗值直接爆了。另一個隱蔽原因是網(wǎng)格里包含不同介質(zhì)區(qū)域介質(zhì)的折射率不同導(dǎo)致局部光速不同如果 courant 是在真空參數(shù)下算的在折射率大于 1 的介質(zhì)里 dt 不變但局部 c 變小等效庫朗數(shù)下降這不會導(dǎo)致不穩(wěn)定但會讓誤差變大。反過來在折射率小于 1 的色散介質(zhì)里就可能突破穩(wěn)定上限。解決全局按最壞情況取 courant。三維固定取 0.5二維取 0.7一維取 0.8這是個不容易出錯的規(guī)則。然后每 10 步打印一次np.max(np.abs(ez))和總能量看到數(shù)值開始單調(diào)上漲就立刻停用二分法找臨界步長比一次跑完看結(jié)果再猜高效得多。還有個被人忽視的細節(jié)邊界條件寫成了硬邊界而不是吸收邊界時波會在域內(nèi)來回反射并疊加雖然數(shù)值本身不發(fā)散但峰值會明顯虛高波形永遠平穩(wěn)不下來。這種看起來不像報錯的“隱性翻車”只能靠能量守恒判據(jù)來抓。5.5 現(xiàn)象五邊界反射把結(jié)果污染了缺了吸收邊界現(xiàn)象波形在傳播到模擬區(qū)域邊界后反射回來在域內(nèi)形成駐波狀干涉條紋反射波的峰值甚至能和原始波形疊加出錯誤的共振峰。原因一階 Mur 邊界只對垂直入射波有效斜入射反射系數(shù)隨角度增大三維模擬中波從任意角度打到邊界的情況太普遍Mur 邊界撐不住。更關(guān)鍵的是如果干脆把邊界設(shè)成零值硬邊界PEC 默認行為波會在邊界全反射數(shù)值上有解但物理上完全不是你想模擬的場景。解決上 PML。PML 的思路是在邊界區(qū)域植入一層有損耗介質(zhì)讓進入的波指數(shù)衰減到最外層再反射回來時已經(jīng)衰減到可以忽略的程度。一個設(shè)計良好的 PML理論反射系數(shù)能到 1e-6 以下遠好于 Mur 邊界的百分之一量級。代價是邊界區(qū)域要多算十幾個網(wǎng)格層的更新并引入額外的輔助變量內(nèi)存和算力多消耗約 20% 到 30%。我測試過最直接的反差同樣的 100 乘 100 二維 FDTD用 Mur 邊界跑出來的透射率曲線在高頻段有明顯波紋換成 10 層 PML 后波紋消失曲線干凈得像教科書插圖。這個改善不值得猶豫從工程第一天就應(yīng)該用 PML。6. 把這個代碼包用出價值PML 吸收邊界與近遠場外推的落地技巧PML 是這個代碼包里最值得先吃透的模塊因為幾乎所有真實算例都依賴它。它的數(shù)學(xué)形式看起來復(fù)雜實現(xiàn)上卻有一層窗戶紙。以 x 方向 PML 為例要點是在 PBL 區(qū)域內(nèi)把每個電場分量的更新公式改成帶損耗系數(shù)的形式損耗系數(shù) sigma 從邊界內(nèi)沿向最外層按多項式梯度遞增。常見做法是 10 層厚度、4 次方坡度理論反射率在 1e-5 以下。# 一維 PML 區(qū)域中 Ez 的更新sig 按層數(shù)梯度分布 # ca 和 cb 是最重要的參數(shù)拿回來和總是 1 的自由空間公式對照 sig sigma_max * (x_in_pml / pml_thickness) ** 4 ca (1 - dt * sig / 2) / (1 dt * sig / 2) cb courant / (1 dt * sig / 2) ez[i] ca[i] * ez[i] cb[i] * (hy[i] - hy[i-1])ca 項逐漸把舊場值壓下去cb 項仍然傳遞相鄰網(wǎng)格的耦合兩者配合讓波在層層推進中不斷衰減。調(diào)參的核心是 sigma_max取太小衰減不夠取太大數(shù)值反射反而上升工程上先在自由空間場景里測一遍反射率用峰值反射系數(shù)作為調(diào)參目標(biāo)再投入正式算例。近遠場外推是讓這個代碼包從“能算場分布”升級到“能算遠場方向圖”的關(guān)鍵一步。FDTD 天然算的是近場區(qū)域的場值而天線遠場方向圖、雷達散射截面這些工程指標(biāo)是在遠場定義。常規(guī)做法是在包圍目標(biāo)的閉合曲面上記錄等效電流和等效磁流用等效原理在頻域做積分變換。這個過程不復(fù)雜但要記得在時間步進結(jié)束后把所有記錄場值做一次傅里葉變換再到關(guān)心的頻率點上執(zhí)行外推計算。拿這套代碼做工程項目我最想提醒的是控制預(yù)期。別一上來就鋪三維大網(wǎng)格加 PML 加近遠場外推這套鏈路里每一環(huán)都有一到兩個隱藏參數(shù)任何一個設(shè)錯都讓結(jié)果失真。最好的習(xí)慣是先跑通一維透射驗證再上二維環(huán)形諧振腔最后才碰三維天線模型。給自己寫一個回歸腳本模擬自由空間高斯源傳播斷言波形峰值位置與理論位置偏差不超過一個網(wǎng)格改任何代碼后先跑這個腳本全綠之前不碰新功能。這個習(xí)慣幫我躲過了無數(shù)個從下午修到凌晨的 debug 局。希望幫到你。本文還有配套的精品資源點擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
69午夜成人影片| 69五月天视频| 日韩AV在线影片| 人人干Av| 97碰人人操| 婷婷九月综合| 996日日爱| 激情 婷婷| 激情五婷精品网在线观看网址| 综合色色婷婷| 超碰在线国产| 秋霞AV美国| 国产精品色| Www.婷婷五月| 天天舔天天插天天爱| 国产乱子轮XXX农村| 五月成人网天天| 久久精品综合色| 99re66热这里只有精品| 亚洲成人在线观看网址| 天天干天天干天天干| 99热精品免费在线观看| 天天综合插插| 99精品激情| 婷婷五月五月丁香| 丁香五月自拍| 99无吗| 久久作爱| 色五月自偷自拍婷婷婷婷| 丁香六月婷婷久久综合| 99久久综合网| 伊人久久大香线蕉av最新| 综合激情网五月激情| 热婷婷久| 丁香五月瑟瑟| 97久久香草精品视频| 大香蕉 伊人夜| aV直接看| 99re热视频这里只精品| 午夜成人AV在线| 欧美天天性| 91操操| 久九九热| 六月婷在线| 婷婷五月天成人网| 丁香五月综合| 大学生高潮无套内谢视频| 午夜亚洲国产精品av一区二区| 97色啪| 婷婷丁香六月影视| 少妇日麻屄| 久婷| 99免费综合网| 久久99这里| 9人人操人人看| 成人va在线| 五月婷婷激情| 黑人巨粗进入警花疼哭A片| 久99久在线观看| 五月丁香色六月激情干大屄| 丁香五月婷婷网| 色5月婷婷| 色五月丁香激情| 七七九九色色| 激情宗合网激情五月天| 婷婷五月丁香在线视频| 一区视频网站| 日本色色色| 色婷婷丁香五月| 久久久999精品| 狠狠色大香蕉| 99热在线观看| 激情综合文学| 五月丁香综合啪啪| 色情五月婷婷| 久热99中文字幕| 91操人人操| 在线观看免费观看在线9久| 性做爰1一7伦| 婷婷五月色花丁香社区| 99热国内精品| 开心婷婷五月花| 538久久| 五月丁香综合久久| 五月激情偷拍| 丁香色五月天| 超碰色热| 久久久精品AV| 色噜综| 五月丁香做爱视频| 综合色99| 综合色在线| 天堂久热| 在线99热| 人人干人人操人人摸人人做| 丁香六月天| 九九色影院| 成人在线99| 丁香五月天成人| 五月停停99| 热99免费在线| 狠狠88综合久久久久噜噜噜| 五月天色婷婷激情| 丁香色婷婷| 欧美五月停| 午夜日韩久久久网站| 久久九色| 丁香五月Av| 久久色婷婷| 精品夜夜澡人妻无码AV| 97九色| 亚洲激情99| 我爱va亚洲va52| 六月婷婷五月天| 色色色色五月天| 黄色三级毛片中字| 天天五月丁香五月| 在线视频99| 久色激情| 丁香婷婷浪潮AV久久综合| 99A级片| 精品夜夜澡人妻无码AV| 六月婷在线| 九九热AV| 国产色网站| 婷婷六月天| 亚洲视频在线网| 色噜噜97视频在线观看| 婷香五月激情视频| 色色六月| 婷婷五月天激情小说网站| 激情五月婷婷综合| 久久丁香婷婷色情综合| 色婷婷六月综合| 五月天成人小说| 九九99精品视频在线观看| 久综合4| 超碰99在线观看| 九九精品在线网| 国产超碰在线| 人妻内射视频| 久久综合影院| 99热精品在线在线| 综合www色| 五月丁香六月激情综合在线| 极品少妇XXXX精品少妇偷拍| 婷婷五月天激情网址| 停婷丁五月在线| 国产XXXX搡XXXXX搡麻豆| 九九色欲网| 五月天色视频| 天天爱综合网| 熟美女麻豆| 亚洲婷婷六月天| 97色碰| 久热伊人9| 区区欧美你爱| 丁香激情五月天| 久久婷婷丁香六月天| 天天干天天干天天干| 婷婷六月综合基地| 香蕉狠狠爱视频| 五月天丁香欧美激情| 1995年关宝慧版蜘蛛女| 天天肏视奸| 96色婷婷| 少妇达人正片在线播放_ikun_福利吧| 99热免| 操日本三片99| 成人在线日韩欧美| 91九色国产| 99婷婷国产最新视频| 黄色99热| 91欧美| 五月丁香av中文| 亚洲人人操| 精品一区二区三区三区| 丁香五月天激情免费在线观看AV777 | 婷香五月激情视频| 婷婷久久五月天丁香| 久久精品夜色噜噜亚洲a∨| 狼友超碰| 大香蕉520| 五月婷婷激情五月| 亚洲色小说在线综合| 最近免费中文字幕大全高清大全1| 伊人玖玖婷婷| 五月色影院| 精品久色| 99riAV成人在线视频| 亚洲中文乱字字幕线在永久| 色婷婷先锋| 九九亚洲综合| 五月天色综合服务平台| 九九热这里只有精品9| 超碰在线94| www.婷婷.com| 99热这里只有精品亚洲| 极品五月天| 99热这里只有精品86| 五月伊人婷婷999| 无码髙清| 色月视频| 一区二区aV电影免费看| 亚洲六月婷婷| 激情5月婷婷| 天天综合网~91综合网| 日日.c| 亚洲婷婷月丁香五月| 伊人婷婷五月天| 成人网丁香五月| 激情色情五月天| 丁香五月综合激情性爱| 人人爽人人爽人人爽人人爽| 日本高清久| 日本色婷婷| 不卡影院午夜理论片| 冬月かえでAV无码播放| 亚洲亚洲人成综合网络| 大婷婷色呦呦噜噜色呦呦噜噜| 国产五月婷| 99热10在线高清播放| 久久人人妻| 欧美激情五月天在线观看| 婷婷丁香六月天激情四射网| 五月天色丁香| 久99久热| 五月开心深爱激情网| 婷婷丁香色情| 色吊操色妞| 久久xx| 女人天堂 AV| 狠狠第四色| 麻豆AV一区二区三区| 91成人电影| 69er小视频| 久久婷狠狠色| 麻豆雪千夏| 激婷网| 99综合免费视频| 中文字幕 久久9999| 九九热自拍| 五月丁香综合色婷婷| 婷婷五月天成人小说| 成人va在线观看视频| 91jiuseshunv| 久久色吧| 超碰人人妻| 亚洲综合激情五月久久| 99精品热| 五月香婷婷| 黄色激情五月天| 97啪在线观看视频| 欧美成人精品三区综合A片| 天天日 天天草| 婷婷五月天深爱| 九九99久久| 五月丁香婷婷激情四射迷人| 亚洲欧洲一二| 亚洲成人在线观看网址| 99re资源在线视频导航| 婷婷六月丁香五月图区| 极骚大香蕉伊人| 91久热| 六月丁香啪啪| 欧美这里只有精品| 超碰人妻公开在线| 思思热在线视频精品| 女人被男人吃奶到高潮| 强伦轩人妻一区二区电影| 99国产性感视频| 五月天a婷婷伊人| 思思色播| 久久这里都是精品视频| 丁香五月婷婷亚洲另类| 五月丁香色婷婷综合| 精品无码色欲AV| 婷婷五月天激情四射五月天激情| 久久婷婷青青草| 狠狠干,狠狠操| 综合色五月| www.minyis.com【JT】实力收量可预付QQ2101460746 | 丁香六月啪啪啪| 激情 婷婷| 超碰高清在线| www色色色com| 另类国产综合| 《丁香激情综合久久伊人久久》影视在线观看 -高清预告手机免费播放 -三妹影院 | 思思热视频在线| 91色逼| 五月激情小说| 婷婷五月电影院| 99爱视频在线观看这里只有精品| 看片视频在线免费日产在线看| 婷婷五日b| 六月丁香婷婷网| 五月天婷婷色小说| 五月丁香色婷婷色| WWW.国产| 五月婷综合激情| 色综合色色色色| 久久久久久久97| 久热这里只有精品6官网亚洲| 99热九九在线| 欧美久久九九| 99热综合网| 五月丁香婷婷综合在线| 婷婷日日夜夜| 大香蕉综合在线| 婷婷六月色| 四季日韩AV无码综合| 六月婷久久| WWW、日本色丁香co m| 另类五月激情| 99男人天堂| 综合激情五月四射婷婷| 色日本五月天| 狠狠精品干练久久久无码中文字幕| 亚洲日日日| 97很鲁在线视频| 丁香天堂夜| 久久婷婷六月| 操骚货在线| 五月丁香综合激情| 久久九九九九| 色高清无码视频| 六九色综合婷婷五月天| 婷婷五月丁香第四色超碰在线| 日日影院 | 伊人久热91| 欧美99热| av在线免费播放| 精品亚洲国产成AV人片传媒| 激情久久久久| 日日干天天爽| 激情综合网激情五月丁香五月俺也去| 91日综合欧美| www.婷婷,com| 成人片在线播放| 毛片九九九九九九| 色丁香五月综合网| 国产看真人毛片爱做A片 | 狠狠色综合网| 人人97碰| 激情综合五月天| 少妇真实被内射视频三四区| 婷婷久草| 激情久久丁香| 婷婷五月激情综合啪啪| 亚洲一区二区无码蜜乳av| 久草五月| 伊人网大香| 伍月婷婷六月丁香| 色丁香五月婷婷在线| 久9久9久9久9久9久9| 日本性视频| 99亚洲综合| 91久久婷婷| 97操碰在线视频| 婷婷综合爱| 久久精品99国产精品日本| 五月丁香六月香香蕉| 婷婷五月影院| 国产色网站| 天天插天天日| 日韩在线视频网站| 97碰久久| 欧美久热| 人人干av| AV五月丁香| 久草热在线视频| 亚洲精品在线视频| 久久久久婷婷| 婷丁香久综合| 久久精品99国产精品日本| 精品在线| 99久久九九视频| 五月人妻婷婷| 9 7总站超级碰免费视频| 91性交在线播放| 丁香五月婷婷久久久| 日日撸夜夜操| 精品人妻久久久| 国外亚洲成AV人片在线观看| www开心激情网| 成人超碰网| 米奇影视资源777狠狠色婷婷五月天激情网| 亚洲婷婷五月天激情| 97亚洲精品| 日本 @ va 免费| 婷婷五月乱交换| 五月激情婷婷丁香天堂| 久久性爱视频| xxx日本东京热| 狠狠五月婷婷| 丁香五月偷拍| 亚洲精品色色| 免费黄网不卡AV| 五月婷婷综合潮喷| 2020日日干| 91avse| 色婷婷久久| 日韩操人| 性天天中文网| 97香蕉久久超级碰碰高清版 | 婷婷综合另类小说| 激情五月四色| 99操久久| 久久婷婷五月激情网站| 99色视| 九九久久五月天| 五月丁香 六月婷婷a| 日本精品人妻无码77777| 久色国产| 丁香婷婷黄网站| 日本天天色| 久久久高清| 激情五月婷婷网| 在线观看中文字幕亚洲| 色色色九九九五月婷婷| 日韩成人中文字幕| 综合激情深爱| 国产 码在线成人网站| 嫩草AV久久伊人妇女超级A| 婷婷五月天在线观看免费| 亚洲色图五月丁香| www.色多多婷| 亚洲人人操| 久热这里只有精品在线| 五月天婷婷色在线视频免费观看 | 九九大香视频| 亚洲午夜成人av电影网| 久久五月婷婷电影| 97男人天堂| 色五月丁香婷婷| 天天爽天天干天天| 五月色亭丁香| 丁香九月综合| 在线日本www| 丁香五月电影| 欧美性色视频| 国产精品视频久久99| www.婷婷五月天.com| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 色欲婷婷五月天| 久久久天堂国产精品女人| 五月成人天| 婷婷一本和五月丁香| 久艹大香蕉| 碰99在线| 欧美成人一区二区三区在线视频| 狠狠干综合网| 人人人人人人人草| 超碰AAAAAAV| 国产激情AV| 人人操大| AV亚洲在线| www色色色com| 97啪啪| 99热综合网| 可以免费看AV网站| 91丨九色丨首页| 97久久草草超级碰碰碰| 日本色爽| 第四色五月天| 色爱亚洲| 丁香色五月婷婷| 伊人五月网| 99高级会所久久| 色色色综合网| 伊人久久婷婷| 婷婷月五天在线在线看| 一级片sese片.COM| 色噜噜狠狠色综| 中美日韩成人在线| 丁香五月天之婷婷影院| 色婷婷香蕉| 日本一级| 97人人射| 成人网站在线观看视频| 日本一级特黄大片AAAAA级| 曰日爽日日操| 久久久精品人妻| 精品无吗va视频免费观看| 婷婷五月天综合中文| 婷婷五月天成人综合网| 丁香五月天无码| 91啪级电影| 婷婷五月免费观看| 色综合日日| 天天日日爽| 久久思思热视频| 婷婷五月天干干| 深情五月天| 五月天国产| 丁香五月天激情综合| 五月亭亭网成人在线视频| 99视频精品在线| 天天日天天舔| 99视频| 中文字幕成人| 成人做爰黄A片免费看直播室男男| 欧美啪啪9| 色综合九九色综合88| www.jiujiujiu| 99热日本| 五月婷婷视频| 婷婷五月中文字幕| 99热只有精品在线播放| 五月丁香亚洲五月| 五月丁香婷婷免费视频| 久久这里只精品| 成人国产欧美大片一区| 久热在线观看视频9| 六月婷婷九月丁香| 99热6这里只有精品6| 丁香婷婷伊人| 婷婷五月丁香久久| 爽tv | 婷婷影院欧美| 秋霞午夜理论| 五月丁香六月情| 五月香婷婷| 麻豆AV一区二区三区| 亚洲无码AV片| 久久99热这里只有精品23| 五月丁香六月情亚洲| 大香蕉天堂| 亚洲精品一区中文字幕乱码| 9 1在线视频| 激情五月婷婷免费视频| 婷婷五月草| 五月天婷婷成人网| 99热99| 激情婷婷五月天。| 国产精品VA在线| 99这里只有精品| 激情五月天情色| 九九热这里只有精品7| 中文字幕色色| 欧美性猛交 XXXX 乱大交| 曰本aaaaaa丈片| 婷婷五月激情热播| 日本欧美国产| 婷婷综合天堂| 丁香五色月婷婷网| 九九热精品| 超级碰碰碰久久网站| 综合激情啪啪| 99视频久久| 久草婷| 国产亚洲精品人人| 99热日韩| 综合99久久天天综合| www.五月天。com| 99热这里只有精品青草| 在线视频99| 综合激情深爱| 婷婷六月激情综合| 五月丁香激情综合六月涩涩爱| 色操b| 亚洲无码色| 亚洲无码成人网| 五月婷在线视频免费播放| 久久婷婷亚洲| 久久色五月天| 激情五月天在线视频| 9 1在线视频| 深爱1激情网| 欧美性猛交99久久久久99按摩| 黄色片久久| 欧洲永久精品| 免费视频99| 98色花堂98t.R| 婷婷五月天综合久久| 牛牛澡牛牛爽| 五月丁香花开综合网| 久久久国产精品黄毛片| WwW天天干| 免费黄色视频网址| 婷婷五月天视| 国产成人精品亚洲线观看| 色婷婷五月影视| 香蕉综合在线| www,五月天com| 色久天| 99久热在线精品| 婷婷中文在线| 91五月天| 99热在线观看| 涩涩婷婷五月| 久久五月天精品视频| 五月天 另类图片| 成人AV片播放| 六月丁香婷婷综合在线| 九月激情综合| 99热久| 久久这里只有精品07 | 婷婷香蕉| 九九这里有精品| 婷婷开心深爱五月天| 丁香六月激情综合| 五月天欧美 另类小说| 99热免费| 日本在线噜噜| 色婷婷AⅤ| 五月丁香综合激情网| 九色91国产| 五月天婷婷激情小说电影| 婷婷激情五月天网站| 欧美激情性做爰免费视频| 亚洲看av的网站| 1024成人免费看| 夜夜爽天天爽| 色视频2025| 久久久99精品免费观看| 激情深爱五月| 天天干天天干天天干天天干天| 色婷婷丁香AV综合| 国产精品社区| 天天色色婷婷| 久久精品99久久久久久| 99热在这里只有精品| 色婷五月丁香久亚洲| 久久性爱激情| 99热超碰| 亚洲精品激情| 婷婷中文字幕| 免费看成人AA片无码视频吃奶| 五月婷婷黄色| 成人性生活免费观看。| 99视频自拍| 天天插天天干天天舔| www网站在线观看| 成人电影一区| 五月天婷婷在线AN| 天天搞夜夜叫| 丁香五月网| 三人荫蒂添的好舒服A片| 另类小说色婷婷| 99爱这里只有精品| 4438激情网| 亚洲视频在线网站| 五月婷在线观看| 色吧五月婷婷| 四虎婷婷五月天| 国产精品国产| 人人操人人妻| 国产精品久久久久久久久久| 国产精品色色| 热99热9| 狠狠爱综合网| 五月丁香亭亭AV女优| 狠狠操综合| 开心五月深爱五月丁香五月激情五月 | 欧美天堂久久| 99热这里只有精品2016| a色色色色色| 色色九区| 日美三级| 男女啪啪做爰高潮无遮挡| 99色热| 另类激情中文| 久久久久久综合五月婷婷| 亚洲五月天综合色| 91色综合| 色五月天丁香婷婷| 九九色天堂| 色天使久久综合| 北京熟妇搡BBBB搡BBBB | 操逼国产91| 影音先锋男人女人| 亚洲精品V天堂中文字幕| 丁香五月日韩| 色婷久| www夜夜操com| 五月丁香婷爱在线| 婷婷五月花西瓜| 五月婷婷欲色| 婷婷五月中文字幕国产| 色播五月丁香综合| 色婷婷综合中心| 色久在| 天天射夜夜爽| 99热 这里只有精品 国产 日韩| 亚洲区在线| 婷婷五月在线影院| 66精品成人免费网站在线观看| 91操碰| 激情影院丁香五月| 五月天婷婷丁香| 久久九九99字幕| 婷婷激情鹿城五月天| 婷婷激情综合色五月久久,色婷婷丁香花,丁香婷婷五月情天,久久婷婷五月综合色 | 久久久国产精品黄毛片| 欧美日韩中文国产一区发布| 可以免费观看的av| 福利视频在线播放| 婷婷五月激情基地| 碰碰碰碰碰99| 久久视频婷婷| 婷婷99中文字幕| 中文资源在线a| 狠狠色狠狠| 99热r| 天天色·欧美| 五月天婷婷色播| 久久一二三视频| 五月停停激情网| 99视频精品在线| 丁香五月综合激情性爱| 91久久久久久| 国产偷人爽久久久久久老妇APP| 亚洲字幕AV一区二区三区四区| 97色射| 欧美日韩国产一区二区| 国产老熟妇亲子乱对白| 婷婷欧美色| 九九爱看亚洲| 激情开心五月天| 天天噜噜| 色婷婷性爱网| 欧美激情久| 中文AV在线播放| 七七九九色色| 国产性爱亚洲是图| 五月丁香六月在线| 五月婷婷伊| 久久看婷婷| 99热网站在线观看| 99亚洲视频| 五月天伊人| 91久久18| 狠狠干婷婷| 丁香五月久久综合| 99九九99九九九视频精彩| 丁香五月天社区| 久久久香港| 久久精品性爱视频,| 五月婷婷在线观看| 久久激情网| 九九Y精品热播| 九九国产视频| 99热精品在线免费观看| 超碰在线国产| 激情AV中文| 南京搡BBBB搡BBBB| 九月婷婷色色| www.色色色com| 在线中文av| 激情五月婷婷丁香综合网| 激情五月综合网| 嫩草AV久久伊人妇女超级A| 狠狠爱夜夜| 涩涩五| 色五月网址| 丁香五月婷婷五月基地| 天天色综合色色色色色。| 色色网站| 久久无码成人| 日韩色色小视频| 亚洲六月婷婷| av中文字幕免费观看| 五月花综合| 五月丁香久久| 亚洲中文AV| 亚洲精99| 久久丝袜婷婷| se婷97| 26uuu亚洲欧美另类| 国产超碰av| 九九热这里有精品23| 色婷婷伊人| 亚洲 欧洲 国产 伦综合| 夜夜操狠狠操天天操| 在线日韩视频| www.激情五月天。com| 五月天网站亭亭| 久99久视频精品| 欧美婷婷五月激情| 六月丁香五月婷婷| 激情婷婷丁香五月天小说| 九九99热| 色色色色区| 婷婷深爱五月亚洲综合| 五月花婷婷| 99综合视频一体| 婷婷99中文字幕| 中文字幕成| 伊人激情影院| 国产亚洲色婷婷久久99精品91 www.riverspirits.org www.hnnun.com www.changh | 国产人妻777人伦精品HD| 久热久色| 激情五月丁香五月| 99ri精品视频在线观看| 在线视频另类| 久久狠狠干| 五月婷婷丁香大陆免费| 99WWW免费视频| 五月婷婷六月丁香综合在线| 免费日本aⅴ中文字幕 | 播五月,色五月,开心五月播放器| 99在线看视频| 五月丁香婷婷成人网| 人妻激情网| 亚洲综合五月天| 久热超碰91| 日本在线视频播放91| 伊人久久大香蕉网| 99色综合| 五月丁香婷婷AV天堂| 99热色精品| 国产探花AV在线| 九九精品丁香花| 妻久久人久久| 国产avapp 网| 性爱视频99| 思思视频这里是精品| 桃色成人网| 五月丁香婷爱在线| 日本97久久久精品| 五夜婷婷| 天天爽—爽| 久久R激情| 五月天久久婷婷| 色吧五月婷婷| 婷婷综合五月| 操人妻AV| 日本五月婷| 狠狠草网| 伊人91| 七七九九色色| 色综合五月| 九色91国产| 激情婷婷五六月天| 青青艹b| 色婷婷狠狠爱| 五月色欧洲| 色色色天堂网| 五月婷婷婷| 亚州视频九九99| 婷婷色五月天色| av九九| 这里只有免费的精品| 综合超碰熟| 一本色道久久综合狠狠躁小说| 中文aV网| 久久总和99| 无码AV免费精品一区二区三区| 黄色激情五月天| 亚洲中文字幕网| 日韩久久系列| 激情五月天视频| 密乳视频| 五月天激情影院| 91|疯狂丨高潮丨对白| WWW免费视频碰碰碰碰| 激情五月天综合图片小说网站| 日韩啪啪自拍| 五月婷婷在线免费观看| 色婷婷成人五月| 天天综合色丁香| 欧美日韩国产一区二区| 夜夜骑夜夜撸| 五月天激情久久| 五月婷婷综合激情| 久久婷婷啪啪视频| 99re久热| 五月激情综合网| 婷婷五月天网址| 这里只有国产精品在线| 爽极品色| 色五月婷婷天堂| 图片区 小说区 区 亚洲五月| 超碰网站在线观看| 激情五月婷婷综合色播小说| WWW·天天操·视频?| 91视频人人做97| 久久久一级AAA| 久色网| 99精品免费视频| 五月久久亚洲| 丁香婷婷偷拍| 久久99这里只有精品| 日韩在线99| 韩国97天堂| 成人美女网| 这里只有精品视频免费在线观看| 激情五月天婷婷| 天天色域综合网| 婷婷五月激情基地| 思思热天天看| 一区二区传媒视频| 久久密臀婷婷| 色网五月婷婷| 六月成人网| 中文字幕按摩做爰| 狠狠爱综合| www色色com| 五月婷婷综合网| 777色色色| 五月天俺去也| AAA亚洲AV| 99re这里只有精品首页| 丁香六月天婷婷色| 丁香五月天人体| 久久九九怡红院| 五月色综合| 一区色色色色网| 丁香五月天激情| 久久久久久久久久91| www.日本91| 成人免费视频一区| 黄色91在线观看| 婷婷五月激情视频网| se婷97| 综合久久十三| 久综合4| www。五月,com| 99精色| 色五月激情五月| 综合图片色色| 婷婷色片| 大香蕉婷婷丁香天堂AV| 色综合色五月| 色偷偷五月天| 99热免费| 精品欧美性爱超级爽| 亚洲成人AV高清字幕| 色五月色综合| 色播激情| 亚洲无码yw| 色噜噜狠狠色综合成人99| 亚洲操人| 五月综合激情图片| 另类小说五月天综合网| 黄色笑话深爱激情网丁香五月婷婷啪啪啪啪啪 | 91性交在线播放| 亚洲AV成人精品网站在线播放| 综合久久丁丁香婷| 97五月综合网| 色噜噜伊人| 99亚州综合精品成人网| 激情五月综合网| 丁香五月婷婷av影院| 久碰婷婷视频| 狠狠干2007| 思思热视频在线| 色情综合网| 东北黄色一级| 五月激情丁香五月| 婷婷成人小说综合| 性爱久久| 日韩一级片| 九月性爱网| 超碰色色综合| AV天堂淫乩| 色五月婷婷亚洲| 婷婷色在线观看| 伊久大香蕉| 亚洲无码www| 99热这里只有99| 亚洲精品性色| 国产精品日日躁夜夜躁| AV大香蕉| 日韩无码性爱| 无码一区二区三区四区五区| 婷婷激情五月天在线| 午夜成人AV在线| 精品日本视频444| 欧美 日韩 成人在线| 夜夜天天天天天干天天爽| 另类小说色婷婷| 99热综合| 欧美啪啪网| 再綫Av免费視品| 婷婷五月天开心网| 色色五月天激情| 亚洲狠狠婷婷| 婷婷玉月丁香五月在线视频| 五月丁香琪琪| 超碰国产一区| 激情六月下句是什么| 五月丁香另类图片| 国产精品天天狠天天看| 色婷婷19| 激情5月天天天| 超碰在线观看99| 好大好粗嗯啊-一级黄色大片免费观看-成人AV | 99视频网址| 国产精品A成V人在线播放| 91综合色| 丁香美女主播视频在线观看| 亚洲啪啪视频| 日本丰满久久| 伊人婷婷激情| 中文无码婷婷| 日本欧美999久久久三级片| 色播丁香五月婷婷操:屄| 狠狠色噜噜狠狠狠狠综合| 十区av| 天天狠天天叉| 久在线综合69| 色噜噜婷婷| 99婷五月| 久久久99精品| 影音先锋91网站在线观看| 天天爽天天日人人爱| 狠狠干,狠狠操| 丁香婷婷久久| 久久婷色| 综合激情开心五月| 99色色视频| 丁香婷婷综合精品六月初| 欧美日韩成人在线| 九九色逼| 天天操天天曰| 伊人春天av| 丁香五月婷婷啪啪| ...婷婷国产成人亚洲日韩| 蜜桃人妻无码AV天堂三区| 国产夫妻操逼内射视频| 全部老头和老太XXXXX| 97深爱伊人综合| 婷婷综合性爱网| 丁香五月在线观看完整版| 婷婷亚洲在线| 久久这里只有精品8| 久人操| 91日本在线观看| 99久久久久| 97久久视频| 天色综合网站| a毛片二逼wwwwwwwwww| 婷婷五月亚洲一本在线丁香| 色色九九五月天 | 国产精品久久久久久久久久久久| 狠狠色婷婷丁香六月| 婷婷婷婷婷婷婷婷婷婷丁香| 五月天六月婷| 色天堂在线| 99亚洲视频| 九九这里精品| 99碰碰中文| www.超碰| 涩涩五| 日韩无码亚欧无码| 五月天丁香久久| 777色婷婷爱五月| 亚洲网站观看视频| 99视频在线| 亚洲色色色色色色色色色| 97精品人人A片免费看| 夜夜操天天爽| 色婷婷www| 欧美大片| 噜噜在线| 色欲操| 婷婷五月丁香综合桃花色网| 九九九九毛片| 99性爱无码| 婷婷玖玖五月天| 亚洲丁香花色| 五月婷视屏在线观看| 亚洲激情综合网| 丁香婷婷五月色综合| 五月 成人 婷婷| wwccc久久久| 丁香婷婷色九月| 大陆极品少妇内射AAAAAA| 综合网五月| 色色色在线免费视频| 91操在线观看| 无码日本精品XXXXXXXXX| 99久久网站| 亚洲avjiujiur91| 亚洲av无码精品色午夜| 欧美激情性做爰免费视频| 婷婷五月天激情小说| 婷婷五月 丁香六月| 九九视屏| 久久久久久五月天| 国产99久久久| 五月丁香六月婷婷在线| 狠狠干天天内射| 欧美激情中文字幕| 六月婷婷综合网2| 99视频久久| 天天日天天爽| 色婷婷五月综合在线| 五月丁香影院| 久久嘟嘟丁香| 久久九网| 激情五月综合网| 婷婷色在线视频| 色播婷婷五月天| 丁香五月色色色色| 爽极品色| 热九九九九| 婷婷五月天性色| 久久精彩免费视频| 日本三级中国三级99| 天天摸色吧天天摸色吧| 丁香五月婷婷色五月| 色婷婷香蕉| 中文字幕激情综合| 9999热免费视频视频| 亚洲情综合五月天| 婷婷五月天影院| 亚洲天堂热| 免费播放片大片| 综合激情视频| 开心五月天激情网站| 色婷五月丁香久亚洲| 亚洲丁香五月综合| 久久久激情| 99热大香蕉| 182TV亚洲| 色婷婷色综合激情91| www.99操| 淫视馆av三区| av一级棒av| 成人无码精品1区2区3区免费看| 九九热精品| 久久激情五月| 九九热在线精品视频| 婷婷久久综合久| 免费观看亚洲AV片| 丁香花五月天激情| 玖玖爱资源站| 99九九精品视频| 99色热视频| 亚洲视频二区| 五月婷婷啪啪网| 高清视频一区| 97人人射| 天天干电影| 国产精品美女| A久久| 国产成人精品一区二三区熟女在线| 久草热在线视频| 国产成人+综合亚洲+天堂| 大香蕉人妻| 亚洲精品又粗又大又爽A片| 亚洲精品久久久久AV无码| 五月丁香网站| 九九九九操逼| 91久女| 综合超碰熟| 99啪啪网| 色欲丁香| 玖玖资源站国产| 午夜性爱影视一区77| 国产高清精品色| 综合在线色婷婷| 亚洲婷婷91丁香| 五月天综合色| 熟女少妇内射日韩亚洲| 影音先锋秋秋五月婷婷| 日韩AV在线电影| 亚洲成人无码网站| www.久久99| 色五月丁香婷婷综合| 五月开行婷婷色五月| 亭亭五月丁香五月天激情| 日本久热| 久碰视频| 极骚大香蕉伊人| 18久久| 丁香久久| 九九成人精品| 天天爱天天吃狠天天透| 亚洲精品国产成人AV在线| www.久久| 91人无码久久久久久| 亚洲色图45p| 九九视频这里是精品五月| www五月天激情com| 天天操加勒比| 国自产拍偷拍精品啪啪一区二区| 99视频日韩| 超碰女人天堂| 99在线视频在线观看| 婷婷综合一二三| 婷婷在线播放| 色色草97| 久久狠狠欧美| 狠狠狠五月婷婷六月丁香| 在线观看av网站| 年轻的妺妺伦理HD中文| 人人搡人人| 六月婷婷无码观看| 五月丁香激情综合| 六月色婷婷| 欧美亚洲成人在线| 久久久久久xxxxx| 最新丁香六月婷婷| 超碰精品在线| 99热超| 无码G高清天| 久久亚洲天堂| 无码少妇高潮喷水A片免费| 婷婷天堂综合| 五月丁香六月婷婷久久肏| 丁香五月婷婷动漫| 九热视频在线精品15| 99国产精品久久久久久久久久久| 天天se在线视频| 色婷婷五月网| 一起草av| 婷婷色一二三区波多野结衣| 日韩好吊操| 五夜丁香| 五月婷婷亚洲天堂97色婷婷| 久久五月丁香婷婷| 五月情婷婷| 久久久国产精品黄毛片| 啪啪综合| 婷婷婷婷色| 亚洲妇女熟BBW| 超碰操网| 色狠狠婷婷| 国产精品色情AAAAA片软件| 亚洲AV成人在线| 欧美五月婷婷| 狠狠狠狠狠狠草| 色婷婷成人在线| 婷婷色网| 亚欧州精品视频| 色噜噜狠狠插综合| 综合99在线| 天天肏视频| 五月丁香婷婷啪啪网| 伊人色综在线| 日本精品人妻无码77777| 99热综合在线| 人妻综合网| 色偷偷色婷婷| 狠狠穞A片一區二區三區| 开心五月婷婷伊人| 激情五月六月丁香| 97精品综合| 久久久久久久综合狠狠综合| 综激情网| 玖玖婷婷五月| 色五月天成人| 97碰91| 久久综合天天综合| 少妇人妻丰满做爰XXX| 天天综合亚洲综合网天天αⅴ| 色婷婷色99国产综合精品| WWW.久久久久久久| 九九色色| 日本3级片一区2区| www.五月天婷婷| 色综合久网| 婷婷久久色| 九九99在线| 五月丁香成人网| 婷婷综合网性| www.99热在线| 991精品在线视频| 免费亚洲婷婷中文字幕| 激情九月综合| 久久婷婷五月| 久久婷婷丁香五月一二三|