chinese直男口爆体育生外卖, 99久久er热在这里只有精品99, 又色又爽又黄18禁美女裸身无遮挡, gogogo高清免费观看日本电视,私密按摩师高清版在线,人妻视频毛茸茸,91论坛 兴趣闲谈,欧美 亚洲 精品 8区,国产精品久久久久精品免费

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

如何使用Warp在Python環(huán)境中編寫CUDA內(nèi)核

星星科技指導員 ? 來源:NVIDIA ? 作者:NVIDIA ? 2022-04-02 16:15 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

通常,實時物理模擬代碼是用低級 CUDA C ++編寫的,以獲得最佳性能。在這篇文章中,我們將介紹 NVIDIA Warp ,這是一個新的 Python 框架,可以輕松地用 Python 編寫可微圖形和模擬 GPU 代碼。 Warp 提供了編寫高性能仿真代碼所需的構建塊,但它的工作效率與 Python 等解釋語言相當。

在這篇文章的最后,您將學習如何使用 Warp 在 Python 環(huán)境中編寫 CUDA 內(nèi)核,并利用一些內(nèi)置的高級功能,從而輕松編寫復雜的物理模擬,例如海洋模擬。

安裝

Warp 以 來自 GitHub 的開源庫 的形式提供??寺〈鎯旌?,可以使用本地軟件包管理器進行安裝。對于 pip ,請使用以下命令:

pip install warp

初始化

導入后,必須顯式初始化扭曲:

import warp as wp
wp.init()

推出內(nèi)核

Warp 使用 Python 裝飾器的概念來標記可以在 GPU 上執(zhí)行的函數(shù)。例如,可以編寫一個簡單的半隱式粒子積分方案,如下所示:

@wp.kernel
def integrate(x: wp.array(dtype=wp.vec3), v: wp.array(dtype=wp.vec3), f: wp.array(dtype=wp.vec3), w: wp.array(dtype=float), gravity: wp.vec3, dt: float): # thread id tid = wp.tid() x0 = x[tid] v0 = v[tid] # Semi-implicit Euler step f_ext = f[tid] inv_mass = w[tid] v1 = v0 + (f_ext * inv_mass + gravity) * dt x1 = x0 + v1 * dt # store results x[tid] = x1 v[tid] = v1 

因為 Warp 是強類型的,所以應該為內(nèi)核參數(shù)提供類型提示。要啟動內(nèi)核,請使用以下語法:

 wp.launch(kernel=simple_kernel, # kernel to launch dim=1024, # number of threads inputs=[a, b, c], # parameters device="cuda") # execution device

與 NumPy 等基于張量的框架不同, Warp 使用 kernel-based 編程模型?;趦?nèi)核的編程與底層 GPU 執(zhí)行模型更為匹配。對于需要細粒度條件邏輯和內(nèi)存操作的模擬代碼,這通常是一種更自然的表達方式。然而, Warp 以一種易于使用的方式公開了這種以線程為中心的編程模型,它不需要 GPU 體系結構的低級知識。

編譯模型

啟動內(nèi)核會觸發(fā)實時( JIT )編譯管道,該管道會自動從 Python 函數(shù)定義生成 C ++/ CUDA 內(nèi)核代碼。

屬于 Python 模塊的所有內(nèi)核都在運行時編譯到動態(tài)庫和 PTX 中。圖 2 。顯示了編譯管道,其中包括遍歷函數(shù) AST 并將其轉(zhuǎn)換為直線 CUDA 代碼,然后編譯并加載回 Python 進程。

A flowchart diagram showing how Python code gets compiled and converted by Warp into kernel level executable code.A flowchart diagram showing how Python code gets compiled and converted by Warp into kernel level executable code.圖 2 。 Warp 內(nèi)核的編譯管道

這個 JIT 編譯的結果被緩存。如果輸入內(nèi)核源代碼不變,那么預編譯的二進制文件將以低開銷的方式加載。

記憶模型

Warp 中的內(nèi)存分配通過warp.array類型公開。陣列封裝了可能位于主機( CPU )或設備( GPU )內(nèi)存中的底層內(nèi)存分配。與張量框架不同, Warp 中的數(shù)組是強類型的,并存儲內(nèi)置結構的線性序列(vec3, matrix33, quat,等等)。

您可以從 Python 列表或 NumPy 數(shù)組中構造數(shù)組,或使用與 NumPy 和 PyTorch 類似的語法進行初始化:

# allocate an uninitizalized array of vec3s v = wp.empty(length=n, dtype=wp.vec3, device="cuda") # allocate a zero-initialized array of quaternions q = wp.zeros(length=n, dtype=wp.quat, device="cuda") # allocate and initialize an array from a numpy array # will be automatically transferred to the specified device v = wp.from_numpy(array, dtype=wp.vec3, device="cuda")

Warp 支持__array_interface____cuda_array_interface__協(xié)議,允許在基于張量的框架之間進行零拷貝數(shù)據(jù)視圖。例如,要將數(shù)據(jù)轉(zhuǎn)換為 NumPy ,請使用以下命令:

# automatically bring data from device back to host view = device_array.numpy()

特征

Warp 包含幾個更高級別的數(shù)據(jù)結構,使實現(xiàn)模擬和幾何處理算法更容易。

網(wǎng)格

三角形網(wǎng)格在仿真和計算機圖形學中無處不在。 Warp 提供了一種內(nèi)置類型,用于管理網(wǎng)格數(shù)據(jù),該數(shù)據(jù)支持幾何查詢,例如最近點、光線投射和重疊檢查。

下面的示例演示如何使用“扭曲”計算網(wǎng)格上距離輸入位置數(shù)組最近的點。這種類型的計算是碰撞檢測中許多算法的基礎(圖 3 )。 Warp 的網(wǎng)格查詢使實現(xiàn)此類方法變得簡單。

@wp.kernel
def project(positions: wp.array(dtype=wp.vec3), mesh: wp.uint64, output_pos: wp.array(dtype=wp.vec3), output_face: wp.array(dtype=int)): tid = wp.tid() x = wp.load(positions, tid) face_index = int(0) face_u = float(0.0) face_v = float(0.0) sign = float(0.0) max_dist = 2.0 if (wp.mesh_query_point(mesh, x, max_dist, sign, face_index, face_u, face_v)): p = wp.mesh_eval_position(mesh, face_index, face_u, face_v) output_pos[tid] = p output_face[tid] = face_index

稀疏卷

稀疏體對于表示大型域上的網(wǎng)格數(shù)據(jù)非常有用,例如復雜對象的符號距離場( SDF )或大規(guī)模流體流動的速度。 Warp 支持使用 NanoVDB 標準定義的稀疏卷。使用標準 OpenVDB 工具(如 Blender 、 Houdini 或 Maya )構造卷,然后在 Warp 內(nèi)核內(nèi)部采樣。

您可以直接從磁盤或內(nèi)存中的二進制網(wǎng)格文件創(chuàng)建卷,然后使用volumes API 對其進行采樣:

wp.volume_sample_world(vol, xyz, mode) # world space sample using interpolation mode
wp.volume_sample_local(vol, uvw, mode) # volume space sample using interpolation mode
wp.volume_lookup(vol, ijk) # direct voxel lookup
wp.volume_transform(vol, xyz) # map point from voxel space to world space
wp.volume_transform_inv(vol, xyz) # map point from world space to volume space

使用卷查詢,您可以以最小的內(nèi)存開銷高效地碰撞復雜對象。

散列網(wǎng)格

許多基于粒子的模擬方法,如離散元法( DEM )或平滑粒子流體動力學( SPH ),都涉及到在空間鄰域上迭代以計算力的相互作用。哈希網(wǎng)格是一種成熟的數(shù)據(jù)結構,用于加速這些最近鄰查詢,特別適合 GPU 。

哈希網(wǎng)格由點集構成,如下所示:

哈希網(wǎng)格由點集構成,如下所示:

grid = wp.HashGrid(dim_x=128, dim_y=128, dim_z=128, device="cuda")
grid.build(points=p, radius=r)

創(chuàng)建散列網(wǎng)格后,可以直接從用戶內(nèi)核代碼中查詢它們,如以下示例所示,該示例計算所有相鄰粒子位置的總和:

@wp.kernel
def sum(grid : wp.uint64, points: wp.array(dtype=wp.vec3), output: wp.array(dtype=wp.vec3), radius: float): tid = wp.tid() # query point p = points[tid] # create grid query around point query = wp.hash_grid_query(grid, p, radius) index = int(0) sum = wp.vec3() while(wp.hash_grid_query_next(query, index)): neighbor = points[index] # compute distance to neighbor point dist = wp.length(p-neighbor) if (dist <= radius): sum += neighbor output[tid] = sum

圖 5 顯示了粘性材料的 DEM 顆粒材料模擬示例。使用內(nèi)置的哈希網(wǎng)格數(shù)據(jù)結構,您可以在不到 200 行 Python 中編寫這樣的模擬,并以交互速率運行超過 100K 個粒子。

使用扭曲散列網(wǎng)格數(shù)據(jù)可以輕松評估相鄰粒子之間的成對力相互作用。

可微性

基于張量的框架,如 PyTorch 和 JAX ,提供了張量計算的梯度,非常適合于 ML 訓練等應用。

Warp 的一個獨特功能是能夠生成 kernel code 的正向和反向版本。這使得編寫可微模擬變得很容易,可以將梯度作為更大訓練管道的一部分進行傳播。一個常見的場景是,對網(wǎng)絡層使用傳統(tǒng)的 ML 框架,并使用 Warp 實現(xiàn)允許端到端差異性的模擬層。

當需要漸變時,應使用requires_grad=True創(chuàng)建陣列。例如,warp.Tape類可以記錄內(nèi)核啟動并回放它們,以計算標量損失函數(shù)相對于內(nèi)核輸入的梯度:

tape = wp.Tape() # forward pass
with tape: wp.launch(kernel=compute1, inputs=[a, b], device="cuda") wp.launch(kernel=compute2, inputs=[c, d], device="cuda") wp.launch(kernel=loss, inputs=[d, l], device="cuda") # reverse pass
tape.backward(loss=l)

完成后向傳遞后,可通過Tape對象中的映射獲得與輸入相關的梯度:

# gradient of loss with respect to input a
print(tape.gradients[a])
A 3D image with multi-colored trace lines simulating a ball bouncing off a wall and hitting a black square suspended in mid-air away from the wall.A 3D image with multi-colored trace lines simulating a ball bouncing off a wall and hitting a black square suspended in mid-air away from the wall.
圖 6 。一個軌跡優(yōu)化的例子,其中球的初始速度被優(yōu)化以擊中黑色目標。每行顯示 LBFGS 優(yōu)化步驟的一次迭代的結果。

總結

在這篇文章中,我們介紹了 NVIDIA Warp ,這是一個 Python 框架,可以很容易地為 GPU 編寫可微模擬代碼。

關于作者

邁爾斯·麥克林( Miles Macklin )是NVIDIA 的首席工程師,致力于模擬技術。他從哥本哈根大學獲得計算機科學博士學位,從事計算機圖形學、基于物理學的動畫和機器人學的研究。他在 ACM SIGGRAPH 期刊上發(fā)表了幾篇論文,他的研究已經(jīng)被整合到許多商業(yè)產(chǎn)品中,包括NVIDIA 的 PhysX 和 ISAAC 健身房模擬器。他最近的工作旨在為 GPU 上的可微編程開發(fā)健壯高效的框架。

Fred Oh 是 CUDA 、 CUDA on WSL 和 CUDA Python 的高級產(chǎn)品營銷經(jīng)理。弗雷德?lián)碛屑又荽髮W戴維斯分校計算機科學和數(shù)學學士學位。他的職業(yè)生涯開始于一名 UNIX 軟件工程師,負責將內(nèi)核服務和設備驅(qū)動程序移植到 x86 體系結構。他喜歡《星球大戰(zhàn)》、《星際迷航》和 NBA 勇士隊。

審核編輯:郭婷

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 機器人
    +關注

    關注

    213

    文章

    29748

    瀏覽量

    212937
  • NVIDIA
    +關注

    關注

    14

    文章

    5309

    瀏覽量

    106428
  • 自動駕駛
    +關注

    關注

    790

    文章

    14321

    瀏覽量

    170690
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    linux虛擬環(huán)境調(diào)用Linux 版matlab編譯的python庫時出錯

    、readme.txt、 requiredMCRProducts.txt、init.py、CAO_python.ctf。 linux環(huán)境按照以下步驟安裝matlab runtime
    發(fā)表于 07-18 10:40

    進迭時空同構融合RISC-V AI CPU的Triton算子編譯器實踐

    Triton是由OpenAI開發(fā)的一個開源編程語言和編譯器,旨在簡化高性能GPU內(nèi)核編寫。它提供了類似Python的語法,并通過高級抽象降低了GPU編程的復雜性,同時保持了高性能。目前
    的頭像 發(fā)表于 07-15 09:04 ?210次閱讀
    進迭時空同構融合RISC-V AI CPU的Triton算子編譯器實踐

    基礎篇3:掌握Python的條件語句與循環(huán)

    通過學習條件語句和循環(huán),您能夠編寫出能夠根據(jù)不同情況和條件作出決策的Python程序。這些結構在編程中非常常見,對于提高編程能力和構建復雜程序至關重要。接下來的學習和實踐,不斷練
    發(fā)表于 07-03 16:13

    ?如何在虛擬環(huán)境中使用 Python,提升你的開發(fā)體驗~

    RaspberryPiOS預裝了Python,你需要使用其虛擬環(huán)境來安裝包。今天出版的最新一期《TheMagPi》雜志刊登了我們文檔負責人NateContino撰寫的一篇實用教程,幫助你入門
    的頭像 發(fā)表于 03-25 09:34 ?343次閱讀
    ?如何在虛擬<b class='flag-5'>環(huán)境</b>中使用 <b class='flag-5'>Python</b>,提升你的開發(fā)體驗~

    零基礎入門:如何在樹莓派上編寫和運行Python程序?

    在這篇文章,我將為你簡要介紹Python程序是什么、Python程序可以用來做什么,以及如何在RaspberryPi上編寫和運行一個簡單的Pyth
    的頭像 發(fā)表于 03-25 09:27 ?757次閱讀
    零基礎入門:如何在樹莓派上<b class='flag-5'>編寫</b>和運行<b class='flag-5'>Python</b>程序?

    Python嵌入式系統(tǒng)的應用場景

    你想把你的職業(yè)生涯提升到一個新的水平?Python嵌入式系統(tǒng)中正在成為一股不可缺少的新力量。盡管傳統(tǒng)上嵌入式開發(fā)更多地依賴于C和C++語言,Python的優(yōu)勢在于其簡潔的語法、豐富的庫和快速的開發(fā)周期,這使得它在某些嵌入式場景
    的頭像 發(fā)表于 03-19 14:10 ?717次閱讀

    晶圓的環(huán)吸方案相比其他吸附方案,對于測量晶圓 BOW/WARP 的影響

    半導體制造領域,晶圓的加工精度和質(zhì)量控制至關重要,其中對晶圓 BOW(彎曲度)和 WARP(翹曲度)的精確測量更是關鍵環(huán)節(jié)。不同的吸附方案被應用于晶圓測量過程,而晶圓的環(huán)吸方案因其獨特
    的頭像 發(fā)表于 01-09 17:00 ?639次閱讀
    晶圓的環(huán)吸方案相比其他吸附方案,對于測量晶圓 BOW/<b class='flag-5'>WARP</b> 的影響

    晶圓的TTV,BOW,WARP,TIR是什么?

    晶圓的TTV、BOW、WARP、TIR是評估晶圓質(zhì)量和加工精度的重要指標,以下是它們的詳細介紹: TTV(Total Thickness Variation,總厚度偏差) 定義:晶圓的總厚度變化
    的頭像 發(fā)表于 12-17 10:01 ?1972次閱讀
    晶圓的TTV,BOW,<b class='flag-5'>WARP</b>,TIR是什么?

    邏輯異或運算符Python的用法

    ,Python的 ^ 符號實際上是一個按位異或運算符,用于對整數(shù)的二進制表示進行異或操作。 盡管如此,我們?nèi)匀豢梢酝ㄟ^一些方法來實現(xiàn)邏輯異或的功能,即當兩個布爾值不同時為真,相同時為假。這可以通過使用邏輯運算符來實現(xiàn),而不是直接使用 ^ (因為 ^
    的頭像 發(fā)表于 11-19 09:46 ?861次閱讀

    Python環(huán)境下的代理服務器搭建與自動化管理

    Python環(huán)境下搭建與自動化管理代理服務器是一項涉及網(wǎng)絡編程和自動化技術的綜合任務。
    的頭像 發(fā)表于 11-14 07:31 ?681次閱讀

    Python多線程和多進程的區(qū)別

    Python作為一種高級編程語言,提供了多種并發(fā)編程的方式,其中多線程與多進程是最常見的兩種方式之一。本文中,我們將探討Python多線程與多進程的概念、區(qū)別以及如何使用線程池與進
    的頭像 發(fā)表于 10-23 11:48 ?1022次閱讀
    <b class='flag-5'>Python</b><b class='flag-5'>中</b>多線程和多進程的區(qū)別

    怎么TMDSEVM6678: 6678自帶的FFT接口和CUDA提供CUFFT函數(shù)庫選擇?

    請教一下gpgpu上包括4個Riscv cpu和一個DPU, 沒有6678,要替換原來信號處理用的6678,該怎么6678自帶的FFT接口和CUDA提供CUFFT函數(shù)庫選擇?
    發(fā)表于 09-27 07:20

    linux驅(qū)動程序如何加載進內(nèi)核

    Linux系統(tǒng),驅(qū)動程序是內(nèi)核與硬件設備之間的橋梁。它們允許內(nèi)核與硬件設備進行通信,從而實現(xiàn)對硬件設備的控制和管理。 驅(qū)動程序的編寫 驅(qū)
    的頭像 發(fā)表于 08-30 15:02 ?1106次閱讀

    pytorch怎么pycharm運行

    PyTorch。以下是安裝PyTorch的步驟: 打開終端或命令提示符。 根據(jù)你的系統(tǒng)和需求,選擇適當?shù)陌惭b命令。例如,如果你使用的是Python 3.8和CUDA 10.2,可以使用以下命令: pip
    的頭像 發(fā)表于 08-01 16:22 ?2553次閱讀

    python寫驗證環(huán)境cocotb

    本文介紹了cocotb的安裝、python tb文件的寫法、用xrun仿真cocotb的腳本等,我們來看看體驗如何。
    的頭像 發(fā)表于 07-24 09:38 ?1059次閱讀
    用<b class='flag-5'>python</b>寫驗證<b class='flag-5'>環(huán)境</b>cocotb