如何利用張量提升內(nèi)存使用效率

在數(shù)據(jù)處理中，對原始數(shù)據(jù)進行重塑或重新排序并創(chuàng)建多個副本是很常見的行為。無論執(zhí)行任何新步驟，都會創(chuàng)建新副本。隨著程序的增大，占用的內(nèi)存也會增大，我?guī)缀鯊?..

2022-02-19 標簽：數(shù)據(jù)存儲pytorch 1260 0

國產(chǎn)高性能GPGPU的破局點是什么？

GPU誕生的原因是人們需要更好地處理3D游戲中的圖形渲染，因此GPU擁有很多很小的內(nèi)核增加并行處理能力，然后通過圖形流水線的模式做圖形處理。由于天生核心...

2021-09-13 標簽：gpuAIpytorch 3415 0

利用Python和PyTorch處理面向?qū)ο蟮臄?shù)據(jù)集

本篇是利用 Python 和 PyTorch 處理面向?qū)ο蟮臄?shù)據(jù)集系列博客的第 2 篇。 如需閱讀第 1 篇：原始數(shù)據(jù)和數(shù)據(jù)集，請參閱此處。 我們在第 ...

2021-08-25 標簽：數(shù)據(jù)pythonpytorch 3143 0

硬杠TensorFlow/PyTorch，這家中國初創(chuàng)企業(yè)，乘開源東風、領跑AI賽道

目前比較主流的AI深度學習框架主要由國際巨頭領銜，比如谷歌的TensorFlow和Facebook的PyTorch等。2017年中國的一家初創(chuàng)團隊悄悄成...

2021-07-16 標簽：AIpytorchoneflow 6.9萬 0

PyTorch1.8和Tensorflow2.5該如何選擇？

自深度學習重新獲得公認以來，許多機器學習框架層出不窮，爭相成為研究人員以及行業(yè)從業(yè)人員的新寵。從早期的學術(shù)成果 Caffe、Theano，到獲得龐大工業(yè)...

2021-07-09 標簽：pytorch 1725 0

如何在訓練過程中正確地把數(shù)據(jù)輸入給模型

機器學習中一個常見問題是判定與數(shù)據(jù)交互的最佳方式。 在本文中，我們將提供一種高效方法，用于完成數(shù)據(jù)的交互、組織以及最終變換（預處理）。隨后，我們將講解如...

2021-07-01 標簽：機器學習數(shù)據(jù)集PIL 2746 0

基于PyTorch的物體檢測包圍框數(shù)據(jù)增強包

像許多神經(jīng)網(wǎng)絡模型一樣，目標檢測模型在訓練大量數(shù)據(jù)時效果最好。通常情況下，可用的數(shù)據(jù)有限，世界各地的許多研究人員正在研究增強策略，以增加可用的數(shù)據(jù)量。谷...

2021-07-01 標簽：神經(jīng)網(wǎng)絡pytorch 1644 0

揭秘Google和Facebook不用Docker的原因

寫作本文的起因是我想讓修改后的分布式 PyTorch 程序能更快的在 Facebook 的集群上啟動。探索過程很有趣，也展示了工業(yè)機器學習需要的知識體系...

2021-06-26 標簽：Google操作系統(tǒng)分布式 1840 0

13個你一定來看看的PyTorch特性！

作者：MARCIN ZAB?OCKIMARCIN ZAB?OCKI 編譯：ronghuaiyang（AI公園） 導讀 PyTorch使用上的13個特性，...

2021-04-19 標簽：數(shù)據(jù)圖像pytorch 1931 0

關(guān)于六大機器學習Python庫的介紹

NumPy是一種通用的數(shù)組處理軟件包。它提供高性能的多維數(shù)組對象和用于處理這些數(shù)組的工具。它是用于科學計算的基本Python軟件包。

2021-04-16 標簽：機器學習pythonpytorch 2009 0

PyTorch 1.8正式官宣發(fā)布還支持AMD GPU！

Pytorch1.8來啦！1.8版本中，官方終于加入了對AMD ROCm的支持，可以方便的在原生環(huán)境下運行，不用去配置Docker了。

2021-03-12 標簽：gpuNVIDIA技術(shù)python 3642 0