跳转到主要内容

NVIDIA DALI夜间TensorFlow插件用于CUDA 12.0。Git SHA:94f02ad69abe149f345684ef2aba3e13d246881a

项目描述

TensorFlow插件使DALI能够与TensorFlow一起使用。

NVIDIA数据加载库(DALI)是一个用于数据加载和预处理的库,用于加速深度学习应用。它提供了一组高度优化的构建块,用于加载和处理图像、视频和音频数据。它可以用作流行的深度学习框架中内置数据加载器和数据迭代器的便携式替代品。

深度学习应用需要复杂的多阶段数据处理管道,包括加载、解码、裁剪、调整大小以及许多其他增强。这些目前在CPU上执行的数据处理管道已成为瓶颈,限制了训练和推理的性能和可扩展性。

DALI通过将数据预处理卸载到GPU来解决CPU瓶颈问题。此外,DALI依靠其自己的执行引擎,旨在最大化输入管道的吞吐量。例如预取、并行执行和批量处理等功能对用户来说是透明的。

此外,深度学习框架有多个数据预处理实现,导致培训和工作流的可移植性以及代码可维护性等挑战。使用DALI实现的数据处理管道是可移植的,因为它们可以轻松地重新定位到TensorFlow、PyTorch、MXNet和PaddlePaddle。

有关更多详细信息,请参阅最新的DALI文档

DALI Diagram

项目详情


发布历史 发布通知 | RSS源

下载文件

下载适合您平台的文件。如果您不确定选择哪个,请了解更多关于 安装包 的信息。

源分布

由以下支持