NVIDIA DALI夜间版用于CUDA 11.0。Git SHA: 0a980760083f4cd96cd232a71be381d9887a9eca
项目描述
NVIDIA数据加载库(DALI)是一个用于数据加载和预处理的库,用于加速深度学习应用。它提供了一组高度优化的构建块,用于加载和处理图像、视频和音频数据。它可以作为深度学习框架内建数据加载器和数据迭代器的便携式替代品。
深度学习应用需要复杂的多阶段数据处理管道,包括加载、解码、裁剪、调整大小以及许多其他增强。这些目前在CPU上执行的数据处理管道已成为瓶颈,限制了训练和推理的性能和可伸缩性。
DALI通过将数据预处理卸载到GPU来解决CPU瓶颈问题。此外,DALI依赖于其自己的执行引擎,旨在最大化输入管道的吞吐量。诸如预取、并行执行和批量处理等功能对用户来说是透明的。
此外,深度学习框架有多个数据预处理实现,这导致了一些挑战,例如训练和推理工作流的可移植性以及代码的可维护性。使用DALI实现的数据处理管道是可移植的,因为它们可以轻松地重新定位到TensorFlow、PyTorch、MXNet和PaddlePaddle。
有关更多详细信息,请参阅最新的DALI文档。
项目详情
关闭
nvidia_dali_nightly_cuda110-1.43.0.dev20241003.tar.gz的哈希值
算法 | 哈希摘要 | |
---|---|---|
SHA256 | b9d4ae0b48020b9cfb7a8dd8382d9570a14594b814dd36689d193a391819f5f3 |
|
MD5 | f905d4654a1e3d0a67d7b471c145c794 |
|
BLAKE2b-256 | 18ea94145b12ee66d3b93a685d9c0828f5d329409e4a8087a22b9ad3526a0720 |