返回资源列表

NVIDIA Technical Blog · Andrew Hoyle

How to Read Data into GPU Memory in Python with NVIDIA GPUDirect Storage

How to Read Data into GPU Memory in Python with NVIDIA GPUDirect Storage是NVIDIA Technical Blog的免费实践教程(en)。前置条件:需要会 Python(含虚拟环境与 pip),了解 GPU 编程基本概念与 Linux 命令行;网页写明还需 GDS 相关平台知识。

学会在具备 GDS 的 Linux 系统上用 KvikIO Python API 将文件直接读入 GPU 显存,并确认是否走了加速路径。

打开官方课程
难度
见前置条件
类型
教程 · 实践教程
语言
en
规模
1 个课节
内容费用
免费
动手
需要动手环境

使用限制

阅读教程无需账号;动手复现必须自备 GDS 硬件环境。

练习与作业
带 NVIDIA GPU 的 Linux 主机(示例为 H100),并安装 GPUDirect Storage

学完你能

  • 说明 GPUDirect Storage、cuFile 与 KvikIO 三层的关系及各自的路径选择点
  • 在 Linux GPU 主机上创建 Python 环境并安装 kvikio-cu13(含 CuPy 依赖)
  • 用 KvikIO defaults API 查看 compat_mode、gds_threshold 等运行时设置
  • 用 gdscheck.py 检查系统 GDS 组件、支持文件系统与 GPU 拓扑
  • 写 Python 程序把文件读入 CuPy 分配的 GPU 缓冲区
  • 用 cuFile 统计信息判断操作走的是 nvidia-fs 加速路径还是 POSIX 兼容路径

适合你吗

适合

适合已在 GPU 服务器上做数据加载瓶颈优化的 AI/数据工程学习者,想了解 GDS 与 KvikIO 的实际用法。

暂不适合

没有 GDS 支持的存储与 Linux GPU 主机的学习者无法复现;只想要通用 Python 文件 I/O 入门的人也不适合。

需要先会

需要会 Python(含虚拟环境与 pip),了解 GPU 编程基本概念与 Linux 命令行;网页写明还需 GDS 相关平台知识。

课程特点

内容侧重
按内容目录判断
练习与项目
需在真实 GDS 硬件上运行,练习时按原文用 CUFILE_STATS_LEVEL=3 配合 gds_stats 查看 nvfs 与 posix 计数,判断读取是否走了加速路径。
学习时长
1 个课节原站未给出统一学习时长;实际用时取决于已有基础。
内容费用
免费教程正文、配置步骤与代码在页面上可直接阅读,未见付费墙或登录拦截。

内容覆盖

  • 前言:数据规模增长与 GDS 的动机
  • How does NVIDIA KvikIO leverage GDS?(框架说明)
  • Prerequisites(前置条件)
  • Tutorial system(教程测试环境)
  • Step 1: Set up NVIDIA KvikIO
  • Step 2: Inspect the configuration
  • Step 3: Read a file into GPU memory(节选至此截断)

常见问题

免费吗?

免费:教程正文、配置步骤与代码在页面上可直接阅读,未见付费墙或登录拦截。实践需要付费:网页写明需要带 NVIDIA GPU、GDS 支持的存储和文件系统的 Linux 系统(示例用 H100 与本地 NVMe),此类硬件环境需自备。

需要什么基础?

需要会 Python(含虚拟环境与 pip),了解 GPU 编程基本概念与 Linux 命令行;网页写明还需 GDS 相关平台知识。软件、账号与硬件:一台装有 NVIDIA GPU 与 GPUDirect Storage 的 Linux 系统,GDS 支持的存储与文件系统配置,以及 gdscheck、gds_stats 等工具的使用权限。

有中文吗?

本站记录的语言是en;是否有中文字幕或译本本站未核实,请以原站为准。

怎么开始?

从原始资源入口开始:https://developer.nvidia.com/blog/how-to-read-data-into-gpu-memory-in-python-with-nvidia-gpudirect-storage/。本页“学前准备”列出环境与工具,“学习指南”给出开课提示词,可以在自己的电脑上按步骤开始。开课提示词尚未完整验证。练习与作业需要自备:带 NVIDIA GPU 的 Linux 主机(示例为 H100),并安装 GPUDirect Storage。

来源与使用须知

收录时间
本站首次收录 2026-10-27原站首次发布 2026-10-23
指南参考

版权与转载

  • 课程材料未标明许可:仅供个人学习,转载、修改或商用前请先联系原作者。
  • 本站只提供原始链接和学习指南,不转载、不镜像课程材料;引用时请注明原作者与出处。