====== qflow gpu 容器版 rocky8.10 安装指南 ======
适用系统:Rocky Linux 8.10\\
包含:NVIDIA 显卡驱动、Docker、nvidia-container-toolkit
----
===== 1. 系统设置 =====
==== 1.1 关防火墙 ====
sudo systemctl stop firewalld
sudo systemctl disable firewalld
===== 2. 安装 NVIDIA 显卡驱动 =====
==== 2.1 确认系统能识别到 NVIDIA 显卡 ====
# 安装硬件检查工具
sudo dnf install pciutils -y
# 识别显卡信息
lspci | grep -i nvidia
==== 2.2 检查驱动是否已经安装 ====
nvidia-smi
如果能看到显卡型号、驱动版本、CUDA 版本(CUDA Version:12.1 以上)等信息,说明驱动已正常安装,直接进行第 3 步;若未识别到驱动版本,请继续完成后续安装操作。
==== 2.3 安装依赖包 ====
# 安装开发工具组
sudo dnf groupinstall "Development Tools" -y
# 安装与当前内核匹配的开发包
sudo dnf install -y kernel-devel-$(uname -r) kernel-headers
# 启用必要的软件仓库
sudo dnf install epel-release -y
# 安装 DKMS,帮助内核更新后自动重建驱动
sudo dnf install -y dkms
==== 2.4 禁用系统自带的 nouveau 驱动 ====
sudo grubby --args="nouveau.modeset=0 rd.driver.blacklist=nouveau" --update-kernel=ALL
# 重启系统使配置生效
sudo reboot
==== 2.5 使用 DNF 包管理器安装驱动 ====
# 启用必要的软件仓库
sudo dnf config-manager --set-enabled powertools
# 添加 NVIDIA 官方仓库
sudo tee /etc/yum.repos.d/cuda-rhel8.repo << 'EOF'
[cuda-rhel8-x86_64]
name=cuda-rhel8-x86_64
baseurl=https://developer.download.nvidia.com/compute/cuda/repos/rhel8/x86_64
enabled=1
gpgcheck=1
gpgkey=https://developer.download.nvidia.com/compute/cuda/repos/rhel8/x86_64/D42D0685.pub
EOF
# 启用 nvidia-driver 模块的 latest-dkms 流(推荐使用 DKMS)
sudo dnf module enable nvidia-driver:570-dkms -y
# 安装驱动
sudo dnf install -y cuda-drivers
==== 2.6 重启系统 ====
sudo reboot
==== 2.7 验证驱动安装 ====
nvidia-smi
如果能看到显卡型号、驱动版本、CUDA 版本等信息,说明驱动已成功安装。
----
===== 3. 安装 Docker =====
==== 3.1 安装依赖并添加 Docker 官方仓库 ====
# 安装依赖工具
sudo dnf install -y dnf-utils device-mapper-persistent-data lvm2
# 添加 Docker 官方仓库(使用阿里云镜像加速)
sudo dnf config-manager --add-repo \
https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo
==== 3.2 安装 Docker 引擎 ====
sudo dnf install -y docker-ce docker-ce-cli containerd.io
==== 3.3 启动并设置开机自启 ====
sudo systemctl start docker
sudo systemctl enable docker
==== 3.4 验证安装 ====
sudo docker run --rm swr.cn-north-4.myhuaweicloud.com/ddn-k8s/docker.io/hello-world:latest
==== 3.5 (可选)配置非 root 用户权限 ====
sudo usermod -aG docker $USER
> 注意:需要重新登录或重启会话才能生效。
----
===== 4. 安装 nvidia-container-toolkit =====
==== 4.1 安装 nvidia-container-toolkit ====
sudo dnf install -y nvidia-container-toolkit
==== 4.2 配置 Docker 运行时 ====
sudo nvidia-ctk runtime configure --runtime=docker
==== 4.3 重启 Docker 服务 ====
# 务必重启 Docker 服务使配置生效
sudo systemctl restart docker
==== 4.4 验证安装 ====
sudo docker run --rm --gpus all swr.cn-north-4.myhuaweicloud.com/ddn-k8s/docker.io/nvidia/cuda:12.4.0-base-ubuntu22.04 nvidia-smi
如果容器内能正常输出 ''nvidia-smi'' 信息,说明 nvidia-container-toolkit 安装成功。
===== 5. qflow gpu 容器版 =====
点击链接, 从 ''宿主机安装 server.py 服务'' 开始: [[qflow:quickstart_gpu#宿主机安装 server.py 服务|跳转到宿主机安装 server.py 服务章节]] 跟着文档安装到结尾
~~DISCUSSION:off~~