当前位置: 首页 > news >正文

服务器Docker实例化容器 -- 踩坑大全

服务器Docker实例化容器 -- 踩坑大全

  • Ubuntu 22.04 + Docker + PyTorch + Jupyter + GPU 环境搭建踩坑总结
    • 一、背景
    • 二、基础环境确认
    • 三、Docker 容器运行(基础版)
    • 四、常见问题汇总(重点)
      • ❗ 问题 1:Jupyter 不存在
      • ❗ 问题 2:网络问题
      • ❗ 问题 3:端口被占用
      • ❗ 问题 4:GPU 不可用
      • ❗ 问题 5(核心):nvml 权限错误
    • 五、GPU 问题核心分析

Ubuntu 22.04 + Docker + PyTorch + Jupyter + GPU 环境搭建踩坑总结

一、背景

在服务器上使用 Docker 部署 PyTorch 环境,并通过 Jupyter Notebook 进行开发,目标是:

  1. 使用 pytorch/pytorch:2.1.0-cuda12.1-cudnn8-devel
  2. 支持 GPU 加速
  3. 挂载本地项目目录
  4. 浏览器访问 Jupyter

二、基础环境确认

  1. Docker 是否安装
docker-v
  1. NVIDIA 驱动是否正常
nvidia-smi

✅ 正常应显示 GPU 信息
❌ 报错说明驱动未安装或异常

三、Docker 容器运行(基础版)

dockerrun-d\--namemy_pytorch_jupyter\-p8888:8888\-v/home/youruser/my_pytorch:/workspace\-w/workspace\pytorch/pytorch:2.1.0-cuda12.1-cudnn8-devel\jupyter notebook--ip=0.0.0.0--port=8888--no-browser --allow-root

解释:

  • –gpus all:如果服务器有 GPU
  • -it:交互式终端
  • -p 8888:8888:将容器 8888 端口映射到宿主机 8888 端口(Jupyter 默认端口)
  • -v /home/youruser/my_pytorch:/workspace:挂载目录
  • –name my_pytorch_container:给容器起名字
  • –ip=0.0.0.0:允许外部访问
  • –no-browser:容器里没有浏览器
  • –allow-root:以 root 运行

命令执行后会输出一个 URL,类似:

http://127.0.0.1:8888/?token=xxxx

你可以把 127.0.0.1 换成服务器 IP,在浏览器访问:

http://服务器IP:8888/?token=xxxx

✅ 小贴士
下次启动容器,可以用

dockerstart-aimy_pytorch_container

数据都保存在 /home/youruser/my_pytorch 下,容器删除也不会丢失

四、常见问题汇总(重点)

❗ 问题 1:Jupyter 不存在

exec: jupyter: not found

原因
官方 PyTorch 镜像 不包含 Jupyter
解决

pip install notebook

或启动时:

bash-c"pip install notebook && jupyter notebook ..."

❗ 问题 2:网络问题

Could not handshake: Errorinthe pull function.[IP:185.199.109.153443]E: Failed to fetch https://nvidia.github.io/libnvidia-container/stable/deb/amd64/./nvidia-docker2_2.14.0-1_all.deb Could not handshake: Errorinthe pull function.[IP:185.199.109.153443]E: Unable to fetch some archives, maybe runapt-getupdate or try with --fix-missing?

方法 1:使用代理或 VPN
如果服务器可以使用代理,设置环境变量:

export http_proxy="http://your-proxy:port" export https_proxy="http://your-proxy:port"

然后再执行安装命令。
这种方法适合有稳定代理的环境。

方法 2:用--fix-missing重试
APT 提示可以尝试 --fix-missing:

sudo apt update --fix-missing sudo apt install -y nvidia-docker2

有时网络抖动可以通过重试解决。

方法 3:使用国内镜像
镜像加速:
NVIDIA 官方镜像仓库可以替换成国内镜像(比如清华大学开源镜像站)
/etc/apt/sources.list.d/nvidia-docker.list中,把https://nvidia.github.io/换成国内镜像(需要查找可用镜像,国内可用的镜像不多)。
或者直接下载 DEB 包手动安装:

wget https://github.com/NVIDIA/nvidia-docker/releases/download/v2.14.0/nvidia-docker2_2.14.0-1_all.deb sudo dpkg -i nvidia-docker2_2.14.0-1_all.deb sudo systemctl restart docker

如果 wget 也无法直接下载,可以先在本地电脑下载,然后通过 scp 上传到服务器。

❗ 问题 3:端口被占用

address alreadyinuse

解决:查看哪个进程占用了 8888

sudolsof-i:8888
  • 会显示占用端口的进程,例如:
COMMAND PIDUSERFD TYPE DEVICE SIZE/OFF NODE NAME python31234root 4u IPv41234560t0 TCP *:8888(LISTEN)
  • 可以选择停止占用的进程:
sudokill-91234
  • 或更换端口:
-p8899:8888

❗ 问题 4:GPU 不可用

WARNING: The NVIDIA Driver was not detected. GPU functionality will not be available. Use the NVIDIA Container Toolkit to start this container with GPU support; see https://docs.nvidia.com/datacenter/cloud-native/ .

原因:容器检测不到 GPU 驱动
步骤1️⃣ :确认宿主机有 NVIDIA GPU 驱动

nvidia-smi
  • 如果能看到 GPU 型号和驱动版本,说明宿主机驱动正确
  • 如果报错 NVIDIA-SMI has failed,说明驱动没装好,需要先安装 GPU 驱动

步骤2️⃣ :安装 NVIDIA Container Toolkit

  • 让 Docker 容器可以访问宿主机的 GPU
  • Ubuntu 22.04 推荐手动安装 DEB 包方式(国内可下载)
  • 安装完成后,启动容器要加参数:
dockerrun-d--gpusall--namemy_pytorch_jupyter\-p8899:8888\-v/home/youruser/my_pytorch:/workspace\-w/workspace\my_pytorch_jupyter_image
  • – gpus all 表示容器可以使用所有可用 GPU

安装命令:

# 设置 NVIDIA Docker 仓库distribution=$(./etc/os-release;echo$ID$VERSION_ID)curl-s-Lhttps://nvidia.github.io/nvidia-docker/gpgkey|sudoapt-keyadd-curl-s-Lhttps://nvidia.github.io/nvidia-docker/$distribution/nvidia-docker.list|sudotee/etc/apt/sources.list.d/nvidia-docker.listsudoaptupdatesudoaptinstall-ynvidia-docker2sudosystemctl restartdocker

然后再次尝试:

dockerrun--rm--gpusall nvidia/cuda:12.1-base nvidia-smi

如果能看到 GPU 信息,说明配置成功。

✅ 说明

  • 系统检测:自动识别你的 Ubuntu/Debian 版本
  • 安装 curl:保证下载仓库文件不出错
  • 添加 NVIDIA Docker 仓库:让 apt 可以找到 nvidia-docker2
  • 安装 nvidia-docker2 并重启 Docker:启用 GPU 支持
  • 测试 GPU:nvidia-smi 输出 GPU 信息就表示成功

❗ 问题 5(核心):nvml 权限错误

nvidia-container-cli: initialization error: nvml error: insufficient permissions

如果你不是 root 用户,需要加用户组:

sudousermod-aGdocker$USERsudousermod-aGvideo$USER

然后 注销并重新登录。

五、GPU 问题核心分析

Step 1. Docker runtime 未配置

dockerinfo|grepRuntimes

输出:

Runtimes: runc

❌ 说明没有 nvidia ,进行下一步配置

Step 2. 正确配置 NVIDIA runtime

编辑:

sudonano/etc/docker/daemon.json# 写入:{"runtimes":{"nvidia":{"path":"nvidia-container-runtime","runtimeArgs":[]}}}

Step 3. 重启 Docker

sudosystemctl restartdocker

Step 4. 测试 GPU

dockerrun--rm--gpusall nvidia/cuda:12.1-base nvidia-smi
http://www.cnnetsun.cn/news/1824726.html

相关文章:

  • 教你用笔记本部署的大模型,30 分钟搭一个安全又灵活的私有 AI 助手
  • ESP32轻量级Sonos本地控制库:UPnP协议嵌入式实现
  • Android音频系统调试指南:用adb命令快速定位audio_policy配置问题
  • Navicat16/17 Mac版无限重置试用期终极指南:免费使用完整功能
  • PPTAgent终极指南:3分钟从文档到专业演示文稿的AI革命
  • Android集成超轻量级OCR引擎:4.7M模型实现毫秒级离线文字识别
  • 专业的南昌GEO优化推荐
  • 为什么你的RAG系统缓存命中率不足31%?——基于12家头部AI厂商的缓存拓扑审计报告
  • Seed-Coder-8B-Base快速部署:在消费级显卡上运行代码生成模型
  • 解锁Mac文件预览新境界:QuickLook插件完全指南
  • 避坑指南:Dify集成Ollama本地模型时,如何解决‘unable to load model’等常见报错(以Qwen3-Embedding为例)
  • SiameseUniNLU惊艳效果展示:中文会议纪要自动提炼‘决议事项-责任人-截止时间’结构化清单
  • Geo-SAM终极指南:如何在QGIS中实现秒级地理空间AI图像分割
  • 茉莉花插件终极指南:如何让Zotero中文文献管理效率提升3倍
  • Windows 11 上 Docker + RAGFlow + Ollama 搭建个人知识库,我踩过的坑都帮你填平了
  • 【2026年最新600套毕设项目分享】微信小程序的小说阅读器(30028)
  • 如何用Python轻松下载B站4K大会员视频?这个开源工具让你告别在线观看限制
  • 3步彻底卸载OneDrive:Windows 10终极清理指南
  • Golang的车载应用场景
  • Python数据库操作实战
  • Isaac Sim 8 灯光参数全解析:从零到一的实战调光指南
  • 三步搞定QQ空间历史说说完整备份:GetQzonehistory终极指南
  • 若依与BladeX框架下用户组织架构同步的实践指南
  • 用Chord视频分析工具做影视剪辑:快速定位特定场景与人物出场时间
  • QT桌面应用集成Phi-4-mini-reasoning:开发智能配置向导与帮助系统
  • 如何永久保存QQ空间青春记忆?GetQzonehistory开源工具完整备份指南
  • 怎样高效使用PCB分析工具:硬件工程师的实战指南
  • 数字文旅必备工具:Asian Beauty Z-Image Turbo生成古风虚拟导游全流程
  • 鸿蒙Flutter三方库适配:Flutter Markdown适配实战-鸿蒙平台的Markdown渲染解决方案
  • 博导建议:研究生至少要有一篇 “保底” 论文