跳转到内容
彼岸论坛
欢迎抵达彼岸 彼岸花开 此处谁在 -彼岸论坛

[NVIDIA] NVIDIA 消费级显卡有没有免费靠谱的多个容器共享的方案?


小天管理

已推荐帖子

假设在一个 k8s 集群中每一个节点有 4 张 4090, 这些显卡可以分配给 Pod ,但目前一个 Pod 独占整数张 4090.

想要的效果是:2 个(or 多个) Pod 可以同时共享一张显卡。

看了一下 NVIDIA 官方的方案:

  1. MIG(把物理显卡划分成 7 个 GPU 实例), 缺点是 : 只能划分 7 个实例,且只有例如 blackwell 等架构显卡才能用。
  2. vGPU(有分时方案和 MIG 方案),缺点是不免费,且一样挑显卡。

需求是:

  • 支持同一张显卡在同一时间被多个容器使用
  • 在消费级显卡上可用
  • 免费
  • 有在比较大规模集群上稳定跑过

请问站内有无大佬有相关的实践/思路/方案?

意见的链接
分享到其他网站

加入讨论

您现在可以发表并稍后注册. 如果您是会员,请现在登录来参与讨论.

游客
回复主题...

×   粘贴为富文本.   粘贴为纯文本来代替

  只允许使用75个表情符号.

×   您的链接已自动嵌入.   显示为链接来代替

×   您之前的内容已恢复.   清除编辑器

×   您无法直接粘贴图片.要从网址上传或插入图片.

×
×
  • 创建新的...