显卡错分，pod注解中的gpu-uuid与进入容器使用nvidia-smi查询出来的不同

[zhegemingzimeibanquan]

What happened:
在使用gpuSchedulerPolicy=binpack策略时，显卡错分，pod注解中的gpu-uuid与进入容器使用nvidia-smi查询出来的不同

What you expected to happen:
每个pod分配到正确的显卡上

How to reproduce it (as minimally and precisely as possible):
scheduler.defaultSchedulerPolicy.gpuSchedulerPolicy = binpack
同时调度7-10个能力

H800的显卡，每张只有80G显存，理论上不可能分到超过80G

Environment:

• HAMi version: 2.5.0
• nvidia driver or other AI device driver version:
• Docker version from docker version： containerd 1.6.33
• Kernel version from uname -a： centos 7.9

[zhegemingzimeibanquan]

kube-scheduler的版本为1.20.14

[Mrxuexi]

在 hami volcano 遇到了这里的错分问题，看起来是 kubelet 向 DP allocate gpu 时，无法传递 allocate 是来自于哪个 pod 导致的。
但这个问题似乎并不存在 hami 中，因为 hami 调度加入了节点锁，控制了 pod 的调度串行。

[ouyangluwei163]

k8s的版本是多少？

[zhegemingzimeibanquan]

k8s的版本是多少？

1.20.14

[zhegemingzimeibanquan]

https://github.com/Project-HAMi/HAMi/issues/987
这应该是一个问题引起的