DDP: out of CUDA memory


![image](https://user-images.githubusercontent.com/32443088/143686289-61215c83-e863-4b68-aaca-0854aa4b5109.png)

我是用了5,6两张卡，发现多次报错 out of CUDA memory.
后来我发现两张卡上现存分布是不均衡的，导致一张卡很容易爆炸
![KP2GB%J$RME))TT6W0{UN7Y](https://user-images.githubusercontent.com/32443088/143686334-35b28931-5e5c-4b9d-8195-b6c04252ec71.png)
。请问原因可能是什么？