这是一个创建于 1064 天前的主题，其中的信息可能已经有所发展或是发生改变。
计算资源只有一个 12g 显存的 2080ti ，需要同时训练 50 个卷积神经网络（ 50 个进程），网络结构很简单，两个卷积池化层加两个全连接层，数据集是 cifar10 ，怎样才能充分利用这个 gpu 又不超显存呢
 |
1
ruxuan1306 2021-12-28 22:18:26 +08:00
少进程大批次，多进程小批次，反正积是常量显存大小。
但多进程可能切换代价高，大批次可能随机下降慢。 |
 |
2
ipwx 2021-12-28 22:47:39 +08:00
这里建议你多买几张卡
|
Select Language