開発のヒホ

chainerでは、複数のGPUを使って並列にlossを求めて逆伝搬し、勾配を足し合わせてからupdateする方法がサポートされている。 Using GPU(s) in Chainer — Chainer 1.15.0.1 documentation コードは以下のようになる。 model_0.cleargrads() model_1.cleargrads() loss_0 = model_0(x0, t0) loss_1 = model_1(x1, t1) loss_0…