庄田 拓実

Precision is the difference between surgeon and butcher.

学習をより速く、より賢く進めるための方法の一つに、モメンタムという仕組みがある。これは、過去の進み具合を考慮に入れて、次にどう進むべきかを判断する方法。これにより、勾配が小さくなってしまう局面でもスムーズに学習を進められ、勾配が不安定な方向に揺れ動くことを防ぐ。