イテレーション・エポック覚えうた

１エポックはデータ全体を モデルが１周学習 イテレーションは 重みを１回更新 イテレーションは パラメータを１回更新 ミニバッチは小さい バッチサイズで小分け学習 イテレーションは 繰り返し数を示す 総イテレーション数は エポック数×データ数 ÷バッチサイズ エポックはモデルが データを１周学習 イテレーションは重みを １回更新する単位 ミニバッチ１回分で イテレーション１回 エポックはイテレーション 重ねたまとまり オンライン学習は データが逐次到着 １サンプルずつ更新 小さなバッチで継続更新 リアルタイム向き メモリ少なくて軽量 非定常データに強い バッチ学習はまとめて更新