신경망을 훈련하기 위해 TensorFlow를 사용하고 있습니다. 이것이 GradientDescentOptimizer
를 초기화하는 방법입니다.
init = tf.initialize_all_variables() sess = tf.Session() sess.run(init) mse = tf. reduce_mean(tf.square(out - out_)) train_step = tf.train.GradientDescentOptimizer(0.3).minimize(mse)
여기서 문제는 설정 방법을 모른다는 것입니다. 학습률에 대한 업데이트 규칙 또는 이에 대한 감쇠 값입니다.
여기서 적응 학습률을 어떻게 사용할 수 있나요?