Exploration & Exploitation Trade-Off

강화 학습 알고리즘은 학습을 위한 데이터가 에이전트가 어떤 행동을 하느냐에 따라 달라진다.

 

따라서 강화학습 알고리즘은 데이터를 잘 수집하는 문제와 알고리즘을 잘 업데이트 하는 문제를 모두 고려해야 한다.

 

이때 Exploration and Expoitation Trade-off문제가 발생한다.

 

Exploration : 학습을 위해 수집하는 Sample의 다양성을 위해 모험적인 Action을 취하는것 = 미래의 이익을 최대화

Exploitaiton : 최적의 Action을 취하는것 = 현재의 이익을 최대