Що може спричиняти catastrophic forgetting у reinforcement learning з функціональною апроксимацією?

Question

Answer

Використання  target network

Answer

Нестаціонарний розподіл даних через зміну політики агента

Answer

Обмежений розмір replay buffer, що зменшує різноманітність досвіду

Answer

Відсутність або слабка регуляризація параметрів моделі

Crowdly