Розбалансування швидкості навчання actor і critic

Нестабільність або неточність оцінки critic

Відсутність сигналу винагороди для навчання

Надмірна variance градієнтів через стохастичність політики