Состояния убеждений в POMDP для обучения с подкреплением (RL)

Поскольку в проблемах POMDP агент не имеет доступа к истинному базовому состоянию, как описано здесь: