, то она придет в новое состояние в , и последующие управления должны выбираться оптимальными относительно состояния . Последнее, означает, что этих управлениях максимизируется величина , то есть показатель эффективности на последующих до конца процесса шагах . Обозначим через .
, то она придет в новое состояние в 
, и последующие управления 
должны выбираться оптимальными относительно состояния 
. Последнее, означает, что этих управлениях максимизируется величина 
, то есть показатель эффективности на последующих до конца процесса шагах 
. Обозначим через 
.