我们有一个贝尔曼方程,首先我们想知道是否存在一个满足该方程的值函数,其次我们想知道这种解的性质。为了回答这个问题,我们将定义一个映射,它将一个函数映射到另一个函数,而该映射的一个不动点将是一个解。我们讨论的映射是函数集上的映射,这有点抽象。所以今天我们将看看数学回顾。
所以首先我们考虑一个集合,
,对我们来说,它将与描述集合中任意两点之间的某种距离有关。我们将使用度量的概念。
度量是一个函数
,它具有非负性、
、对称性、
,并满足三角不等式,
。
一个常见的度量是欧几里得距离,
,另一个是
。
空间,是具有一些一般属性和结构的对象集合
我们可能对度量空间感兴趣,即具有度量空间的,例如,
,其中
是所有有界有理函数的集合,而
是某个距离函数。一旦我们有了度量空间,我们就可以讨论收敛性和连续性。
一个数列,
,收敛到
,
,如果
使得
对所有
成立。
一个数列,
,被称为柯西序列,如果
对所有
成立。
问题:每个柯西序列都会收敛吗?
度量空间,
是完备的,如果每个柯西序列都收敛。
是完备的。
不是完备的。证明:令
,所以
是柯西序列,但它不会收敛到我们集合
中的任何点。
是完备的。所有闭集都是完备的吗?完备空间的闭子空间是完备的。
是完备的。
一个映射
在度量空间
上是 **压缩映射**,如果
使得
,有时我们写
而不是
,
这意味着我们集合中的任意两点
,在映射后,两点之间的距离会缩短。
在
上是一个压缩映射,
现在我们陈述 **压缩映射定理**。
如果
是完备的并且
是压缩映射,那么
使得
,
我们将在后面为一般度量空间证明这个定理。但是,我们必须记住,证明中需要空间是完备的。
现在让我们看看验证映射是否为压缩映射的标准。
对于
以及
,假设
满足以下两个条件
- (M, 单调性条件)
以及
,并且
,如果
那么
,
- (D, 折扣条件)
,对于
,
.
那么
是一个压缩映射。