我们有一个贝尔曼方程,首先我们想知道是否存在一个满足该方程的值函数,其次我们想知道这种解的性质。为了回答这个问题,我们将定义一个映射,它将一个函数映射到另一个函数,而该映射的一个不动点将是一个解。我们讨论的映射是函数集上的映射,这有点抽象。所以今天我们将看看数学回顾。
所以首先我们考虑一个集合,,对我们来说,它将与描述集合中任意两点之间的某种距离有关。我们将使用度量的概念。
度量是一个函数,它具有非负性、、对称性、,并满足三角不等式,。
一个常见的度量是欧几里得距离,,另一个是。
空间,是具有一些一般属性和结构的对象集合
我们可能对度量空间感兴趣,即具有度量空间的,例如,,其中 是所有有界有理函数的集合,而 是某个距离函数。一旦我们有了度量空间,我们就可以讨论收敛性和连续性。
一个数列,,收敛到,,如果 使得 对所有 成立。
一个数列,,被称为柯西序列,如果 对所有 成立。
问题:每个柯西序列都会收敛吗?
度量空间, 是完备的,如果每个柯西序列都收敛。
- 是完备的。
- 不是完备的。证明:令,所以 是柯西序列,但它不会收敛到我们集合 中的任何点。
- 是完备的。所有闭集都是完备的吗?完备空间的闭子空间是完备的。
- 是完备的。
一个映射 在度量空间 上是 **压缩映射**,如果 使得,有时我们写 而不是 ,
这意味着我们集合中的任意两点,在映射后,两点之间的距离会缩短。
- 在 上是一个压缩映射,
现在我们陈述 **压缩映射定理**。
如果 是完备的并且 是压缩映射,那么 使得 ,
我们将在后面为一般度量空间证明这个定理。但是,我们必须记住,证明中需要空间是完备的。
现在让我们看看验证映射是否为压缩映射的标准。
对于 以及 ,假设 满足以下两个条件
- (M, 单调性条件) 以及 ,并且 ,如果 那么 ,
- (D, 折扣条件) ,对于 ,.
那么 是一个压缩映射。