在学习最优控制理论的过程中，习题练习是非常重要的一部分。通过解决各种类型的习题，我们可以更好地理解理论概念，并将其应用到实际问题中去。下面是一些精选的习题及其参考答案，供学习者参考。
习题一：线性系统的最优控制
给定一个线性系统 \(\dot{x}(t) = Ax(t) + Bu(t)\)，其中 \(A\) 和 \(B\) 是已知矩阵，\(x(t)\) 是状态向量，\(u(t)\) 是控制输入。目标是最小化性能指标 \(J = \int_{0}^{T} [x^T(t)Qx(t) + u^T(t)Ru(t)]dt\)，其中 \(Q\) 和 \(R\) 是正定矩阵。
解法：
1. 构造哈密顿函数 \(H(x, u, p) = x^T Q x + u^T R u + p^T(Ax + Bu)\)，其中 \(p(t)\) 是伴随状态。
2. 对 \(u\) 求偏导数并令其等于零，得到最优控制 \(u^(t) = -R^{-1}B^Tp(t)\)。
3. 伴随方程为 \(\dot{p}(t) = -\frac{\partial H}{\partial x} = -Qx - A^Tp\)。
4. 结合状态方程和伴随方程，求解出 \(x(t)\) 和 \(p(t)\)。
参考答案：
最优控制 \(u^(t) = -R^{-1}B^Tp(t)\)，伴随方程为 \(\dot{p}(t) = -Qx - A^Tp\)。
习题二：非线性系统的最优控制
考虑一个非线性系统 \(\dot{x}(t) = f(x(t), u(t))\)，其中 \(f\) 是非线性函数。目标是最小化性能指标 \(J = \int_{0}^{T} L(x(t), u(t))dt\)，其中 \(L\) 是代价函数。
解法：
1. 构造哈密顿函数 \(H(x, u, p) = L(x, u) + p^Tf(x, u)\)。
2. 对 \(u\) 求偏导数并令其等于零，得到最优控制 \(u^(t)\) 的表达式。
3. 伴随方程为 \(\dot{p}(t) = -\frac{\partial H}{\partial x}\)。
4. 结合状态方程和伴随方程，求解出 \(x(t)\) 和 \(p(t)\)。
参考答案：
最优控制 \(u^(t)\) 满足 \(\frac{\partial H}{\partial u} = 0\)，伴随方程为 \(\dot{p}(t) = -\frac{\partial H}{\partial x}\)。
习题三：离散时间系统的最优控制
对于离散时间系统 \(x(k+1) = f(x(k), u(k))\)，目标是最小化性能指标 \(J = \sum_{k=0}^{N-1} L(x(k), u(k))\)。
解法：
1. 构造离散哈密顿函数 \(H(x, u, p) = L(x, u) + p^Tf(x, u)\)。
2. 对 \(u\) 求偏导数并令其等于零，得到最优控制 \(u^(k)\) 的表达式。
3. 伴随方程为 \(p(k) = \frac{\partial H}{\partial x}\)。
4. 结合状态方程和伴随方程，求解出 \(x(k)\) 和 \(p(k)\)。
参考答案：
最优控制 \(u^(k)\) 满足 \(\frac{\partial H}{\partial u} = 0\)，伴随方程为 \(p(k) = \frac{\partial H}{\partial x}\)。
以上是几个典型的最优控制习题及其参考答案。希望这些题目能够帮助大家加深对最优控制理论的理解。在实际应用中，还需要结合具体的工程背景进行深入分析和计算。
