本期博客带大家进行内核开发，首先进行环境的配置和最基本的HelloWorld的输出，总体不难，但是雷点较多，注意小心。

本期博客介绍一下探索策略和分布式学习，对于机器人控制其实学到DDPG就足够了，但是为了跟上时代的潮流我会把TD3这种非常新的确定性梯度网络写完，之后有新发现就再挑挑拣拣的更新

本期博客介绍一下鲁棒控制、非线性控制和一些智能控制算法，本期难度较高建议掌握前面部分再阅读

本期博客介绍一些现代的控制方法, 由于身体限制，这一章就说优化控制和模型控制了，至于鲁棒控制或者智能控制啥的等下一章再写。注意，本章难度较高，建议先学第一部分再学第二部分，否则会看不懂！

有段时间没有更新博客了，放了这么久的鸽子也得说些什么，本期博客即是对最近的安排与项目进行一下总结，也需要对自己的2025年进行一下规划

本期博客结合了MIT的欠驱动系统控制课程的教材进行说明，通过现代控制理论进行分析各种系统，从而实现自己稳定收敛的系统

本期博客介绍没说完的无模型强化学习并开展探索学习的章节，本期介绍DDPG与Rainbow模型

本期博客使用pytorch实现无模型强化学习，结合第一期内容的数学公式，可以快速理解代码。

本期博客介绍一些深度强化学习网络，通过数学概念来对强化学习进行深入理解

本期博客介绍一些基本常用的图像处理算法，通过光学引导着陆的例程进行测试，当然此法也曾应用于空间站对接中。