Loon是一家致力于该项目的公司，该项目旨在通过使用漂浮在平流层的超压气球来提供互联网连接。我们很少听说这个项目，有些人可能会怀疑它是否仍然与SpaceX有关，SpaceX已经在试验卫星的Starlink互联网服务。Ron部署了一些非常有趣的东西，公司称这是世界上首次部署强化学习航空航天系统。

该公司有一个长期目标，即有效地将气球引导到需要连接的位置。挑战在于，在平流层中导航超压气球有两种选择：向上或向下。导航非常复杂，这个任务非常适合自动化。慵懒的气球随风而动。

Loon说，公司内部的一个团队和谷歌AI一直在合作，利用深度强化学习(RL)开发一个更强大的导航系统。RL是一种机器学习，通过交互环境中对自身行为和经验的反馈，使智能体能够通过重复实验进行学习。该公司承认，尚不清楚早期的深度RL是否适合其高空气球。

试验表明，RL用于平流层气球是可行的。今天的导航系统面临着一个复杂的任务，这个任务是通过一个算法来解决的，这个算法是通过计算机模拟气球导航来学习的。RL系统前面的任务非常复杂，因为气球通常缺乏理想机动所需的动力。

这意味着频繁的决策机会会跨越很长的规划期。尽管复杂，强化学习已经承诺帮助龙操纵气球比目前广泛使用的人工设计算法更有效。RL使导航系统能够快速管理新飞机，并管理Loon机队的不同用途。到目前为止，RL控制器已经驾驶一组气球飞行了近3000个飞行小时，该公司称之为出色的结果。