OpenAI 2016年AI项目十年后以Astra身份重生

2016 年在 OpenAI 的好日子：一个智能体盯着屏幕像素，移动鼠标，然后在联合航空上订了一张机票。

我们当时把这个项目叫做 World of Bits，放在 OpenAI Universe 框架内。十年之后，Astra 在同一个宇宙里转世了。甚至命名在天文学上都是正确的 😆。

Universe 可能是当时最野心勃勃的 AI 基础设施项目，但我们当时完全没搞懂怎么解决它。一个对“提交”按钮的功能完全没有先验知识的策略，必须通过试错重新发现整个互联网的视觉语言。

现在回想起来，在一堆 Pascal Titan X GPU 上从头开始用强化学习，配合手绘的、每个任务单独设计的“手工”奖励函数，从一开始就注定失败。

要解决计算机使用智能体问题，正确的方法原来是先煮干大海（在你能找到的每个通用任务上爬坡），然后再专门化，回落到屏幕像素和击键层面。或者简单说，就是“专业化通才”。

从中得到的教训：比所有人领先一步，你是开拓者。领先三步，你是预言家。领先五步，你是殉道者。

恭喜你，GPT-6！这次那张联合航空机票终于靠谱地订好了。当年那个 2016 年的实习生，现在心里乐开了花。