Baseten 推出 Base Labs 开源研究实验室
今天我们推出了 Base Labs,这是 Baseten 旗下的一个研究实验室。我们的使命是让开源尽可能有用,我们的一条规则是毫无例外公开发布所有内容,包括失败的内容。
就在不久之前,我还认为让全世界都用上开放模型的方式,是逐家公司训练模型。基于这个判断,我和 @mudithj、@maxkirkby 共同创立了 @parsedlabs,之后 @baseten 收购了我们,过去一年我们一直在运营他们的训练团队,逐个为客户训练模型。
每一次合作都让我们对模型如何学习、遗忘、专业化和降低成本有了新的认识,但这些知识几乎都没有对外分享过。遗憾的是,大体来说这就是行业现状:最懂训练的人最没有发言自由。
澄清一点,我不认为闭源实验室是这里的反派。他们先一步获得新能力,这给了我们其他人时间,在这些技术普及前做好准备,而且是他们在付费探索究竟什么是可能的。但我非常确信,他们唯一真正的优势是数据和规模,他们的激励机制完全指向前沿探索。如果你要做的是在本季度末拿出最好的模型,你就没法慢下来,公开研究这些模型的学习原理。必须得有没这种压力的人来做这件事,而这样的人非常少。
于是就有了 Base Labs。我们的使命是让开源尽可能有用,我们的一条规则是毫无例外公开发布所有内容,包括失败的内容。我们首个研究课题是持续学习,我逐渐意识到这个名称下其实包裹着多个不同问题。
我们还在研究开放强化学习环境和开放模型目前需要但无法获取的数据,因为我们必须像所有人讨论聚合算力那样,大力聚合数据。此外还有一堆真正让我兴奋的其他项目,比如一个可以在开放部署之上运行的安全栈,以及性能研究,让所有人都能廉价部署这些模型。
我仍然认为开放和闭源可以共存,那会是一个更美好的世界。但共存不是免费的,总得有人实实在在做事,这基本上就是我夜不能寐的原因。
我们现在正在招聘研究员、工程师和奖学金项目成员。来帮忙实现这份使命吧!
本文由 AI 翻译自英文原帖,技术名词保留英文。
查看 X 原帖