本文译自彭博科技 6月17日刊发的著述《Google DeepMind Shifts From Research Lab to AI Product Factory》。作家:Julia Love和Mark Bergen。翻译:智能超参数。#深度好文筹商#
五月中旬的一周内,两家公司秘书推出基于谷歌首创性冲破的东说念主工智能家具。5月13日,OpenAI 公司推出了新版救济其广受接待的聊天机器东说念主 ChatGPT 的模子,该模子依赖于谷歌在2017年一篇决策论文中初度态状的工夫——Transformer。第二天,谷歌秘书推出 AI Overviews,这是一种基于探讨工夫的家具,对一些搜索提供回复。
然则,Overviews 的发布并不堪利。该功能启动提供一些令东说念主难过的建议,比如建议东说念主们吃石头和在披萨上涂胶水。接下来的一周,谷歌实施了新的真贵法子,部分态状了这些法子何如堕落 Overviews 不着重将讥嘲本色呈现为事实。这对一个在 AI 领域急需奏效的公司来说是一个厄运的透露。好多科技界东说念主士一经觉得像 ChatGPT 这样的家具有可能摒除对谷歌搜索的需求,而搜索业务占谷歌收入的大部分,因此其锐利关系显得尤为紧迫。
此次诞妄发生在谷歌进行 AI 要紧主义调度一年多后。面临 OpenAI 和其他竞争敌手的浩瀚压力,谷歌在 2023 年 4 月示意,它将把两个精英 AI 团队——Google Brain 和 DeepMind——消失成一个被称为 Google DeepMind 的 AI“超等单元”。既栽种谷歌在营业 AI 家具方面的功绩记录,又保抓公司在更具基础性的决策方面的历史上风。
据与约二十名了解公司里面运作情况的东说念主士进行的访谈(其中大多数条款匿名),这项使命仍在进行中。
这两个实验室历久以来一直孤苦运作。Google Brain 是一个决策东说念主员在宽松监督下追求厚谊花式标地点。总部位于伦敦的 DeepMind,由 AI 领域的有名东说念主士 Demis Hassabis 鸠合创立,可能是从上至下且高度守秘的。Hassabis 接任消失部门的首席执行官,大大加多了他在公司内的影响力。
当年一年中,包括谷歌鸠合创始东说念主 Sergey Brin 在内的一些谷歌职工赶赴伦敦拜访他。Hassabis 的作事糊口主要聚会在决策上,但他的新使命将不能幸免地更多地关爱营业化。谷歌欧洲、中东和非洲的营业附近 Matt Brittin 已启动径直与 Hassabis 的单元相助。以至公司里面有传言称,该小组最终可能会径直推披缁具。
5 月,该实验室发布了新版块的AlphaFold,这是一种斟酌卵白质结构的里程碑用具。Hassabis 觉得它可能发展成为一个价值 1000 亿好意思元的业务,但谷歌里面有些东说念主质疑他是否应该参加如斯多的时期在这个花式上。
据两位知情东说念主士涌现,该单元的主要要点是 Gemini,这是谷歌的旗舰 AI 模子。同期,里面东说念主士示意,他们在该模子上的进展显贵。AI 部门的决策东说念主员告诉共事,他们为在 Gemini 上取得的进展感到自重,举例其“凹凸文窗口”,即系和解次不错分析的信息量。对于一个领有大皆数据算作关节竞争上风的公司来说,这卓绝灵验。
将这两个部门消失起来,透露了 Hassabis 态状的谷歌的另一个最大上风:领有大皆从事基础 AI 决策的优秀决策东说念主员。然则,这也有可能破损谷歌在基础 AI 决策中取得奏效的文化。
据了解实验室情况的东说念主士涌现,一些决策东说念主员对不得不死守他们觉得来自表层的阶梯图感到颓靡。在消失之前,该实验室的一些最猛进展来自非认真地聚集在沿途的微型团队,东说念主们有一种嗅觉,这种全员勤苦留住的实验空间更少。
据两位了解公司情况的东说念主士称,压力一经导致一种倦怠感。Gemini 也接连碰到问题。其发布因生成历史不准确的图像而受到影响,包括至少一张将有色东说念主种形容为二战中的德国士兵的图片。Hassabis 示意,他正在学习更多对于推披缁具的常识,而谷歌的家具团队也在搪塞生成式 AI 带来的新挑战,这种工夫在公众手中可能透走漏不寻常的行为。他说:“这不同于等闲工夫家具。基础工夫透露不同,具有某些优舛错。是以我觉得这对咱们所有这个词东说念主来说皆是一个意旨的学习弧线。”
谷歌最终领有两个顶级 AI 实验室,这是公司历史上一个愈加目田放任期间的遗址,那时它还领有两个音乐订阅工作、两个风险投资集团和两个出动操作系统。Brain 来自公司的前沿工夫小组 X;它在 2012 年被纳入谷歌。Brain 的鸠合创始东说念主 Andrew Ng 当前是亚马逊公司董事会的成员,他说谷歌将该团队的使命融入到流行的家具中。“Google Brain 相等实用,与相助伙伴相助推披缁具,为母公司创造收入,”Ng 说。
2014年,谷歌收购了 DeepMind,这是一家通过开导大概玩复旧视频游戏的设施在 AI 领域取得诱东说念主进展的初创公司。在接下来的大部分时期里,谷歌教唆层觉得,领有孤苦的实验室是有意的,不错激勉创造力并测试不同的问题处置方法。知情东说念主士称,DeepMind 在距离加利福尼亚州山景城谷歌总部向上 5000 英里的地点运作,保抓着一种孤苦精神。也曾是少年外洋象棋冠军的 Hassabis 似乎对赢得比赛情有独钟。2016年,DeepMind 的一个模子打败了寰球顶级围棋选手之一。为 Hassabis 使命的东说念主说,他会公开地想考赢得诺贝尔奖的事情。
当谷歌在2015年重组为 Alphabet 集团时,DeepMind 被建设为一个孤苦但完满由 Alphabet 领有的子公司。过后看来,这种结构注定会引发不悦。DeepMind 决策东说念主员不错完满了解 Brain 的花式和代码,他们不错目田地进入谷歌在山景城的办公室。然则,这种绽开性并不是双向的:一位前 Brain 决策东说念主员回忆说,在一次赶赴伦敦的旅行中,他无法进入 DeepMind 的办公室,只可在咖啡馆使命。
据了解公司运作的三位东说念主士称,一些 DeepMind 的出书物与 Brain 正在决策的花式有雷同之处,这引发了 Brain 决策东说念主员的进一步疑心。据一位知情东说念主士涌现,一度一些 Brain 决策东说念主员试图扼制 DeepMind 职工看望他们的使命效果,但 Brain 的教唆层敦促决策东说念主员不要破损实验室的绽开文化。Brain 和 DeepMind 决策东说念主员在会议上碰头时可能会感到难过。
DeepMind 收购几年后,Hassabis 和教唆 Google Brain 的 Jeff Dean 会面,试图加强双方的相关。但这些小组延续在很猛进程上孤苦运作,在消失前各自决策大型言语模子。Hassabis 说,Google Brain 和 DeepMind 之间的竞争并不比每个实验室里面的竞争更热烈。“大部分是相助精神和相互尊重,”他说。
然后,OpenAI 在2020年发布了一篇态状其 GPT-3 模子的论文,促使谷歌再行评估其业务运作方式。要是一个资源较少的初创公司不错期骗谷歌我方的决策超前发展,也许公司需要一种更好的使命方式。
据几位了解其运营情况的东说念主士称,一些 Brain 决策东说念主员得出论断,他们我方的实验室需要一个明确的职权中心。任何 AI 使命的主要条款之一是看望缠绵才气,每个 Brain 决策东说念主员皆会得回分拨,这个经过有东说念主将其比作在嘉年华上分发游戏门票。
像 GPT-3 或 Gemini 这样鸿沟的模子需要远远向上任何单个决策东说念主员所能得回的缠绵才气,因此构建一个模子需要一组东说念主鸠合他们的积分。这在竞争热烈且频频自夸的学者中是一个劳作的提议。据两位了解公司的东说念主士称,Google Brain 试图建议另一种分拨看望权限的系统的尝试堕入了官僚主义。
当 Alphabet 首席执行官 Sundar Pichai 在2023年4月秘书消失时,好多谷歌学友对这一决定示意援助,并想知说念为什么花了这样万古期。新单元首个主要家具 Gemini 的名字灵感来自希腊传说中一双双胞胎在天上和会的故事。
现为风险投资公司 Section 32 首席执行官的前 Alphabet 高管 Andrew Harrison 说,此次重组是合适逻辑的。“他们将所有这个词东西皆整合到一个旗号下,一套动机之下,这相等智谋。我觉得它让公司表里的东说念主皆了了地知说念他们的使命是什么,”他说。“而他们的使命即是将下一代生成式 AI 工夫交到他们的客户手中。”
据纯属公司运营情况的东说念主士称,实验室的消失“极度地顺利和兴隆”。Hassabis 说:“共同之处比不同之处要多得多。”然则,双方的一些职工示意,纯决策正在受到漠视。据一位前职工说,在消失之后,一些专注于 AI 科学应用的团队驰念他们的花式会被取消。
据前职工和其他了解实验室情况的东说念主士称,诚然莫得东说念主得到他们想要的那么多缠绵资源,但从事纯决策的团队所得到的资源愈加垂死。但 DeepMind 一直需要在经过考据的科学使命和更具探索性的决策之间取得均衡,Sid Jayakumar 是一位 DeepMind 的决策东说念主员,他在 2023 年离开 DeepMind 树立了初创公司 Finster AI。他说:“这种垂死关系将长期存在。”
对过于强调营业化的不尽是对当年两年里面月旦的镜像,那时谷歌在将生成式 AI 推向消耗者方面遇到贫穷。据了解实验室情况的东说念主士称,想要推披缁具的决策东说念主员辞职创业,因为他们觉得公司进展太慢。据了解实验室情况的东说念主士称,Brain 决策东说念主员也对失去品牌感到矜恤,即使一些东说念主接待更强有劲的教唆远景。
在一定进程上,该公司正在尝试用财富来处置其士气问题:据几位了解情况的东说念主士称,顶级谷歌决策东说念主员每年的总薪酬达到数百万好意思元。
Hassabis 也觉得从事基础科学的决策东说念主员应将营业发展视为资产。他说,他甘愿担任新扮装的部分原因是,他敬佩 AI 模子正变得愈加通用,开导营业家具会产生对股东决策灵验的工夫。“谷歌无处不在的消耗者家具,提供了一个特有的测试场,用于其科学实验。咱们从数百万用户那儿得回反映,”Hassabis 说。“昭着,这不错极地面栽种家具的质料,但也不错栽种你的决策。”