Google DeepMind 近日推出了生成式互动环境 AI 模型 Genie,能够透过文字或图片提示产出互动式动画游戏,而无需事先在游戏机制及运作上进行训练。
Google DeepMind 推出生成式互动环境工具Genie作为一间于 2014 年被 Google 收购的人工智能公司,Google DeepMind 于 23 日提交的论文指出,该公司推出了生成式互动环境 AI 模型 「Genie」,能够仅透过文字、图片或草图描述,便生成可控制的互动虚拟环境。
内容写道,Genie 透过大量公开可用的网络影片进行训练,而非依赖于特定游戏或场景的数据,这对游戏开发及创意娱乐等领域,具有更加广泛的应用性:
作为生成式 AI 的全新创举,我们推出了生成式互动环境「Genie」,可以透过单一图片提示产生互动式且可游玩的环境。
什么是 Genie?首先,论文显示,Genie 作为一个基础世界模型,由时空影片分词器 (Spatiotemporal video tokenizer)、自回归动态模型 (Autoregressive dynamics model)、以及简单且可扩展的潜在动作模型 (Scalable latent action model) 的 110 亿个参数共同设定。
因此,他能够在未给予指令的情况下,从网络上的 2D 平台游戏及机器人技术影片中,以无监督方式进行自主训练;同时也能借由我们所提供的外界图像来提示,包括现实世界的照片或草图,生成能够供人们控制并互动的虚拟环境。
Genie 的特别之处在于,他能够从网络影片中学习并重现游戏角色的控制内容,即便这些影片并没有关于正在执行之动作的标签,他也能够从生成的环境中,推断出一致或多种的潜在动作。
同时,Genie 还能够学习并辨识动作中哪些部分是能够被控制的,并借以产生互动式情境。
另外,Genie 仅需一张图片就能创造一个完整的新互动环境,首先采用文字转影像的生成模型 Imagen 2 来产生关键影格 (Keyframe),再透过 Genie 给影像赋予动态效果。
同时,Genie 也能接收从未见过的图片提示,包括现实世界照片或简单草图,使人们能够与原先无法移动的现实事物进行互动。
部落格文章写道:
Genie 的功能让任何人,甚至是儿童,都能够创建并进入可控的模拟环境、或是具互动性的生成世界。
文末最后也提到 Genie 产品的远大目标:
Genie 的应用不仅仅局限于娱乐或创意开发,他还能够作为训练智慧型代理人 (Intelligent Agent) 的优秀测试平台,从而推动了 AI 领域的发展。
据悉,智慧型代理人指的是,一个能够观察周遭环境,并作出行动以达成目标的自主实体,这是目前 AI 研究的一个核心概念及重要目标。
Google、OpenAI 较劲意味浓厚近几个月来,Google 已释出多个生成式 AI 模型的产品或资讯,包括最强 AI 顾问「Gemini」、文字转影片生成工具「Lumiere」、以及关键字图片生成工具「ImageFX」,无不吸引大众目光。
另一方面,OpenAI 的文字转影片工具 Sora 作为首个影片生成产品,也在几周前引发了 AI 狂潮。
然而,近期有关 Gemini 在生成图像时涉及种族争议,造成了母公司 Alphabet 单日 (26) 股价下跌逾 4%。
Google DeepMind 研究部门负责人 Demis Hassabis 在昨日的世界行动通讯大会 (MWC Barcelona 2024) 上则表示:我们已将 Gemini 的该功能下架,将在未来几周内修复问题并恢复。
以上就是什么是 Genie?文字或图片就能创造游戏?的全部内容,望能这篇什么是 Genie?文字或图片就能创造游戏?可以帮助您解决问题,能够解决大家的实际问题是塔岸网一直努力的方向和目标。
FTX 破产事件比金融风暴小说来得更为精彩,在破产重组的过程中,FTX 用户们胆战心惊,深怕拿不回赔款,又担心重组团队的高资费将耗尽所有希望;另一方面,又在加密货币市场回春,各种 SBF 代币大涨,Alameda 投资组合大赚,FTX 会否重启中重燃了信心。现在,故事更接近用户可以顺利获得全面赔偿的...
03-22
专注于推进比特币 Ordinals 上金融应用的 Tap Protocol,于昨日 (9) 透露了最新的空投消息,内容包括 TAP 代币的空投计划、执行过程以及符合资格的生态成员等。不过,仍然重要的代币经济细节则还未释出。一览 Trac 宇宙:Tap protocal、Trac Core 与 Pip...
03-22
EigenLayer TVL 超越 Uniswap 成第五大协议据DeFiLlama所示,以太坊再质押专案 EigenLayer 在重新开放质押后,TVL 已突破 60 亿美元,过去 7 天增幅达 181%。在 2 月 6 日暂时取消每个协议的 20 万枚 ETH 质押上限之前,EigenLayer...
03-22
据CNBC报导,币安创办人赵长鹏的刑事判决被延迟至4 月30 日。西雅图联邦法院发布了有关延期的通知,但其背后的原因尚不明确。赵长鹏原定将就洗钱指控接受判刑,但新的日期已定为4 月底。CNBC 证实了判决延期的消息,指出美国检察官已决定推迟对赵长鹏的判决。在法庭上,赵长鹏的律师提到判决可能会被延迟多...
03-22
瑞波公司(Ripple Labs)周二宣布,该公司已达成收购加密货币信托公司「Standard Custody & Trust Co.」的协议,希望能藉由后者的纽约信托执照,扩大Ripple 在美业务。虽然Ripple 因陷入与美国证管会(SEC)的诉讼风波,长期将拓展海外市场视为首要任务,...
03-22