宇宙链 宇宙链
Ctrl+D收藏宇宙链

a16z:生成式AI在游戏领域的机会(附市场生态&具体公司)

作者:

时间:1900/1/1 0:00:00

注:A16Z最近写了一篇很有意思的文章,谈到他们认为的生成式AI和游戏结合在一起的机会在哪,笔者翻译后对部分内容进行了注解。文章第一部分已经发出,见:A16Z|生成式AI在游戏领域的机会,本篇为第二部分,包括A16Z对游戏+生成式AI领域的市场生态的判断

1.前言

这篇博文有两部分,第一部分发到了之前的文章,详情见:A16Z|生成式AI在游戏领域的机会第二部分是本文对领域的市场生态概述,介绍各个细分市场和各个细分市场的关键公司。

市场生态概述

下图为整体的市场生态情况,描述了A16Z在各个类别中发现的创业公司,在这些具体的项目中,我们看发现了生成式人工智能对游戏的影响,本篇会对每个类别中最有特点的公司和机会进行介绍。

用文本生成平面图像

从文本提示中生成2D图像,已生成式人工智能最为广泛的应用领域之一。诸如Midjourney、StableDiffusion和Dall-E2这样的工具,直接可以将文本描述生成高质量的二维图像,并且它们用在了游戏开发和制作的整个生命周期的多个阶段。

概念艺术

,对过去的方式进行革新甚至是颠覆,创造出全新的造型角色或者概念。

和插画有什么区别?

插画家与游戏的关系更多的是帮其绘制海报、包装封面等。而与影视、游戏开发的工作真正紧密相关的2D艺术工作之一就是我们所说的ConceptArt。

和漫画有什么区别?

ConceptArt跟漫画有很大区别,漫画是日本一个独立的体系,更多服务于热门的轻小说的视觉化。而概念艺术则是服务于游戏,动画,在风格上表现形式上不受限制,创造出一些超前的,或者是完整的一套设定显得极为重要。

俄罗斯副主席:金砖国家正开发一种新型货币:金色财经报道,俄罗斯国家杜马副主席 Alexander Babakov透露,金砖国家正在致力于开发一种新型货币,有关国家可能会在即将举行的南非峰会上提出与该目标相关的想法,相关工作正在进行中,他补充说:“过渡到以本国货币结算是第一步,下一步是在不久将来提供数字或其他形式的全新货币流通。(Watcher.guru)[2023/3/31 13:37:31]

和原画有什么区别?

ConceptArt几乎包括所有的角色,场景塑造,跟原画师不同的地方是,概念设计师必须要主动产出一些更有趣的设计。ConceptArt区别于原画师,在游戏,动画项目中扮演一个仅次于主策划的一个美术向的决策地位,决定这个项目的风格和受众,因此一个以概念艺术家为目标的画师,被一种画风禁锢是不称职的。)

参考资料:公众号一沙君:史上最全!ConceptArt专业解析赛德大学ConceptArt专业YufeiZhang的分享--2020-02-0418:00

生成式人工智能工具,在帮助像游戏设计师这样的角色进行游戏概念探索与灵感启发都比较有用处。这也是生产过程的一个关键环节,例如,某个游戏工作室正在使用上述工具,从根本上加快了他们的概念艺术的开发流程,因为他们只用了一天时间就创造出了一个图像,而在以前,这个过程需要长达3周的时间,但是具体怎么操作呢?

首先,游戏设计师使用Midjourney来探索不同的灵感,并生成他们认为合适的概念图像。之后,图像会被交给专业的概念艺术家,艺术家可以把这些图像组合在一起,然后创建一个相关主题的连贯图像,然后将这些图片输入StableDiffusion,以形成系列的图像变化。

Paxos铸造了与此前销毁数量相同的PAXG,并转入新地址:金色财经报道,据派盾监测,在FTX攻击地址将11,184.18枚PAXG销毁后,Paxos又铸造了相同数量的PAXG并转入新地址。[2022/12/23 22:03:18]

大家会共同讨论这些风格各异的图像风格,然后确定一个,用画笔手动编辑,然后继续重复以上过程,直到大家对作品结果感到满意。在这个阶段,再把这个图像最后上传给StableDiffusion,创造出最后的艺术作品。

2DProductionArt

还有的游戏工作室在尝试使用类似的人工智能工具来制作游戏中的美术作品。例如,下图是来自AlbertBozesan,关于如何使用StableDiffusion来创建游戏中的2D资产的教程。

来源:https://www.youtube.com/watch?v=blXnuyVgA_Y

3DArtwork

3D立体模块,是目前所有现代游戏以及即将到来元宇宙的重要构建源。虚拟世界和游戏关卡,本质上都是一个3D资产的集合,通过不同的组合和放置方法,修改不同的参数来填充游戏环境。而创建3D元素比创建2D平面图更为复杂,涉及多个步骤,包括需要制作3D模型、添加纹理和效果。而对于动画人物来说,还涉及到需要创建一个内部"轮廓",然后在轮廓之上创建动画。

我们发现有不同的初创公司,在寻找有关3D资产创建过程的各个阶段的机会,包括模型创建、角色动画和关卡制作等等。然而,这部分的业务和创新尚在探索中。

三维资产

加密交易平台BitGoldEx完成A轮战略融资:金色财经报道,加密交易平台BitGoldEx宣布完成A轮战略融资,投资方为BAIF Group,该平台将利用这笔新融资扩大业务范围和市场推广,增加自主合约交易产品,并对未来千亿规模的Web 3.0市场进行战略布局。据悉,目前BitGoldEX已在英国、美国、新加坡、日本、伊朗、伊拉克、土耳其等29个国家和地区获得金融服务牌照。(digitaljournal)[2022/10/23 16:36:08]

试图往创建3D模型方向发展的初创公司包括Kaedim、Mirage和Hypothetic。大公司也在关注这个问题,包括Nvidia的Get3D和Autodesk的ClipForge。Kaedim和Get3d专注于图像到3D模型的转换;ClipForge和Mirage专注于文本到3D转换,而Hypothetic公司对文本到3D搜索以及图像到3D都感兴趣。

Kaedim公司:总部在伦敦,主要是通过2D图像生成3维模型。

Mirage:https://www.mirageml.com/

三维纹理

如果在游戏中,三维模型能够用在基于网格的纹理或材料上,能够显得更加真实。例如,一个中世纪的城堡模型上使用不同类型的、带有青苔的风化石,可以完全改变一个场景的外观塑造。这里所说的纹理,包含关于光对材料的反应的元数据,艺术家可以根据文本或图像提示轻松生成纹理,对于提高创作过程中的迭代速度是非常有价值的,像BariumAI、Ponzu和ArmorLab这样的公司正在在这个领域努力。

BariumAI:https://barium.ai/

加密货币交易所Bybit在巴西停止衍生品交易:金色财经报道,加密货币交易所Bybit将于周四停止在巴西提供加密货币期货和期权交易。在一份声明中,Bybit表示,它正在与巴西证券交易委员会(CVM)讨论解决这个问题。该公司补充说,“从目前来看,它正在限制衍生品交易”。

Bybit平台目前显示了一条关于这一变化的警告信息,并建议用户在周四之前“管理他们的头寸或订单”。该公司补充说,该措施“不会意味着对我们的交易者存入的衍生品资产进行任何形式的封锁”。(CoinDesk)[2022/9/15 6:57:11]

Ponzu:https://www.ponzu.gg/

动画

优秀动画的制作,是游戏创作过程中最耗时、最昂贵和最有技巧的部分之一,降低成本和创造更为真实的动画的方法之一,是运用动作捕捉,即给演员或舞者穿上动作捕捉服,用专门的设备,记录他们的动作。

我们发现,当前的生成式人工智能,可以直接从视频中捕捉动画。这就更高效了,因为这样就不需要成本高昂的的动作捕捉设备,也意味着我们可以从现有视频中捕捉动画。

人工智能模型的另一个令人兴奋的点在于,可以用于过滤现有动画,加上新的特效,例如让动画人物一键看起来喝醉了,或者老了,或者高兴。这一领域的公司包括Kinetix、DeepMotion、RADiCAL、MoveAi和Plask。

Kinetix

DeepMotion

RADiCAL

关卡设计和游戏世界构建

游戏创作中最耗时的方面之一是构建游戏世界,生成式人工智能可以用于这项任务。像《Minecraft》、《NoMan'sSky》和《Diablo》这样的游戏,因程序化技术生成关卡而闻名,其中关卡是随机生成的,每次都不一样,但都遵循关卡设计者制定的规则。新的ThenewUnreal5游戏引擎的一大卖点在于,它收集了用于开放世界设计的程序化工具,例如叶子的放置。

以太坊近24小时销毁量4,244ETH:4月30日消息,根据Tokenview链上数据显示,近24小时内,以太坊产出13,473.86枚ETH,销毁4,244.02枚ETH,销毁速度为2.95ETH/min。近24小时ETH销毁榜排名前三分别为:OpenSea:Wyvern Exchange v2(480.05ETH);Uniswap V3:Router2(449.01ETH);Tether USD(190.63ETH)。[2022/4/30 2:42:08]

例如Promethean、MLXAR或Meta的BuilderBot这些公司,都是看到了生成式AI技术的机会。这方面的学术研究已经有一段时间了,包括Minecraft的生成技术或Doom的关卡设计。

为什么生成式人工智能工具具备用于游戏关卡设计的潜力?

因为AI具备创造不同风格的关卡和游戏世界的能力。可以想象一下,通过工具迅速生成一个1920年纸醉金迷时代纽约的游戏世界,或者是神秘的反乌托邦银翼杀手的设计,或者是托尔金派的幻想世界。

下面的概念是由Midjourney使用提示生成的游戏中不同风格关卡:

音频

声音和配乐是游戏体验的重要部分。已经有公司开始使用生成式人工智能生成音频,以补充图形方面的工作。

音效

声音效果是人工智能的另一个有吸引力的领域。已经有学术论文探讨了使用人工智能在电影中生成"foley"的想法,不过目前能够直接在游戏中应用的商业产品还很少。

笔者认为,这只是一个时间问题,因为游戏的互动性使其成为生成式人工智能的一个明显的应用,既可以创造静态的声音效果作为生产的一部分,也可以在运行时创造实时的互动声音效果。

想象一下,如何给玩家角色生成脚步声?大多数传统游戏,会通过少量预先录制的脚步声来解决这个问题:例如,在草地上行走、在砾石上行走、在草地上跑步、在砾石上跑步等等。这些声音的发布和管理都很繁琐,而且运行的时候听起来重复且不真实。

更好的方法是实时通过生成式AI的模拟音效,产生合适且更真实的的音效,通过游戏中的参数,如地面、角色、的重量、步态、鞋类等不同的介质,表现出不同的音效。

音乐

配乐对游戏来说很重要,因为它可以帮助故事主题设定感情基调,就像在电影或电视中一样。但由于游戏持续的时间更长,有的时候能持续数百甚至数千小时,不变的音乐可能很快变得重复或令玩家厌烦。此外,由于游戏具备互动性质,游戏配乐很难完全精确地配合屏幕上随机发生的场景和动作。

二十多年来,自适应音乐一直是游戏配乐的一个受关注的话题,它可以一直追溯到微软的"DirectMusic"系统,用于创建互动音乐。不过,DirectMusic并没有被广泛采用,主要是因为用这种格式作曲难度较大,只有少数游戏,如Monolith的《无人生还》,创造了真正的互动配乐。

现在,有许多创业公司正在尝试创造人工智能生成的音乐,如Soundful、Musico、Harmonai、InfiniteAlbum和Aiva,尽管目前的很多工具,如OpenAI的Jukebox,是高度计算密集型的,还不能实时运行,不过,一旦初始模型成功建立,实时运行将成为可能。

对话&语音

很多公司试图为游戏中的人物创造逼真的声音,当然,由于计算机的语音合成历史悠久,这并不少见,这些公司包括Sonantic、Coqui、ReplicaStudios、Resemble.ai、Readspeaker.ai等等。将生成式人工智能用于语音有多种优势,当然,这个赛道竞争也比较激烈。

即时对话生成。通常情况下,游戏中的语音是由配音演员预先录制的,但这些都仅限于死板的演讲稿。有了生成式人工智能对话,角色可以说任何话,这就意味着可以对玩家的行为做出充分的反应。

角色扮演。许多玩家希望扮演与自己现实世界身份几乎没有相似之处的虚拟人物。然而,只要玩家用自己的声音说话,这种幻想就会破灭,使用与玩家的化身相匹配的生成的声音可以保持这种幻觉。

控制音效。通过AI生成语音时,我们可以控制声音的细微差别,比如它的语调、转折、情感共鸣、音素长度、口音等等。本地化。对话可以翻译成任何语言,并以同样的声音说话,像Deepdub这样的公司专门专注于这个细分市场。

NPC&玩家角色

很多初创公司在研究使用生成式人工智能来创建可以互动的角色,除了游戏中NPC的市场机会,虚拟助理或接待员也具备很大的增长空间。这种努力可以追溯到人工智能研究初期。

很多公司正在建立通用聊天机器人,其中许多是由类似于GPT-3的语言模型驱动的。少数公司专门试图建立以娱乐为目的的聊天机器人,如Replika和Anima,试图建立虚拟陪伴者。电影《Her》中展现的虚拟女友时代,可能很快就会到来。

现在可以看到这些聊天机器人平台的下一个迭代,如Charisma.ai、Convai.com或Inworld.ai,除了可以渲染3D角色提供动力外,还具备情感呈现,工具可以让创造者给这些角色设定目标,可以在融入游戏或在推动情节发展中具有叙事性的地位,而不是纯粹的摆设。

一体化平台

像Runwayml.com这样最成功的生成式人工智能工具,可以将广泛的创作者工具集于一身。不过,目前游戏领域还没有这样的公司,A16Z很想投资具备以下特点的生成式AI游戏解决方案:

涵盖整个制作过程的全套生成式人工智能工具:(代码、资产生成、纹理、音频等)能够与流行的游戏引擎如虚幻和Unity结合使用设计成适合典型的游戏生产的通用场景套件工具总结

对于游戏创作者来说,这是一个令人难以置信的时代。有一天,我们可以想象会出现专门为玩家定制的个性化的游戏,完全基于玩家的需求。

这种场景在科幻小说中已经存在了很长时间--比如《安德的游戏》中的"人工智能智力游戏",或者《星际迷航》中的全息甲板,这些都会在将到来的未来真正实现。

参考资料:https://a16z.com/2022/11/17/the-generative-ai-revolution-in-games/公众号一沙君:史上最全!ConceptArt专业解析赛德大学ConceptArt专业YufeiZhang的分享--2020-02-0418:00

标签:人工智能ARTETHCON人工智能考研考哪些科目NFTART币eth大学QS排名Baby Falcon Doge

以太坊交易所热门资讯
万字长文|为什么美国证监会认为FTX的平台币FTT是证券?

美国证券交易监督委员会在本周三提交的对加密资产交易所FTX联合创始人GaryWang和AlamedaResearch前首席执行官CarolineEllison的诉讼中表示,FTX的平台币FTT作为投资合约进行出售,本身是一种“证券”.

1900/1/1 0:00:00
Curve war 战火重燃,二层协议开卷

近日cvxCRV/CRV降至0.86引发大量关注,旋即Convex也表态将会推出新方案应对。在今年年中Convex的竞争对手Yearn和StakeDAO发布了新版本的veCRVwrapper,从而加剧了竞争.

1900/1/1 0:00:00
回望2022的Web3

12月15号晚8点,由0x499举办了一场圆桌讨论,本期主题是:回望2022的Web3。本期共邀请@sunnyfenghan(Co-FounderofElastosFoundation),?@Richard88488054(Partn.

1900/1/1 0:00:00
万向年度回顾丨应用篇:从 NFT 到创新领域

2022年接近尾声,驻足回看行业这一年的跌宕起伏,无论是技术的突破,应用的创新,还是生态的兴衰,皆成为了行业发展的历史注脚.

1900/1/1 0:00:00
对话:DeFi 新叙事的两类方向

近日,7UpDAO邀请嘉宾Jimmy,iZUMiFinanceCo-Founder开展主题为《回顾2022,展望2023》的内容分享,对2022年DeFi市场发展脉络、未来2-3年细分叙事、宏观预测等话题做了深度解读.

1900/1/1 0:00:00
2022年加密货币最重要的5项监管发展

2022?年注定会被铭记为对crypto充满失望的一年——这一年币价暴跌,许多大公司破产,行业经历了一系列大规模裁员。然而,对于全球crypto监管而言,这却是至关重要的一年.

1900/1/1 0:00:00