月亮链 月亮链
Ctrl+D收藏月亮链

人工智能:a16z:生成式 AI 与游戏领域结合的市场生态概述_ART

作者:

时间:1900/1/1 0:00:00

本文将介绍a16z在该赛道的投资布局。

A16Z最近写了一篇很有意思的文章,谈到他们认为的生成式AI和游戏结合在一起的机会在哪,笔者翻译后对部分内容进行了注解。文章第一部分已经发出,见:《a16z:生成式AI在游戏领域的观察与预测》,本篇为第二部分,包括A16Z对游戏+生成式AI领域的市场生态的判断。

市场生态概述

下图为整体的市场生态情况,描述了A16Z在各个类别中发现的创业公司,在这些具体的项目中,我们看发现了生成式人工智能对游戏的影响,本篇会对每个类别中最有特点的公司和机会进行介绍。

用文本生成平面图像

从文本提示中生成2D图像,已生成式人工智能最为广泛的应用领域之一。诸如Midjourney、StableDiffusion和Dall-E2这样的工具,直接可以将文本描述生成高质量的二维图像,并且它们用在了游戏开发和制作的整个生命周期的多个阶段。

概念艺术

,对过去的方式进行革新甚至是颠覆,创造出全新的造型角色或者概念。和插画有什么区别?插画家与游戏的关系更多的是帮其绘制海报、包装封面等。而与影视、游戏开发的工作真正紧密相关的2D艺术工作之一就是我们所说的ConceptArt。和漫画有什么区别?ConceptArt跟漫画有很大区别,漫画是日本一个独立的体系,更多服务于热门的轻小说的视觉化。而概念艺术则是服务于游戏,动画,在风格上表现形式上不受限制,创造出一些超前的,或者是完整的一套设定显得极为重要。和原画有什么区别?ConceptArt几乎包括所有的角色,场景塑造,跟原画师不同的地方是,概念设计师必须要主动产出一些更有趣的设计。

a16z政策负责人:美SEC应与加密货币公司合作:金色财经报道,a16z政策负责人Brian Quintenz发文表示,美国证券交易委员会(SEC)今天的行动延续了不负责任的逐级监管模式,伤害了企业家、投资者和消费者,同时有可能扼杀创新并将负责任的公司从美国赶走。Coinbase十多年来一直是一个负责任的行业参与者,曾帮助在美国开辟了Web3。作为一家上市公司,它曾多次尝试在美国证券交易委员会注册,并长期呼吁进行监管,但监管机构没有任何动作。强制执行不能替代指导意见。通过对第三方的执法行动,对特定代币是否是证券进行诉讼是不恰当的,对保护消费者或为市场提供明确性没有什么作用。相反,SEC应该与市场参与者合作,使规则现代化并澄清其应用的范围。[2023/6/7 21:20:40]

ConceptArt区别于原画师,在游戏,动画项目中扮演一个仅次于主策划的一个美术向的决策地位,决定这个项目的风格和受众,因此一个以概念艺术家为目标的画师,被一种画风禁锢是不称职的。)

参考资料:公众号一沙君:史上最全!ConceptArt专业解析赛德大学ConceptArt专业YufeiZhang的分享–2020-02-0418:00

生成式人工智能工具,在帮助像游戏设计师这样的角色进行游戏概念探索与灵感启发都比较有用处。这也是生产过程的一个关键环节,例如,某个游戏工作室正在使用上述工具,从根本上加快了他们的概念艺术的开发流程,因为他们只用了一天时间就创造出了一个图像,而在以前,这个过程需要长达3周的时间,但是具体怎么操作呢?

首先,游戏设计师使用Midjourney来探索不同的灵感,并生成他们认为合适的概念图像。之后,图像会被交给专业的概念艺术家,艺术家可以把这些图像组合在一起,然后创建一个相关主题的连贯图像,然后将这些图片输入StableDiffusion,以形成系列的图像变化。

大家会共同讨论这些风格各异的图像风格,然后确定一个,用画笔手动编辑,然后继续重复以上过程,直到大家对作品结果感到满意。在这个阶段,再把这个图像最后上传给StableDiffusion,创造出最后的艺术作品。

a16z报告:DAO最好提交法律文件并进行纳税:6月3日消息,DAO的兴起引发了法律上的难题,即如何正式建立一个设计上并不真正想成为实体的实体。a16z提出了一套拟议的解决方案,并于周四发布了一份报告,称这类群体可能更适合安顿下来并缴纳美国税款。DAO将资金锁定在一个区块链上,一组参与者可以透明地朝向某个共同目标。a16z在其最近一次为DAO建立美国法律基础的公开努力中称,DAO需要“不要求进行真实世界的人类活动”的结构来满足法律要求——可能有利于非法人非营利组织(UNA)和有限责任公司(LLC)。面临的挑战是保持DAO的去中心化,同时允许它满足企业或非营利组织的税务要求和其他实际需求。

a16z总顾问兼去中心化负责人Miles Jennings和参与DAO研究小组的律师David Kerr撰写的论文称,使用受欢迎的离岸策略来避税可能会大大增加全球抵制的风险。美国国内结构对拥有大量美国成员和联系方的项目的实际好处是显而易见的,该文件总结道,并质疑在行业等待监管的同时进入免税司法管辖区是否真的是最佳的行动方案。(CoinDesk)[2022/6/3 4:00:07]

2DProductionArt

还有的游戏工作室在尝试使用类似的人工智能工具来制作游戏中的美术作品。例如,下图是来自AlbertBozesan,关于如何使用StableDiffusion来创建游戏中的2D资产的教程。

来源:https://www.youtube.com/watch?v=blXnuyVgA_Y

3DArtwork

3D立体模块,是目前所有现代游戏以及即将到来元宇宙的重要构建源。虚拟世界和游戏关卡,本质上都是一个3D资产的集合,通过不同的组合和放置方法,修改不同的参数来填充游戏环境。而创建3D元素比创建2D平面图更为复杂,涉及多个步骤,包括需要制作3D模型、添加纹理和效果。而对于动画人物来说,还涉及到需要创建一个内部「轮廓」,然后在轮廓之上创建动画。

隐私基础设施Nym获得3亿美金生态基金承诺,a16z和Polychain等支持:5月2日消息,隐私基础设施项目Nym宣布推出了Nym创新基金,目前已从一系列风险资本投资者获得了 3 亿美元的承诺,支持者包括 Polychain、Greenfield One、Huobi Incubator、Tioga Capital、Eden Block、NGC Ventures、HashKey Capital、Figment、分布式资本、OKX Blockdream Ventures、Tayssir Capital、KR1、Lemniscap 和 Andreessen Horowitz (a16z) 等,以吸引开发人员加入其生态系统。该基金计划为单个项目发放的赠款在大约 5 万美元到数百万美元之间。

据悉,Nym是新一代的全球隐私基础设施,其目标是扩大网络规模,开发高隐私保护特性的基础平台,推动强调隐私保护特性的应用产品开发从而提高网络的效率。(The Block)[2022/5/2 2:45:50]

我们发现有不同的初创公司,在寻找有关3D资产创建过程的各个阶段的机会,包括模型创建、角色动画和关卡制作等等。然而,这部分的业务和创新尚在探索中。

三维资产

试图往创建3D模型方向发展的初创公司包括Kaedim、Mirage和Hypothetic。大公司也在关注这个问题,包括Nvidia的Get3D和Autodesk的ClipForge。Kaedim和Get3d专注于图像到3D模型的转换;ClipForge和Mirage专注于文本到3D转换,而Hypothetic公司对文本到3D搜索以及图像到3D都感兴趣。

Kaedim公司:总部在伦敦,主要是通过2D图像生成3维模型。

a16z向去中心化质押解决方案Lido Finance投资 7000万美元:3月4日消息,a16z 宣布向去中心化质押解决方案 Lido Finance 投资 7000万美元,并计划利用 Lido 将 a16z Crypto 在以太坊信标链上持有的未公开的部分 ETH 进行质押。

据悉,Lido Finance 成立于 2020 年,为以太坊 2.0 以及 Solana、Terra 等公链提供流动性质押解决方案,允许用户在没有锁定或最低存款的情况下质押他们的 ETH、SOL 等代币。Lido 于 2021 年 5 月完成由 Paradigm 领投的 7300 万美元融资,三箭资本、Alameda Research、DCG 等参投 。[2022/3/4 13:36:37]

Mirage:https://www.mirageml.com/

三维纹理

如果在游戏中,三维模型能够用在基于网格的纹理或材料上,能够显得更加真实。例如,一个中世纪的城堡模型上使用不同类型的、带有青苔的风化石,可以完全改变一个场景的外观塑造。这里所说的纹理,包含关于光对材料的反应的元数据,艺术家可以根据文本或图像提示轻松生成纹理,对于提高创作过程中的迭代速度是非常有价值的,像BariumAI、Ponzu和ArmorLab这样的公司正在在这个领域努力。

a16z合伙人Chris Dixon:NFT 是能让用户真正拥有并通过互联网随身携带的虚拟商品 ?:金色财经报道,a16z合伙人Chris Dixon在推特上表示,NFT 是能让用户真正拥有并通过互联网随身携带的虚拟商品,使用Web 3钱包和NFT被广泛接受可能会要一段时间,这当然是显而易见的,如果你个人不喜欢虚拟商品,其实没关系,但很多人都喜欢,包括我在内。有社区用户回应称,一旦解决了电力消耗问题,虚拟知识市场就将发挥作用,Chris Dixon还回应指出,在权益证明(PoS)网络中电力消耗是非常小的。[2021/10/12 20:23:05]

BariumAI:https://barium.ai/

Ponzu:https://www.ponzu.gg/

动画

优秀动画的制作,是游戏创作过程中最耗时、最昂贵和最有技巧的部分之一,降低成本和创造更为真实的动画的方法之一,是运用动作捕捉,即给演员或舞者穿上动作捕捉服,用专门的设备,记录他们的动作。

我们发现,当前的生成式人工智能,可以直接从视频中捕捉动画。这就更高效了,因为这样就不需要成本高昂的的动作捕捉设备,也意味着我们可以从现有视频中捕捉动画。

人工智能模型的另一个令人兴奋的点在于,可以用于过滤现有动画,加上新的特效,例如让动画人物一键看起来喝醉了,或者老了,或者高兴。这一领域的公司包括Kinetix、DeepMotion、RADiCAL、MoveAi和Plask。

Kinetix

DeepMotion

RADiCAL

关卡设计和游戏世界构建

游戏创作中最耗时的方面之一是构建游戏世界,生成式人工智能可以用于这项任务。像《Minecraft》、《NoMan'sSky》和《Diablo》这样的游戏,因程序化技术生成关卡而闻名,其中关卡是随机生成的,每次都不一样,但都遵循关卡设计者制定的规则。新的ThenewUnreal5游戏引擎的一大卖点在于,它收集了用于开放世界设计的程序化工具,例如叶子的放置。

例如Promethean、MLXAR或Meta的BuilderBot这些公司,都是看到了生成式AI技术的机会。这方面的学术研究已经有一段时间了,包括Minecraft的生成技术或Doom的关卡设计。

为什么生成式人工智能工具具备用于游戏关卡设计的潜力?因为AI具备创造不同风格的关卡和游戏世界的能力。可以想象一下,通过工具迅速生成一个1920年纸醉金迷时代纽约的游戏世界,或者是神秘的反乌托邦银翼杀手的设计,或者是托尔金派的幻想世界。

下面的概念是由Midjourney使用提示生成的游戏中不同风格关卡:

音频

声音和配乐是游戏体验的重要部分。已经有公司开始使用生成式人工智能生成音频,以补充图形方面的工作。

音效

声音效果是人工智能的另一个有吸引力的领域。已经有学术论文探讨了使用人工智能在电影中生成「foley」的想法,不过目前能够直接在游戏中应用的商业产品还很少。

笔者认为,这只是一个时间问题,因为游戏的互动性使其成为生成式人工智能的一个明显的应用,既可以创造静态的声音效果作为生产的一部分,也可以在运行时创造实时的互动声音效果。

想象一下,如何给玩家角色生成脚步声?大多数传统游戏,会通过少量预先录制的脚步声来解决这个问题:例如,在草地上行走、在砾石上行走、在草地上跑步、在砾石上跑步等等。这些声音的发布和管理都很繁琐,而且运行的时候听起来重复且不真实。

更好的方法是实时通过生成式AI的模拟音效,产生合适且更真实的的音效,通过游戏中的参数,如地面、角色、的重量、步态、鞋类等不同的介质,表现出不同的音效。

音乐

配乐对游戏来说很重要,因为它可以帮助故事主题设定感情基调,就像在电影或电视中一样。但由于游戏持续的时间更长,有的时候能持续数百甚至数千小时,不变的音乐可能很快变得重复或令玩家厌烦。此外,由于游戏具备互动性质,游戏配乐很难完全精确地配合屏幕上随机发生的场景和动作。

二十多年来,自适应音乐一直是游戏配乐的一个受关注的话题,它可以一直追溯到微软的「DirectMusic」系统,用于创建互动音乐。不过,DirectMusic并没有被广泛采用,主要是因为用这种格式作曲难度较大,只有少数游戏,如Monolith的《无人生还》,创造了真正的互动配乐。

现在,有许多创业公司正在尝试创造人工智能生成的音乐,如Soundful、Musico、Harmonai、InfiniteAlbum和Aiva,尽管目前的很多工具,如OpenAI的Jukebox,是高度计算密集型的,还不能实时运行,不过,一旦初始模型成功建立,实时运行将成为可能。

对话&语音

很多公司试图为游戏中的人物创造逼真的声音,当然,由于计算机的语音合成历史悠久,这并不少见,这些公司包括Sonantic、Coqui、ReplicaStudios、Resemble.ai、Readspeaker.ai等等。将生成式人工智能用于语音有多种优势,当然,这个赛道竞争也比较激烈。

即时对话生成。通常情况下,游戏中的语音是由配音演员预先录制的,但这些都仅限于死板的演讲稿。有了生成式人工智能对话,角色可以说任何话,这就意味着可以对玩家的行为做出充分的反应。

角色扮演。许多玩家希望扮演与自己现实世界身份几乎没有相似之处的虚拟人物。然而,只要玩家用自己的声音说话,这种幻想就会破灭,使用与玩家的化身相匹配的生成的声音可以保持这种幻觉。

控制音效。通过AI生成语音时,我们可以控制声音的细微差别,比如它的语调、转折、情感共鸣、音素长度、口音等等。本地化。对话可以翻译成任何语言,并以同样的声音说话,像Deepdub这样的公司专门专注于这个细分市场。

NPC&玩家角色

很多初创公司在研究使用生成式人工智能来创建可以互动的角色,除了游戏中NPC的市场机会,虚拟助理或接待员也具备很大的增长空间。这种努力可以追溯到人工智能研究初期。

很多公司正在建立通用聊天机器人,其中许多是由类似于GPT-3的语言模型驱动的。少数公司专门试图建立以娱乐为目的的聊天机器人,如Replika和Anima,试图建立虚拟陪伴者。电影《Her》中展现的虚拟女友时代,可能很快就会到来。

现在可以看到这些聊天机器人平台的下一个迭代,如Charisma.ai、Convai.com或Inworld.ai,除了可以渲染3D角色提供动力外,还具备情感呈现,工具可以让创造者给这些角色设定目标,可以在融入游戏或在推动情节发展中具有叙事性的地位,而不是纯粹的摆设。

一体化平台

像Runwayml.com这样最成功的生成式人工智能工具,可以将广泛的创作者工具集于一身。不过,目前游戏领域还没有这样的公司,A16Z很想投资具备以下特点的生成式AI游戏解决方案:

涵盖整个制作过程的全套生成式人工智能工具:(代码、资产生成、纹理、音频等)

能够与流行的游戏引擎如虚幻和Unity结合使用

设计成适合典型的游戏生产的通用场景套件工具

总结

对于游戏创作者来说,这是一个令人难以置信的时代。有一天,我们可以想象会出现专门为玩家定制的个性化的游戏,完全基于玩家的需求。

这种场景在科幻小说中已经存在了很长时间—比如《安德的游戏》中的「人工智能智力游戏」,或者《星际迷航》中的全息甲板,这些都会在将到来的未来真正实现。

参考资料:

https://a16z.com/2022/11/17/the-generative-ai-revolution-in-games/

公众号一沙君:史上最全!ConceptArt专业解析赛德大学ConceptArt专业YufeiZhang的分享–2020-02-0418:00

原文标题:《TheGenerativeAIRevolutioninGames》

撰文:JamesGwertzman、JackSoslow

编译:阿法兔

来源:比推

标签:人工智能NCEARTION人工智能币种Hugo FinanceGame ArtAIon Mars

比特币交易所热门资讯
加密货币:为什么加密货币需要实体化_比特币

加密货币一直是数字优先的行业。对大多数人来说,加密货币是迷人的,因为它几乎完全生活在数字空间,允许它将金融、社区、文化、治理和技术的所有独特方面结合到一个跨越司法管辖区的巨大相互关联的生态系统中.

1900/1/1 0:00:00
AND:2022年值得关注的四个VR独角兽_matic币价格今日行情

2022年,VR领域因元宇宙热潮而再一次得到关注。实际上VR在2017年左右就掀起过一阵热潮,近些年,VR领域得到了一定时间的发展以及沉淀。VR作为元宇宙的入口,是兵家必争之地.

1900/1/1 0:00:00
以太坊:观点:合并后的以太坊 感觉没有什么不同?_以太坊币今日价格行情查询

几个月以前,以太坊经历了该网络的一次历史性升级。该升级被称为“合并”,它被寄希望于能够为DeFi堡垒的下一个迭代治愈一系列疾病.

1900/1/1 0:00:00
WEB:BinaryTalks:FTX事件给Web3 VC的尽调启示_WEB3

嘉宾:Forest|ForesightVenturesTodd|A&TCapitalHenry|NGCVenturesJoanna|DFG&Jsquare主持:Larry|Bas.

1900/1/1 0:00:00
区块链:对话 a16z 合伙人 Chris Dixon:投资原则、技术史中的加密市场和来年展望_ISD

原文标题:《a16z’sChrisDixononthestateofthecryptomarket》来源:TheBlock编译:董一鸣.

1900/1/1 0:00:00
RWA:金色观察 | 现实世界资产(RWA)现状和未来_央行数字货币是加密货币吗

文/JackInabinet,Bankless;译/金色财经xiaozou现实世界资产一直都是一匹DeFi黑马.

1900/1/1 0:00:00