查看原文
其他

AI电视剧,有模有样

东西文娱 2023-10-23

The following article is from 共同虚拟 Author 共同虚拟

东西「文娱科技」

上期Wonder Dynamics(见文末)

关注文化娱乐科技的产品化与场景应用

欢迎交流,联系请见文末


在AI到底能如何参与影视行业这个问题上,好莱坞有一批“激进分子”一直在推进AI影视的探索。


在近期结束的威尼斯电影节上,北美人工智能公司Fable公司提到正在推出其首部原创人工智能电视连续剧《Thistle Gulch》。该剧以充满活力的人工智能角色的狂野西部小镇模拟为背景,探索他们对边境新未来的追求。


Fable公司是一家于2017年成立于旧金山的虚拟现实公司,最早作为Facebook(现Meta)旗下Oculus的一个VR叙事部门诞生,曾获得艾美奖,后转型为一家AI虚拟人公司,并在AIGC浪潮下开始探索AI讲故事的方式。(前期相关:虚拟人有了生命可以干什么?


作为这些探索的阶段成果,今年7月,Fable公司发布了名为“SHOW-1”的 Showrunner AI 技术。Showrunner目前能够在一些既有的影视作品(IP)的基础上,生成以用户的想法为主的全新作品。该公司最初利用《南方公园》来展示其新技术。


作为虚拟现实领域的积极探索者,Fable首席执行官爱德华·萨奇 (Edward Saatchi)一直是AI影视和AI游戏概念的积极推广者。


就在近期的威尼斯电影节,由 Scott Lighthiser 和 Katya Alexander 共同创立、Edward Saatchi担任顾问的人工智能工作室“Pillars”首次推出了他们的电影《红色》,并宣布了另外五个人工智能驱动的计划。


AI Showrunner 技术正让外界看到故事生成的一种可能性。观众可以观看 AI 制作的电视剧、重新混合现有剧集,甚至自己制作全新的 AI 电视节目。



“二创”《南方公园》

AI剧集如何生成?


“人们说人工智能无法讲故事。那么,它现在可以了。”Fable首席执行官爱德华·萨奇在7月的首部AI剧集发布时表示。


Fable公司在7月19日在Twitter公开了AIshowrunner的相关研究论文,论文概述了AI Showrunner Agents的潜力,它可以编写、制作、导演、选角、编辑、配音和动画剧集。该公司还同步发布了由该项技术制作的《南方公园》剧集。公司首席执行官萨奇就创建角色“主演”了一集名为Westland Chronicles的动画。


Edward Saatchi在《南方公园》中创建的人物


Fable 使用大语言模型、扩散模型和多智能体Simulation来生成IP剧集内容的方法,实现了背景化、故事进展和行为控制。


其中大语言模型即为GPT-4,而为了训练自定义的扩散模型,研究者从以往的剧集素材中收集了一个由大约 1200 个人物和 600 张背景图片组成的综合数据集,作为模型学习该剧风格的原材料。


多智能体The Simulation是Fable公司为AI虚拟人物打造的世界,在这里它们可以像人类一样“生活”。这是让剧中的虚拟角色真正能“拥有自己生活”的关键一步。在Fable公司看来, Simulation是实现人与虚拟AI人物共情、打造具有情感的虚拟人的关键。


对于用户来说,只需要进入Fable搭载了Showrunner技术的产品“Simulation”,在《南方公园》大地图中选择一个期望的主角,以及其他的角色、场景等,并输入一段prompt,稍等片刻就可以生成一个崭新的故事。


故事生成过程需要用户、The Simulation和GPT-4之间协作。The Simulation会生成角色的历史、情感和事件等基本背景,为最初的创作过程提供背景;用户引入自己的意图,对智能体进行行为控制,并提供启动生成过程的初始提示,还要充当最后的判断者,在流程结束时对生成的故事内容进行评估;GPT 4 充当主要生成引擎,它根据用户和The Simulation给出的提示来合并场景和对话。


在The Simulation的帮助下,灵感枯竭的问题可以被解决。在启动提示链之前,The Simulation会提供相关的上下文和数据点。The Simulation就会为个人和故事系统提供源源不断的创意内容。


正是整合每个参与方的优势,才可以创造出具有更丰富的互动、连贯的、引人入胜的故事。


   

具有粉丝经济潜力

但谈商业模式为时尚早


尽管Showrunner目前做出来的剧集还略显生硬,其中生成的名人声音也还不够完美。且“仍然需要人类来管理和训练,告诉它该做什么以及做错了什么”,但这项技术已经展现出想象力。


Showrunner的亮点不仅在于可以基于原有电视剧生成作品,也可以制作原创电视剧集,还可以让用户置身于这些剧集中。这被认为将极大的释放粉丝经济的势能。


在Fable公司看来,娱乐公司可以将这项技术提供给粉丝,粉丝们可以基于他们喜欢的节目来创造出个性化的内容。虽然,以往好莱坞对这样的内容创作形式比较谨慎,但这项技术可能会带来新的收入来源。在这样的技术加持下,粉丝可以置身于他们喜欢的节目当中,出演他们喜欢的节目,并且有机会创作出超越以往的优秀剧集。


不过,目前谈商业模式还为时尚早,Fable坦言,尚未与《南方公园》人员进行IP的谈判,选取《南方公园》只是为了让人们在超高质量的真人秀和人工智能秀之间有一个比较,且南方公园的原始视觉风格适合这些系统当前的技术能力。



眼下,Fable正在参与多家工作室和顶尖的创作者洽谈合作,公司正在制作多部原创且IP驱动的人工智能电视节目,比如太空探索科幻和侦探类题材等。


考虑到这项技术的发布在好莱坞编剧和演员的罢工中引发的不安,萨奇对外称,“我们希望以非商业方式分享我们的研究结果,以便现在罢工的作家能够与工作室积极谈判——威胁是真实的,对好莱坞来说,放慢速度很重要。”


Fable正在向人工智能研究人员开放这项技术。不过,萨奇亦同时强调,AI 材料不应被视为文学材料,AI Showrunner 可以帮助人类将想法变为现实,但其本身并不是一个可信的合著者。



     

让虚拟人有“生活”

The simulation的终极目标是AGI


如果整体考虑Fable的背景,便不难理解这一项目的推出。


作为一家脱胎于Facebook(现Meta)旗下Oculus VR叙事部门的公司,Fable这些年已经转向虚拟人的打造。在围绕虚拟人Lucy的打造中,Fable发现用户能够与角色或体验建立真正的联系。Fable在内部不断开发自己的技术,意在进一步扩展这种联系。


通过带Lucy使用其他平台例如进行视频通话、Google 聊天或 Zoom等方式,Fable使 Lucy 从单一的 40 分钟虚拟现实体验变成了持续数天、数周或数月的体验。这让Fable意识到Lucy需要超越面对面的互动,她需要的是一个惯例、一个背景故事和一段历史。


正是为了让lucy栩栩如生,Fable开始构建Simulation。


Saatchi 认为现有的智能聊天机器人在连贯性、毅力和记忆力方面都存在不足,“他们并不真正知道上周做了什么,也不知道有什么计划要做,随着时间的推移,这会变得令人沮丧。”


The Simulation目标可以实现人工智能角色与人类之间的一对一交流。作为虚拟人峰会的组织者,Saatchi 认为这是虚拟生物或行为向人或动物的人工智能角色的下一个进化。


The Simulation的第一个世界 Nouns Town


在他们看来,虚拟人需要有日常生活背景和驱动它们的需求。比如,当 Lucy 和 Code Miko(由真人扮演的虚拟角色主播)一起玩 Minecraft 时,在虚拟世界中与 AI 互动也更有趣,”在虚拟世界中,你和 AI 都是化身,而不是仅仅与屏幕上的聊天机器人交谈。你们可以一起做事。”


当Fable开始往这个方向探索时,他们认为斯派克·琼斯的电影《HER》为人工智能和人类之间的关系提供了一条鼓舞人心的道路。“我们意识到,为了在情感上建立联系,虚拟生物需要现实生活,他们需要在空间和时间中运作,有身体,有需求,并在生活中挣扎,就像我们一样。”


随后,Fable开始将《西部世界》、《楚门的世界》、《黑客帝国》和《自由人》视为人工智能或虚拟人社会的例子,它们会相互竞争,最终与人类无缝融合。


Saatchi 将The Simulation视为《模拟人生》的重新构想的Web3版本,使用当今的 AI 工具从头开始构建,包括自然语言处理 (NLP)、合成语音、程序动画、强化学习和计算机视觉。Fable为The Simulation创建了一个更像电子游戏的训练元素,在这里可以对 AI 的响应和行为进行评分,玩家会被激励付出更多的努力来训练他们的人工智能。


去年10月,Fable在The Simulation中推出了第一个城镇,名为 AI Nouns Town,在这个小镇,NFT的所有者可以在这里注册并采用 AI 角色。


The Simulation的最终目标是创建一个真正智能的虚拟存在,实现 AGI 或通用人工智能。在进入the grand simulation之前,虚拟人需要在the simulation的世界中经历足够多的考验和训练,直到能够进入更广阔的虚拟世界。



前期东西「文娱科技」

Hello!

我们在为更加闭环、更加高效的服务模式做准备

欢迎加入限定白名单

与我们一起探索







您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存