查看原文
其他

东西一周 | 解码首届上海网络视听内容创作者大会、本土电竞剧、者识科技李超AIGC+体育、游戏引擎AIGC、AI配音、游戏建筑学

东西文娱 东西文娱 2023-10-23
封面头图


本周TOP 1

解码上海网络视听内容创作者大会

为什么说上海范式再次主动引领?

坐拥“一江一河”两岸,首届上海网络视听内容创作者大会的网络视听IP市集,成了新晋的“限时”城市打卡点,#上海北外滩刺猬头等概念登上热搜。

苏州河沿岸,IP市集汇聚bilibili、小红书、百视TV、腾讯视频、抖音等40余个点位,搭建起百米流动视听盛宴,集中展示创意视听、数字多媒体/流媒体、文化创新、科技浪潮、动漫IP、生活方式等“大视听”板块。咖啡、红酒、花店、甜品、香氛、潮牌、手工坊自然穿插其中,线上IP与线下实景结合,外界再次看见内容与消费深度融合的上海范式

除了IP市集,首届上海网络视听内容创作者大会还通过行业白皮书发布、十大创意方向倡议、主题演讲、圆桌论坛、专场讲习会(workshop)等系列活动,聚焦网络视听内容创作者现状,展示网络视听多元文化,赋能城市宣推大平台,向国内外展现上海城市形象和内涵。

作为本土网络视听产业头部企业的发端地,如今已是视听产业高地的上海,一直都是视听内容创作者的聚集地。

包容的海派文化、丰富的创意人才积累、引领性的内容消费潮流、开阔的产业格局视野,上海给予了B站、小红书、喜马拉雅等成长的空间,也吸引了咪咕、腾讯视频、爱奇艺、优酷、抖音等聚集上海扎根。蓬勃的消费活力,则在内容消费经济的大潮中,助力视听内容打开了与消费的联动路径,推动了本土视听内容消费的产业化与国际化。

当下,在消费复苏、文旅融合和AIGC信息密集更新节点,网络视听产业正驶入新一轮发展窗口,产业格局求新求变的同时,视听内容创作者也面临新的机遇与挑战。

新的方向和可能性,正在孕育中。本就有“发端”基因的上海,再次主动走到台前。

正文片段|从首届网络视听创作者大会释放的信息和探讨的议题来看,新业态、新技术、新模式的培育与扶持仍将持续且加大,但同时围绕网络视听内容创作者这一人群的举措,也将会成为后续上海视听产业的重点。
大会期间,上海主动发起了一场闭门座谈会,推动创作者代表与产业相关决策者、政府职能部门进行了一场直接对话,为视听内容创作者创造更多深入产业的机会。而对于在未来对视听内容创作者产生关键影响的技术AIGC,本届网络视听创作者大会也从多个维度进行了话题设定和讨论。

众多与会者普遍认为,和PGC、UGC相比,AIGC更大的优势是能够更大程度上降低创作门槛和创作成本,将会让创作者群体进一步扩容,更多创作者能够参与其中.....‍

(全文点击下图即可阅读)




本周TOP 2

者识科技创始人李超

AIGC“颗粒化”体育场景

"未来方向'少即是多'"


为什么关注?| 近期,AIGC的信息很密集,在AIGC+体育层面,者识科技是一家很受瞩目的公司。在分享完的互动环节,者识科技也引发了现场的一个讨论高潮。

者识科技一直在做一件事情,就是通过AI生成体育运动相关的内容。

者识科技覆盖的传统体育项目比较多,像篮球、足球、网球。生成的内容包括体育赛事的直播、体育运动的短视频,以及体育运动的数据等等。应用场景包括赛事、场馆、教培,以及专业队的训练教学。

那么,AIGC可以如何应用于体育场景,上海者识科技的创始人李超在「未来的体育」第四期“体育娱乐科技‘新进化’”现场分享了者识科技的业务定位与业务进展。

上海者识科技的创始人 李超

正文片段|我觉得下一代要去发展的AIGC是“少即是多”。我希望你就给我一张图片,但是是精准的,是我想要的,然后是用很低的成本由AI来生成。这是我们这几年在体育产业AI应用方向上做的事情,我觉得也是接下来AIGC市场上的可能发展方向。


.....在我们的方案里,一旦你让机器去理解这场比赛的所有细节,后面这些所有内容生成的边际成本是非常低的。就像我们在给耐克全国高中联赛做服务的时候,一场比赛结束的时候,就能够给到各个跟赛事相关的直播、短视频数据内容,不用再去一个一个进行人工的二次生产。

大概给大家做一个我们如何理解一场比赛的技术演示。比如我们在一个球馆里,我们会跟踪场上每一个人的实时点位,他的位置。对于其中一些比较关键的动作以及运动员,我们会做三维空间里的建模,以及场上所有人的实时位置,跟人跟球之间的交互。


它的难点一个是在于,手机前面的交互,或者是类似于魔镜这种健身镜之前的个人交互,是在很干净、很理想的环境下的交互,这个市面上已经非常成熟了。但是在篮球、足球这种高对抗、高密集度的项目里面,做这种精确的追踪也好,位置的追踪也好都是难点。

第二个难点在于,很多AI数据分析是我们做的,我们反而觉得在这种高端俱乐部、国家队的场馆,做赛事服务的时候场景是可控的。你可以在一个很理想的环境里面布置你的设备。所以另外一个难点就是,我们怎么样把这个技术应用到全中国可能的C端,应用到各种各样的运动空间里面去。把成本降下来,把算法理解的稳定性升上去.....‍

(全文点击下图即可阅读)

本周TOP 3

影游联动之本土电竞剧领跑全球‍‍‍‍‍‍‍
游戏IP与影视的关系

为什么关注?|期,由张艺谋导演担任监制,曾创作电竞剧《穿越火线》的徐速、王潇涵负责编剧,开拍《英雄联盟》电竞剧的消息一经宣布,“英雄联盟”的IP影响力加上张艺谋的知名度,引起了影视界与游戏界的广泛关注。

“电竞剧”这类以游戏玩家为叙事主体的影视作品,已成为了中国市场上一种独特的类型,在海外的游戏IP相关影视中并不多见。近年的剧集《穿越火线》、电影《硬汉枪神》等电竞题材作品,都吸引了不同性别、玩家与非玩家的观众及不少偶像粉丝,以相对小众的题材收获了“出圈”效果。

电竞剧的风行映射了本土游戏与文娱产业的特点........‍‍

而电竞剧之所以在海外仍处于起步阶段,首要原因便是游戏市场环境存在差异。注重叙事、动作的3A游戏长期受好莱坞青睐,这种以游戏角色为中心的改编模式已根深蒂固。此外,在不少国家和地区,电竞文化的流行程度其实很难与当下的中国相比,更不用说以电竞选手为主角的流行文学,几乎是本土独有的文化现象。


正文片段|本土游戏IP衍生影视之所以能形成以玩家为叙事主体的模式,是受到了多个行业的趋势影响。在游戏、电竞行业,强竞技、社交的MOBA等类型于2010年代受到年轻人普遍喜爱,随之产生了庞大的电竞产业。而从广泛的文娱视角来看,以网游、电竞为主题的大量网络文学成为了影游联动的中介,加速了电竞剧的发展与流行。

1.玩家本身是更适合强竞技游戏的创作切入点

本土早期的游改影视,如《仙剑奇侠传》《轩辕剑》系列,都是对原作中的角色故事进行改编。由于仙侠、玄幻类型作品多年来持续涌现,已经让不少观众产生审美疲劳。随着游戏从端游时代进入手游时代,以及观影人群的年轻化,射击、MOBA类游戏也开始比单机RPG更能吸引观众的目光。

FPS、TPS、MOBA等竞技游戏重在对抗玩法,虽然具备基础的人设、剧情,但大多没有呈现出完整的人物故事....

2.电竞产业与文化正在深入年轻观众的生活

电竞剧的萌芽与发展,同样离不开本土电竞产业的壮大。2016年,王者荣耀KPL职业联赛创立、中国战队在《Dota 2》第六届国际邀请赛夺冠,教育部正式批准电竞专业进入高校;2018年,电竞成为雅加达亚运会表演项目,标志着电竞成为国际社会接受的竞技文化。


2017年,以中国首支电子竞技世界冠军战队WE战队为原型的电影《超能电竞:传奇一代》和以女电竞选手小苍为原型的电影《垫底联盟》先后推出。电竞视频平台ImbaTV参与出品了《Dota 2》网剧《梦想X计划》,是国内首部电竞真人网剧。

3.网络文学奠定了电竞题材的创作思路与粉丝基础

本土网络文学发达,类型丰富,其中就诞生了网游文、电竞文等独特类型。这些网络文学作品,为包括电竞剧在内的国产游戏IP影视提供了大量的改编素材。制片方可以从中挑选优质作品,省去原创剧本的创作成本与风险,也能收获读者粉丝的关注。

在本土网文的早期,《魔兽世界》等网游的同人文演变成了各类网游文。后来随着FPS和MOBA游戏的流行,出现了电竞文这一类型,与前者的共同点是都以游戏玩家为主角。作家蝴蝶蓝的《全职高手》开创性地将传统网游文和电子竞技融合在一起,成为现象级的作品,体现出电竞题材在文艺创作中的潜能,催生了大量电竞文。

(全文点击下图即可阅读)


本周TOP 4

  东西AIGC系列|游戏引擎+AIGC

"更大工具价值,变革游戏开发与设计"

为什么关注?|以ChatGPT为代表的生成式AI全球爆火,引发了科技生产力上的巨大冲击。现阶段生成式AI技术的发展,对创作领域的影响逐渐提升。

无论现阶段是否采用、多大程度采用生成式AI技术,游戏开发者、游戏厂商已难以回避生成式AI是否、以及多久可能从根本上游戏开发的问题。

这不会一夜之间发生,但已经促使很多人思考结合AI后的游戏开发与游戏设计。

作为具有较强创作工具属性的游戏引擎,背后的技术人员与相关公司,已开始探索通过结合AI,提升工具易用性、简化创作过程。

在现阶段,较为务实的落地方向包括帮助开发者优化创作流程,批量生产、处理、放置资产;同时也能降低开发门槛,使开发者更专注于创意本身。一些游戏公司也开始储备相关人才,寻求有丰富AI经验的人才,调整、优化自身引擎和系统,顺应了新一轮AI能力引入游戏引擎的趋势。


正文片段|游戏引擎结合AI,已渗透游戏制作的多个环节.‍‍

1.美术、3D资产及场景生成

现阶段AI生成2D图像的技术已经较为成熟,主流产品如Stable Diffusion、DALLE-2等多以扩散模型(Diffusion Model)为技术路线。游戏引擎也有推出相关功能,如Unity的Unity ArtEngine,也可以通过API方式链接到外部的AI图片生成工具,在游戏制作中的角色立绘制作、材质和贴图生成等环节发挥作用.....‍‍‍‍

2.动画

游戏中的角色动画制作流程通常先在Maya等建模软件中制作模型、绑定骨骼,然后将模型导入游戏引擎中制作动画。游戏引擎正在引入AI能力,用以优化绑定、动作制作等流程。

例如Unity的Deep Pose功能可以通过控制某个关节,自动模拟出在该动作下其他关节的正确反应;Kinematica让开发者无需通过Blend Tree或状态机来安排角色在两个动作之间的切换,只需要给定一个骨骼姿势及所需的轨迹运动,就能自动生成相应动作。

虚幻引擎5也推出了机器学习变形器(ML Deformer)功能,基于Epic Games开发团队构.....‍‍‍


3.对话、语音

游戏引擎在AI生成对话方面的进展也得益于预训练大语言模型的技术迭代。

育碧近期公布的AI写作工具Ghostwriter,用于生成与主线关联不大的NPC台词。Ghostwriter被融合进育碧的“Omen”叙事引擎中,开发者输入NPC的一段基础台词或发言动机,就可以自动生成若干个版本的可用台词。育碧在技术博客中提到,Ghostwriter加入了带有人类反馈的强化学习技术,在人类做出数千次对合适台词的选择行为后,它将变得越来越有效和准确。

国内市场,Cocos则通过与百度文心一言合作,全面体验并接入文心一言相关能力,把百度的智能对话技术成果应用在3D实时创作领域。

游戏角色的台词除了文字以外,还常常配有语音。除了采用人工配音的方案,近年来AI语音生成技术逐渐成熟。AI语音领域涉及语音识别(ASR)、自然语言处理(NLP)、语言生成(NLG)和语音合成(TTS)等多项技术。越来越多技术公司和个人开发者,正在为游戏引擎开放SDK和插件,例如百度的语音识别SDK、IBM的IBM Watson Unity SDK等等....‍

4.AI NPC

NPC是大部分游戏都不可缺少的要素,创建AI驱动的NPC也是游戏引擎普遍较早引入的功能。在游戏中创建一个高可信度的AI NPC,涉及到AI行为树、环境查询、AI感知等多个环节...‍

(全文点击下图即可阅读)

其他游戏+AIGC相关案例‍‍‍



本周TOP 5

  生成式AI配音案例

为大片重拍“降本” 东西「AIGC系列」

为什么关注?|Flawless是一家位于英国,专门为电影、电视和广告提供人工智能生成配音技术的视觉特效公司,其所设计的TrueSync AI系统能够为电影提供翻译配音解决方案。

Flawless的创始人Lynes和Mann曾分别任职于游戏和影视制作领域,2018年5月,Flawless成立,2021年完成超额认购的A轮融资,投前估值1.5亿美元。

日前,视觉特效公司Flawless聘请了在狮门影业工作15年的资深人士Jen Hollingsworth担任首席商务官。

Flawless在一份联合声明中表示:“我们很高兴地欢迎一位像Jen这样具有声望和专业知识的高管加入Flawless,因为我们正踏上增长轨迹的下一阶段——开拓和扩展生成人工智能。” 


正文片段|2021年,Flawless制作推出了基于DeepFake技术的可视化翻译技术工具TrueSync,电影制片人和其他内容创作者能够用其解决演员口型和字母配音不同步的问题。

与DeepFake原理相同,TrueSync AI系统通过改变演员的嘴部动作匹配其对话内容,以达到视听和谐的效果。得益于AI技术和计算机图形学的发展,这一过程能够快速且自动完成。

该系统还能够用于更改配音为符合PG-13标准的安全语言。

Flawless团队曾为制作预算约为300万美元的动作惊悚片《坠落》修改了约30处配音。

(核心内容点击下方视频)

本周TOP 6

东西「文娱人文」|游戏建筑学

“事关美学,事关体验”


年最成功的IP改编游戏之一《霍格沃茨之遗》,构建了一个有趣且庞大的霍格沃茨魔法学院,极尽还原哈利波特世界的城堡备受原著党好评;去年现象级游戏《艾尔登法环》,同样也通过有着巴西利卡特征的艾雷教堂、交界地的各式哥特式教堂废墟等多种风格的建筑,渲染了暗黑幻想的氛围。


某种程度上,玩家在游戏中的所见所感是现实世界的延伸。玩家往往会沉浸在游戏的戏剧冲突和故事情节之中,“所见”的场景建筑和“所感”的空间体验,作为故事的背景板却十分容易被忽视。

而诸如《霍格沃茨之遗》和《艾尔登法环》等游戏中极具风格化,并高度影响游戏沉浸体验的建筑,正在让“游戏建筑”进入更多人视野。


同时,正如《原神》璃月港中的建筑灵感来自凤凰古城和悬空寺,《江南百景图》还原了始建于明代初年的南京大报恩寺琉璃塔的建造过程,众多游戏中的场景都和现实存在的建筑学原型息息相关。知名游戏设计师水口哲也说过:“某种程度上,游戏设计也是一种隐形的建筑学。”

在游戏中应用建筑设计的手法和理论,能为游戏体验设计带来更多灵感;而在游戏这一虚拟世界中进行的设计尝试,也可能对现实世界中的建筑设计产生正反馈。

正文片段|表面上看,这些游戏建筑是通过对历史或现实建筑风格进行考据,或是通过对一些场景原画氛围的学习进行还原复刻,但其背后也呼应了建筑学中的概念——场所精神。

建筑理论大师Norberg Schulz的“场所精神”理论,关注人与空间互动过程中形成的心理感受,人在赋予空间意义的同时,也接受空间带来的反馈。

也就是说,某种空间特征或建筑元素可能给人带来特定的精神感受。比如布拉格的场所精神在于建筑融入环境的浪漫,其地理区位决定了建筑的多元风格,体现了古典式与浪漫式的融合;而罗马的城市意象则代表着绝对秩序带来的纪念性和壮丽,城市中存在轴线和规则的四边形交叉形成的路网,微观上城市广场也被具体化为几何图形。

(全文点击下图即可阅读)


本周TOP 7

重要动态:海纳百川 向新向心

2023年上海国际电影电视节举行北京发布会

(全文点击下图即可阅读)

2023年上海国际电影电视节
北京新闻发布会现场

2023年上海国际电影电视节于5月16日在北京召开新闻发布会宣布:由国家电影局指导、中央广播电视总台和上海市人民政府主办的第二十五届上海国际电影节将于6月9日至18日举行;由国家广播电视总局、中央广播电视总台、上海市人民政府主办的第二十八届上海电视节将于6月19日至23日举行。新闻发布会上公布了本届电影节金爵奖、电视节白玉兰奖评委会全名单,发布了本届电影节和电视节的海报,并介绍了2023年上海国际电影电视节总体情况。



本周TOP 8

其他行业动态‍‍

博采虚拟制片电影科技论坛

Kindergarten Green AI闭门纪要



Hello!
我们在为更加闭环、更加高效的服务模式做准备
欢迎加入限定白名单
与我们一起探索






您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存