内容平台的竞争从来不止于内容,芒果TV在诞生之初就曾在“阵痛”中明白了这个道理。如果技术成为掣肘的事情,即便是国内顶尖的视频内容创作团队也未必能常打胜仗。但当技术终于追平从互联网土壤里长出来的“腾爱优”后,这家视听领域的“国家队”未来要走向何方?
在今年第二届由芒果TV主办的算法大赛颁奖舞台上,虚拟主持人YAOYAO的亮相一定程度上回答了这个问题。
虚拟人技术不止于虚拟偶像养成和往常演播厅不同,这次颁奖舞台观众席的后方并不是导播间,而是动作捕捉舞台。动捕演员两米外,芒果TV创新研究院的技术团队围着坐了一圈。
算法大赛颁奖礼虚拟主持人YAOYAO的动捕演员彩排现场
程序员们抱着电脑围坐舞台后的场景,近年曾频繁出现在各类有虚拟偶像表演舞台后。伴随着芒果TV的发展,他们技术团队也终于走向台前。
相比于其他大厂及市场上的虚拟偶像公司,此时再推出自己虚拟主持人,芒果TV的动作显得有些慢了。但在和芒果TV创新研究院主创的交流中,36氪也听到了不同答案:芒果TV在虚拟技术上的研究与运用主要方向,并不是国内视频平台常用的虚拟偶像,而是期望将虚拟技术推广到整个大众市场,让技术更易用,让每个消费者都能创造自己的虚拟人。
“未来能通过手中的手机就实现动作同步,大家可以借助自己能捏脸的虚拟人在虚拟场景中相聚。”创新研究院负责人张亦弛告诉36氪。
虚拟人项目组负责人吴红也介绍道,团队目前也在开发虚拟场景等资产。吴红的思维与目前NFT思路很像。他认为虚拟人、虚拟场景等资产也是数字资产的一种,而现在的人物资产与场景资产也是为了这一趋势做准备。“这块技术我们探索得越深,未来使用成本就会越低。也能为内容创作者输出虚拟内容的工具类产品。”吴红告诉36氪。
据了解,虚拟场景还将被用于芒果TV剧本杀、电商直播等业务场景中。
从芒果TV母公司芒果超媒历年财报可知,其曾做过2次技术向的定增,累计金额超10亿元。比如在2019年,芒果TV智慧视听媒体服务平台项目就募资5亿人民币,其中占比最高的便是MR、AR、VR、AI、互动剧技术相关研发,拟投入1.5亿。
算法大赛互动展区工作人员示范只依托周身四个ipad就能完成的轻量级动补技术
在这次算法大赛颁奖礼的互动展区,芒果TV技术团队也客串了一把展厅讲解员,将这些项目初步成果一一展示了出来。除了很多人尝试的轻量化动捕场景外,对于内容广告的AI算法研究也是不少人关注焦点。
现场“找植入”小游戏,桌上牙膏为AI植入
针对这次展示,技术团队还做了一个“找植入”的小游戏,游戏将真正的植入场景和混淆元素放在不同视频中,让观众来找出哪个才是真正的植入视频。在游戏中,沙发上的抱枕LOGO、桌上放置的产品、墙面上的灯牌等不同形式广告植入完全依托后期AI技术,但这些植入素材已能基于视频内的光影、运动轨迹和遮挡关系,与视频场景融为一体,达到“以假乱真”效果。
作为一家从电视台中诞生的视频内容平台,不少人对芒果TV的印象可能还主要聚焦于综艺、电视剧等内容,甚至还可能认为芒果TV就是搬运湖南卫视节目内容的误区。但作为一家互联网企业,芒果TV技术团队早已不只是承担维护视频正常播出这样的职能。
“可以说,我们的技术进步很大一部分是业务倒逼出来的。”产品技术团队负责人卢海波感叹道。
擅长做工具研发的技术团队由于内容创作出色,大量来自业务端的需求经常像大水漫灌一样交到技术团队手中,这也倒逼技术团队在基于“点”解决技术及迭代版本后,因为特殊需求开始开发各类方便内容创作与创新的工具型产品。
“ 过去我们的植入还不是很好,但现在可以了。我还清楚记得《乘风破浪的姐姐》里面,有个植入场景,女嘉宾有几根头发丝飞过那个品牌,光影效果好到我都没看出来是植入。”卢海波告诉36氪。据他透露,和其它大量收入来自流量变现的视频平台相比,芒果TV广告收入中,内容广告和流量广告收入占比可达到5:5,这也给芒果TV的内容植入技术提出了更高要求。
芒果TV自动化植入示范
“我们经常是节目开播了之后,因为节目火爆又陆续来了很多品牌。”卢海波解释道。但在这个时候,节目也已经录制了一部分了,如果需要重新植入广告,则需要节目组重拍或者后期投入大力气增补,这在操作性上几乎是不可能的。为了节省成本,这才有了不断迭代的内容植入AI技术。
有了工具后,在互动展区,观众使用ipad即可体验广告植入过程——把产品拖入画面即可。产品入画后将自动跟随镜头角度及光照等维度适配,达到融入画面的效果。
除却内容广告外,内容的形式创新也给技术带来了很多突破机会,比如互动剧的工具研发。
芒果TV 互动剧编辑后台
“我们的互动剧编辑器给内容团队使用也是很简单,而且在呈现方式上不只支持点击,我们还支持让用户滑动、多角度看场景等很多效果。”卢海波补充道。在现场,互动剧的编辑器也被展示出来,这个编辑器俨如橙光游戏,它支持内容创作者搭建多支(舌战群儒的主人公是谁?舌战群儒的主人公是诸葛亮。舌战群儒典故的意思:舌战、激烈争辩;儒:指读书人。指同很多人辩论,并驳倒对方。)线剧情,并直接上传不同阶段视频内容。
像这样类似的创新点还有很多:比如为了支持天南海北节目组能快速剪辑而开发的4K云制播技术,运用这项技术剪辑团队减去了很多繁琐的传送时间,对剪辑设备的要求也降低。节目组录制完后即可在云端剪辑,让大型素材快速加工后回传;再比如为了媒资上传而开发的自动打点剪辑取标题技术,这项技术开发后,上传分段节目不再需要大量人力。媒资团队将节目成片直接上传后,系统即会自动打点取标题,人力只需要简单审核编辑即可。
从技术掣肘到助力内容找下一个增长点“我们追上其他几家的技术已经是2018-2019年,最开始成立的时候还是吃过一些亏。”卢海波回忆道。
2014年,视频行业还是优酷、土豆、爱奇艺天下。当时爱奇艺购买湖南卫视综艺播放版权,让《快乐大本营》等一批经典综艺有了网络播放渠道。也是同时期,湖南广电决定发展视频平台,作为重要战略成立了芒果TV。因为与爱奇艺的合同约定,湖南卫视仍可在自己的网络平台播放综艺,这也让芒果TV有了播放台里媒资的资格。
据芒果TV内部员工回忆,当时,芒果TV受限于技术,媒资上线总比爱奇艺要晚。比如当天播完的《快乐大本营》,爱奇艺在节目播完后几分钟即可上线到网站。但芒果TV还在上传媒资,解码技术也不好。几个小时后,《快乐大本营》登录芒果TV,画质清晰度也不如爱奇艺。
“那个时候,我们网站还容易崩溃,用户抱怨卡顿。不像现在,我们经常和业务各部门吃饭,讨论的都是未来还能怎么做了。”卢海波说。
从不被看好到终于追平行业水平,芒果TV走了近五年。
“时代不一样,创作的阵地也不一样。我们一定会去配合我们的艺术创作者,去攻坚克难,帮他们配备这样的工具和场地。”谈及未来,卢海波憧憬道。
而对于芒果TV的未来,从技术研究方向及业务布局就可见一斑。
在今年算法大赛中,有这样一道赛题,需要参赛选手设计算法让手机可检测音乐节拍并做出互动。在展区,芒果TV以《披荆斩棘的哥哥》为例进行了展示,展示区的手机在使用最新版芒果TV APP播放节目时,手机可配合节目内容实时增加震动与闪光灯。
虽然这样的呈现方式仍局限于硬件功能(比如手机),但芒果TV已经在文娱类互动体验方面加码了。
芒果超媒旗下剧本杀品牌M-CITY
从芒果TV母公司芒果超媒目前的业态来看,除却视频内容业务外,小芒电商与剧本杀、密逃等线下实景娱乐也成为了新的探索性业务。特别是以M-CITY为品牌的剧本杀类业务,作为芒果TV旗下综艺《明星大侦探》延申业务,目前也依托于资源协同和明侦宇宙IP的知名度在剧本杀行业占据着一席之地。
吴红对36氪透露,芒果TV创新研究院针对MR相关的技术研究也已经有了方向,在不久后,创新研究院也会上新MR+剧本杀类工具,让玩家能在虚拟场景搜证和体验剧情,增加剧本杀沉浸感。
那么在未来,芒果TV会往哪儿去?
技术与内容创作深度融合,让内容不再受限于“一块屏幕”这样的呈现方式,一定是必然的。
标签:虚拟,主持人,外网