在钛坦白第24期,我们邀请了六位钛客分享和探讨“泛娱乐时代VR的新玩法”。本文根据微鲸VR副总裁许贤的分享整理。
许贤曾就职于联想,拥有十余年移动通信产品研发管理经验。2014年10月,他成立了乐蜗科技,专注于虚拟现实领域技术研发,曾获得联想君联天使轮千万级投资。2016年4月,乐蜗被微鲸收购成立微鲸VR,微鲸宣布,今后3年在全球范围内投入10亿元创新产业基金,打造千人VR内容创新团队,生产1万小时的VR内容,并希望在在两年时间内,制作出标准VR电影和电视剧。
以下是许贤在钛坦白分享的干货,由钛媒体整理:
我给大家分享三个数据:第一个是友盟的一个数据,2016年第二季度相比第一季度,VR的用户大概增长了465%;第二个数据是硬件销售的数据,我们自己统计过,中国市场每分钟大概有100台VR设备被卖掉;第三个数据是所有的VR用户里面,对视频类的VR内容感兴趣的用户达到了80%,是超过游戏以及其他所有类型内容的……这些都是激励我们不断在VR视频内容制作和发展用户上努力前行的原因跟动力。
微鲸在VR内容录播的实践
我先说一下在内容制作方面微鲸到底做了哪些工作。我们把内容制作分成两块,一块是录播,一块是直播,我先说录播方面的内容。在录播上面,我们做了《盖世英雄》、《中国新歌声》、《极地》、《超神偶像》、《SH48 MV》、《亚洲热播盛典》,《热播电跑》、《中国民族节》、《法国波尔多酒庄》,《豆瓣音乐节》,《英雄联盟电竞》,《蒙面唱将》,《凯撒游轮》等等,我们制作的内容大概分成两块,一块是综艺类的,我们做得比较多,另外一块是偏音乐跟故事类的,像MV、纪录片。
如何看待VR和大IP合作?
刚才庄总(兰亭数字CMO&COO庄继顺的钛坦白分享)也提到了,VR如何和大IP来结合,我们其实是做了一些IP的,像《盖世英雄》《中国新歌声》都算是国内比较大的IP,我们其实内部对IP合作大概分两种观点:第一种观点是IP比较大,受众用户会比较多,在VR缺乏好内容的阶段,利用大IP来获取用户、用户的认知,包括让第一批用户去感受什么是VR体验是非常有帮助的。反过来看,其实大IP对VR的节目形式是有很多的限制的,就比如说我们录《中国新歌声》的时候,因为它是跟电视同步播出的,这个节目就是为电视节目来设计的,你不可能针对VR做太多的改动,在节目形式、舞美、灯光和机位布置等环节上面都不太可能为VR做特别多的改动。我们在做的时候,其实也是蛮痛苦的,也碰到了很多困难,中间我们也想了很多办法,设计了很多在传统电视上无法看到的角度和镜头,比如说我们在那英和汪峰中间安装了一个VR机位,这个机位让观众体验的是作为四位导师之外的第五位导师,用导师的视角来看整个节目。拍摄VR节目跟拍摄传统节目最大的不同是,需要对机位包括视角做一个定义,选择用什么样的视角来定义这个机位。其实从VR的表现形式来看,我们更倾向于深度做一些不是那么大的IP,可以相对比较灵活,可以为VR定制一些内容跟剧情。
如何拍摄优质的VR内容?
我是做技术出身的,会多从这个角度进行些分享。
做VR内容,首先你要有一台好用的VR相机,我们前前后后大概总共研究了30多种VR相机的方案,很多方案都推倒重来过,我们自己也改装、二次开发过很多VR相机,最后我们常用的VR拍摄的设备,大概有四到五种,我们会根据不同节目的要求跟节目的制作周期、成本,选择符合要求的设备。
我们用的最高端的设备是Jaunt One Camera,就是本文配图里那个有点像南瓜头的设备。使用时一共有24个摄象头同时录,包括水平的16个,天上的4个,地下的4个。后期制作有一个云服务可以非常方便的生成VR内容,而且是360度全景3D的。我们也会用其他设备来作为补充,包括用单反、gopro,其实拍摄用什么样的器材是没有统一的标准的,需要看摄制需求,有很多因素决定,比如你的成本、拍摄的光线环境、空间的大小。而且一部片子也不是说用一种拍摄器材就能完全拍到底的,一般需要用很多的拍摄器材来配合。
Jaunt One Camera的优点是集成性比较好,所有相机都同步,统一供电、一键开机,可以远程监看,而且它利用云对视频进行拼接处理,能为后期省下很多时间成本。当然它也有很多限制,比如说比较重、成本高、数据量庞大,用它拍10分钟大概能产生300G的数据,上传、下载和存储的成本都比较高。
说到后期,我们有一个数据,我们录一期综艺,会用10个机位,用五个小时录制时间去计算的话,大概会产生20T的数据,这些数据当然后期还要用很多软件去处理,像SKYBOX、AE、AUTOPANO,这个处理起来也是非常耗费人力跟时间。
现在很多人看到VR视频的效果不怎么好,很重要的一个原因是网络带宽限制,我们认为效果比较好的VR视频分辨率至少要达到4K的标准,比较好的清晰度的情况下大概是20兆到30兆的码率,这个码率其实对目前的中国的互联网来说要求是比较高的,我们在传输方面也用了很多的算法跟技术,比如说我们有多面体的编码、动态码率,这样我们目前能做到的数据是可以降低大概50%的带宽,就是说你在画质达到一样的情况下可以省50%的带宽,或者你在带宽同样的情况下,你可以提高一倍的码率和清晰度。
VR视频的未来——直播
录播这块我就不多说了,微鲸VR还做了很多直播方面的VR内容。我们前不久投资了美国的直播技术公司NextVR,我们把直播作为非常重要的内容产生、内容呈现的方式,想追求更多VR在直播方面的应用。
我们为什么要去做直播呢?VR录播内容做起来我们觉得,第一是成本比较高,第二是内容产生的速度受到很大限制,而直播内容时效性比较高,而且内容产生的速度相对较快,也能使目前VR内容比较缺的状态有所缓解。
在直播方面,我们做过比较多的案例:足球赛,有中国国家队的、足协杯的;演唱会,比如SNH48的年度总决选、致青春演唱会、昆仑决的比赛、冰上盛典、薛之谦的演唱会、MTV金曲大赏;运动类,比如不久前我们做的一个壁球比赛。
直播对我们来讲,更多的是技术上的挑战。首先,直播需要有非常稳定的前端采集、非常稳定的高效的VR实时视频输出,包括VR视频的拼接、渲染都要实时的完成。在传输端,我们的码率优化技术,对直播是非常有用的,能非常有效的降低上行的带宽跟下行的带宽。
互动直播是微鲸VR下一步将会重点尝试并且应用的方向。下面两张图是在上海进行的AC米兰元老队和上海老克勒队的比赛,每个人进去之前,你可以选择红队还是蓝队,按不同阵营坐在不同颜色的足球椅上面,你身后坐着不同队伍的球迷。看过直播、去过现场的人可能比较清楚,球的细节你是看不到的,我们在观众对面的看台,放了一块大的屏幕,把传统的直播信号接进来,这样你就既可以感受到现场的氛围,又可以看清比赛正在进行的每一个细节,把VR全景的概念跟传统直播信号拉特写或者说给慢动作的优势结合了起来。
还可以用语音进行交互,可以评论球,还可以去看一些球员的动态,这些都会以AR的形式在你面前的草地上面呈现出来。同时也是有多个机位可以自由去切换,你可以切到教练席的位置去看,如果说进球了,前场有进攻,你也可以切到前场离球门很近的机位去看。
微鲸VR会更多地在一些直播技术方面,包括相机本身,平台技术,在这些基础的部分里面去做更加深入的钻研。我们在业内是开放合作的,如果有创业公司或者说内容制作团队,在技术,在硬件或者说技术研发这块比较薄弱的,我们是愿意提供这样的帮助,帮助这个团队去做出更好的内容。我们在相机等硬件,以及软件的培训,包括后期制作的指导都计划在未来向更多的外部内容制作团队去做开放。
钛坦白群友互动:
佳音: VR直播,有带宽、观看设备等限制。另外,对于比如说足球比赛,速度要求比较高、场地比较大……微鲸有哪些经验?
许贤:在VR直播上面,带宽的限制我觉得是在目前来看最大的一个挑战,如果想做直播,清晰度要求比较高,延时又要求比较小,这个对目前VR来讲挑战是比较大的。如果不经过任何处理的话,VR视频相同的清晰度是传统视频带宽的大概5—6倍,比如说传统是两兆的带宽,在VR里面可能要10—12兆的带宽,我们目前的技术的水平是可以把他压缩50%,就降到原始带宽的一半左右。也就是说我们目前直播的带宽大概是高清大概是在6兆左右,但6兆对某些网络情况比较差的地方还是太高了,我们长期的目标是想把带宽降低到20—30%这么样一个水平,这样的话就目前的网络环境,或者说再过一年或者再过两年,随着网络带宽的增加,带宽这个问题将会被克服掉。
针对场地的大小,我们也是有一套经验的,就是说针对小的场地大概是需要做几个机位,根据比较大的场地是需要比较多的机位的,而且像足球这种超大型的场地的话,它其实在远处球员的细节包括球的细节其实是看不太清的,这样的话我们就想到把传统的直播信号再接进来,这样的话你既能感受到现场比较热烈的气氛,然后又能看清大屏幕上面的一些细节,比如说慢镜头,一些动作回放或者说一些拉得比较近的一些长焦的镜头。
佳音: 3年、10亿元基金、千人VR内容团队、1万小时VR内容、标准VR电影和电视剧…………微鲸VR的计划宣布了5个月了,现在进展如何?具体有什么样的计划?
许贤:我们四月份战略发布会的时候是说了三个数字,10亿、1000人、一万小时,三年的时间内完成。跟大家汇报一下,在投资布局方面,我们联合MSG跟Jaunt三方成立了Jaunt中国,主要的目的也是第一是推广Jaunt的拍摄设备与VR图像处理技术,第二是帮助国内的CP能做出更好的内容,第三也把Jaunt这个平台在美国跟中国能做一个打通。
前不久我们也投资了NextVR,美国领先的VR直播技术公司,为什么要投资NextVR呢?我们也是看好了在直播这个领域能给VR带来更多的像大型体育比赛这种比较好的内容,然后我们也在跟NextVR探讨,把他们的技术在中国落地,根据我们的规划大概可能今年年底或者明年年初就会看到利用NextVR技术带来体育赛事的直播。
千人的VR内容团队,我们在开放的在跟外部很多团队在进行沟通跟合作。坦白讲目前其实还是有很多挑战的,包括VR的内容很难变现,包括跟之前庄总讲的,你没有一个可以参考或者说一个可以对比的标杆,我们目前也是想在各个领域里面做出一些比较精品的内容出来,然后包括去接一些广告或者说怎么样,把这个商业模式先趟出来,因为看到钱的话这个内容团队才会真正有动力去做。
一万小时的内容,是我们的目标,我们先不说时间吧,我们在内容数量上面,到目前为止,我们大概已经做了超过1000条内容,总时长上面其实还是有所欠缺的,我们也是在往这个目标去努力。我觉得在半年后或者说一年后,这个速度将会越来越快。
佳音: 目前都在布局VR,还是很难看到钱是吗?这方面许总有什么想法?
许贤:我觉得C端用户如果要有营收的话,我同意之前张总(热波科技CEO张庆浩在钛坦白的分享)的观点,现在来看可能还比较早,我觉得最早在C端里面能有营收的一个是VR的广告,就是说你在视频里面贴VR的广告,我记得有一个数据,在手机里面的广告大概转化率是2%,然后在VR里面广告的转化率大概能提高到20—30%,可见在VR里面广告包括你的注意力、接受程度跟关注度都是非常高的,在VR里面广告的价值可能会比在手机里面的价值大很多。
第二个我觉得在第一时间能从用户那边形成消费的就是直播,比如说我有一场演唱会,或者说球赛,能给你接近于或者说类似于现场这么一个体验,花很少的钱就能有一个VR体验来获得现场观看的体验,我觉得在直播上面消费者是有愿意买单的。
北京电视台导演:许总好,《极地》这个片子什么时候可以在微鲸上看到?这个纪录片的主线是一个什么样的设计,还是只是个风光片呢?和以往非VR纪录片有风格上的突破吗?
许贤:《极地》这个片子我们已经拍出来了,但是原始素材还再处理中,我们也是第一次在国内用Jaunt拍了一个完整的片子,有些流程上面还在优化,应该会在10下旬会有成片出来。故事性方面,不光是一个风光片,我们拍了一个藏族的婚礼,拍了一个西藏佛教的辨经,还有一个西藏传统的12年一次的旺果节,会有三个大的主题故事,最后计划出四条成片,每一条片子大概是在15—20分钟左右。
北京电视台导演:在用jaunt在拍摄《中国新歌声》现场时,对于棚内光比大和多强光源的环境下,VR视频的最后呈现效果也很好,这个是前期设备感光就解决了还是后期有再调试?
许贤:其实新歌声里面我们是用了Jaunt,但是没有全程用Jaunt,在内部光线比较复杂的情况下,我们是用索尼的单反去拍的,索尼的单反在暗光和强光对比比较明显的前提下表现比较好,后期也进行了一些调整,但是调整的余地就不大了。
我们没有用Jaunt全程去拍的原因,第一是其实用了Jaunt设备,后期处理的时间还是比较长的,第二,包括重量和体积,带来现场布局的局限性还是比较大。索尼的机器的sensor在这种非常复杂的比较暗的光线下面表现还是不错的,甚至某些情况下比Jaunt相机还要好一点。
北京电视台导演:现在都是在手机端做VR的app,微鲸VR有没有和国内国外的头显厂商做内容合作?
许贤:有的,也有跟其他硬件厂商合作的,手机的量还是最大的,中国7亿手机用户,微鲸VR app会开放跟所有硬件厂商去做合作。
(本文首发钛媒体,根据微鲸VR副总裁许贤在钛坦白上的分享整理)
…………………………………………………………
钛坦白第24期,六位钛客的分享已经结束,干货整理后会发布在:https://www.tmtpost.com/tag/1508094
钛坦白第25期:体育产业的新方向、新玩法
报名入群听课:在微信公号“钛媒体”(taimeiti),发送“钛坦白”获取通关秘籍
成为钛客、与钛坦白合作:请与钛坦白负责人佳音联系,邮箱jiayinge@tmtpost.com
根据《网络安全法》实名制要求,请绑定手机号后发表评论
我一直有个观点,是不是5G之后,或者说诞生一种新的压缩解码格式,VR才算有戏,目前大部分VR视频都是MP4制式,带宽的问题太大了。