中国电子视像行业网

增强现实中国CEO 张明军先生与我们分享《VR技术的创新应用与实践》

    当前,虚拟现实VR正在给我们的手机带来了一波有趣的新玩法,VR正在越来越多的被应用,苹果在用它,谷歌在用它,并且大多数人根本不会在意电脑图形在你面前漂浮和电脑图形融入面前场景之间的区别。接下来,就让我们请出增强现实中国CEO 张明军先生,与我们分享《VR技术的创新应用与实践》。让我们用热烈的掌声欢迎张总!

        张明军:大家下午好我叫张明军,我们的机构叫增强现实中国,我们是国内最早的一个关注与增强现实技术开发的这么一个网上的社区,经历了五年发展,大家都知道在2016年这个虚拟现实和增强现实进入了科技界的一个非常热的方向,我今天分享的主题是AIVR技术的创新应用与实际,小标题是Ncam混合现实拍摄。

        我们的社区logoAR in China,我们是VRAI的观察者。

        在过去的5年当中我们组织参与了从慕尼黑到北京再到上海增强现实领域行业内的一些峰会和沙龙,这是我们社区的网站,提供了行业的深度资讯,我们还有两个增值服务,一个是行业的人才培养,以及我们现在的供应商平台,我们做的一些海外技术和系统的引入。

        我聊的方向和今天这个主题有一些区别,大家现在对虚拟现实应该不陌生了,看一下上面这些图片,宏基,惠普,联想,戴尔,华硕都有,这些在国内是买不到的刚刚出货,下面是增强现实的一些国内的厂商出的产品,这些产品如果大家不是这个行业的话,估计连见到的机会都没有。这个算是有别于计算机显示设备,我今天所聊的话题就是和这些设备相关的。

        Ncam混合现实拍摄系统,先来看一段视频,大家应该第一印象想到的这不就是虚拟演播室吗,没错,今天给大家带来的这款Ncam系统其实是一个升级版的虚拟演播室,它所输出的内容不是刚才的那些虚拟设施头盔里看的内容,所生成的内容就是像电视机所输出的内容视频流。

        Ncam是一套多传感器摄像头和定制化服务器组成的混合现实拍照的,有比较高的适配性,搭配简单,设置快速无难度没有场景限制,追踪准备无偏移,是一套摄像机位置追踪系统,对摄像机位置能够进行全位置的记录。这样有什么作用呢?再来看一个视频。这个汽车是实时合成到整个视频流当中的,这个车是虚拟的,真人的倒影是可以在车上进行显示的。这个场景演示的是虚拟的物体可以接受实时的光照方向和实时的色温。在几个月前评估和谷歌都推出了自己的增强现实的开发平台,在移动端做增强现实的应用,有了这两个应用又可以实施类似这样的功能,但是如果在专业的视频领域的话,比如说要和我们的摄像机结合,要进行直播的话,那么我们的这套Ncam系统是目前在这个领域是唯一可以实现这样效果的,也是经过超过五年的商业化市场验证过的。我们现在Ncam在西安成立了混合拍摄功能中心,提供视频制作的服务,以及系统的技术支持。这套系统融合了很多国际和电影相关的奖项,包括最著名的艾美奖,在电影领域的应用就是Previsualization过程,这个过程在国内经常用软件的合成,这样效率相对比较低,如果出现前期拍摄和后期合成出现不对位,如果重新拍的话成本是极大的,耗时也是非常要命的。大家看到了视频,一定能想象到,这种方式一定是非常棒的故事讲述的方式,来看一下这个视频。如果大家对虚拟演播室有了解的话,Ncam这套优点在于,所有的画面镜头其实动的是比较随意的,比如说后面那个摇臂那个相机,这个系统可以自己拎在手上,而且不仅仅限制与演播厅里,我们可以做室外的直播,这都是可以的。

        摄像机位置的精确追踪,一般现在国内相机的位置合成是需要软件算法,还需要进行调整和校正,如果用这套系统,摄像机的位置就可以在拍摄过程中生成出来,如果再进行电影后期的合成就非常方便了,这个要比人工的生成要稳定很多。在电视和视频产业的应用当中,我们认为这种方式给整个电视内容生产提供了一种全新的可视化故事的一个讲述,我们可以看一下AMHQ的天气预报用到了Ncam系统,它的最终呈现效果是什么样的。

        后面的显示器是真的,前面的车是假的,后面的画面和前面虚拟的场景是无缝结合的,主持人在台上是看不到我们现在看到的车的,但是她能看到屏幕里的车,所以对于一个专业的主持人来讲,讲这个故事有这个后面这个屏幕和前面的提词器就是一个非常棒的讲解。

        我们现在都在玩直播非常火,在给主播刷礼物的时候,那个动画就是在屏幕上转一下,如果主播是在我们的演播室进行直播,你觉得她讲的好要给扔一个游艇或者汽车,这个汽车是在我的身边跑过去的,这个汽车是知道周围环境是什么,可能是一个墙壁可能是一个屏幕,它可能会从屏幕里开出来,这样的直播效果和我们现在的是完全不一样的。

        无限制拍摄场景,这套系统不仅仅可以在室内的演播室,可以放到户外,国内现在有这样的定位方式是,我的演播厅有一些追踪点,摄像机上有红外摄像头,就是说这个摄像机只能在固定的地方移动,而这套系统可以在户外进行直播。再欣赏一下这段视频。我们在西安成立的功能中心现在已经在部署,其实已经开始和很多本地的需求方在对接了,包括一些医疗类的节目,包括我们和陕西师范大学和西北大学的一些生命科学,包括一些高中的课件都有意愿来用我们的影棚进行课件的录制。这套设备搭建也非常容易,比如要在这套设备上搭建这个东西可能需要2个小时的调试就可以,加上我们的工程师,你有一个一般的美术团队就可以进行一个实时的增强现实的演播。比如我如果要讲增强现实另外一个汇报方案的时候,现场大家看到的场地是空的但是如果直播出去的话效果就是这样的,非常精彩。

        它的输出也比较多样化,支持HDSDI的输出,生成包括摄像机SDI文件,再欣赏一下这段视频。这套系统现在支持(英文),这两个是非常重要的虚拟现实的引擎,以前是做游戏开发的引擎,刚才放的第一个视频是(英文)和(英文)公司一起推出的TV Show栏目。结合Ncam引擎有什么优势,大家看国内片子5毛钱特效可以得到改善,开发类似这样的交互的效果,其实所有的美术团队都可以非常容易的开发这样的内容这样的混合现实效果有我们这套系统,也可以非常简单的创建出来。可以应用到整个电视晚会,车展活动都可以应用到我们的Ncam系统。这个视频大家可以看一下车里人的表情,周围人的感觉,这个镜头的调整可以看出来,整个追踪是非常稳定的,而且追踪的精确程度是在毫米级别的,这个车本身是白色的,我们追踪的虚拟的视觉特效叠加上去的时候,摄像机的移动是严丝合缝的。

        我们今天这个会议视频如果放到直播或者网站上,它的二次传播效果是非常好的,所以这套东西我们制作内容在进行视频传播时有非常大的吸引力。

        这套设备现在已经成功的和好莱坞的一些项目在合作,特别是在一些知名的电影,比如《复仇者联盟》《美女与野兽》都用用到这个系统做。合作的客户包括了欧洲、美国,国内和苏州电视台、湖南电视台和腾讯视频有过合作。

        这是我今天给大家带来的混合现实拍摄的介绍,谢谢!

       

        主持人:感谢张总的介绍讲!今年我们的新媒体综艺真人秀和选修节目中不仅出现了真人,还有AR的玩偶,所以我们也共同期待在未来各位不断努力。