认识达内从这里开始

认真做教育专心促就业

量子视觉张聪：如何用4k的解码芯片达到10k的效果？

发布：互联网
来源：互联网
时间：2017-05-12 14:22

青岛IT培训：5月8日,量子视觉举办了分享会,与大家一同探讨VR内容的商业化之路到底如何走下去.在演讲中,张聪解释了相机采用20镜头、10K的意义,同时详细介绍了目前关于内容拼接存在一些问题和评定质量方法.

    目前大家使用的VR相机大多是鱼眼相机拍摄的,它的优势是可以拍摄很大的fv、方便拼接、减少相机数量.这带来的缺陷就是视频边缘的分辨率比较低.而广角的就能保证整个视频的质量.

    张聪表示,目前有两种方法可以用4k的解码芯片达到10k的效果:动态码流和动态区域,后者也是目前量子视觉采用的解决方案.

    拼接质量的优劣主要看以下四个方面:是否存在缝隙;光线的过渡是否自然;3d不晕并且给人很强的沉浸感;清晰度.而拼接存在的主要问题包括内容的缺失、变形和重影.

    以下是演讲实录：

    张聪:我们认为,VR市场最终会被几个大的公司统治.但是内容是一个会百花齐放百家争鸣的环节.目前无论是影视、游戏、旅游业等统一的特点就是缺少优质的内容.量子视觉助力优质内容的cp,帮助他们生产高质量的内容.我们举办这次大会就是为了帮助这些团队,让他们在制作内容的时候不会因为硬件、解决方案而制约他们的想法.这样是我觉得对VR行业最深层次的推动.

    创业,最关键是解决别人的刚需.极大的降低成本、提高制作效率、提高用户的体验,这是量子视觉做解决方案时贯穿的三个主旨.

    我们希望用户使用我们设备的时候可以降低足够多的成本,包括在设备、人工、后期剪辑等.当前很多设备包括gopro、索尼等,他们方案的把控程度、后期处理的时间都是非常大的消耗.

    VR是一个颠覆性的产业,它能给人一个崭新的体验.但是目前因为拍摄的画面质量和内容都偏低,所以要把VR的刚需做好需要提高用户的体验.

    AURA只有20厘米直径,为什么我们能把20个摄像头装进排球大小的机器里?我们是从算法出发,而不是先把这个硬件做起来在设置算法的.对于拼接的算法,学术界至今还没有能完全解决.所以基于现有的算法,必须有的硬件去配套,才能做到最好的效果.

    为什么要做20个镜头的相机?

    广角的视频和鱼眼视频的区别.目前大家使用的VR相机大多是鱼眼相机拍摄的,它的优势是可以拍摄很大的fv、方便拼接、减少相机数量.这带来的缺陷就是视频边缘的分辨率比较低.而广角的就能保证整个视频的质量.

    目前市面上较好的全景相机像gopro、jaunt等水平方向的镜头数量都不会低于12个.我们水平方向16个镜头是目前能拍摄出最好的效果.

    我们在镜头上也做了改进,市面上有的镜头是塑料的,在散热和稳定性上很差,我们现在用的是玻璃的,这样能保证高压工作的稳定性.

    "10K"一词,最近被太多人提及,硬件厂商也习惯了堆参数,究竟拍10K的视频是否有必要呢?实际上是有必要的.人眼可视注意的区域不到70°,大部分VR屏幕的主要用途都是锁在70°范围内,现在如果是一个2.5K或者3K屏,有一半的分辨率是1440p,只集中在在70°范围里,只有乘以5才能达到屏幕的极限."现在左右眼8K的视频,可以达到现在2.5K或者3K的屏幕极限.AMOLED屏幕,只有达到10K的画质才能把这个屏幕用满."张聪向笔者解释道.

    拼接质量的四个方面

    拼接质量的优劣主要看以下四个方面:是否存在缝隙;光线的过渡是否自然;3d不晕并且给人很强的沉浸感;清晰度.而拼接存在的主要问题包括内容的缺失、变形和重影.

    目前最常用的是gopro的kolor、facebook的surround360,而我们采用DKV.kolor很难把所有内容都拼接到;Facebook的算法可能会造成图形的拉伸恶化形变,相较之下我们在这方面的算法还不错.

    不同的拍摄会导致亮度差别大,过渡也比较不自然,导致模糊.Facebook并没有在这方面进行优化,我们对每个像素都会计算大约的参数.

    好莱坞的3d做了很长时间,他越做越好,越做越舒服.我们目前只是想做到头不晕,这就需要没有垂直方向的视差,并且同深度水平方向视差做到一致.kolor只是把左右眼的画面做了一个简单的平移.Facebook必须依赖硬件,但是不同硬件算出来是不准的.

    什么样的设备能支持10K?

    pc一般电脑很难带的动,可能需要价格15000左右的电脑配置可以直接进行播放.

    而目前骁龙835只能支持4k的解码,我们如何用4k的解码芯片达到10k的效果呢?

    第一种通用的是动态码流.看的地方清晰,不看的地方模糊.我们人眼看到的是不到2k的区域,所以以4k的解码芯片是足够的.这样的缺陷在于换画面的时候会有不到一秒的延时.

    第二种是动态区域.就是渲染图像里面动的区域渲染,不动的区域不进行实时渲染.这意味着10k的视频不一定要在手机上全部渲染出来,只要渲染部分的区域就能达到10k的画面质量,这也是我们的解决方案.

    最后打个小广告.我们开放拼接平台,也可以帮助用户提供专业的拼接服务,价格其实很便宜.

    针对不同的客户需求,我们将推出新的VR摄影机:AURA MINI.设备为8目190度鱼眼镜头,电池可更换续航更佳,体积上将是市面上体积最小的专业级VR摄像机能达到360°3D 8K的画质效果及360°音频采集,可做直播,配合AURA WORK和AURA Studio能够实时监看,无缝拼接.就像之前说的,鱼眼镜头画面质量没有大的高,但是适合小的studio使用.

更多青岛IT培训相关资讯,请扫描下方二维码

青岛IT培训