本篇文章1597字,读完约4分钟
大多数人通常在网上冲浪什么的,但是他们对声音的要求不高。与这一特性相对应的是,在线视频有两个频道就足够了,可以区分左耳和右耳。电影和电视制作人在图片上花费了大量的精力。然而,在虚拟现实时代,简单地获得两个频道似乎有一个问题:“我”可以在虚拟场景中通过耳机听到有人在说话,但我不知道谁在说话。
解决这个问题的最好方法是全景声场。全景声场不仅可以恢复视频场景的声音,增加沉浸感,也是引导观众注意力最自然有效的方式:在日常生活中,有人在背后呼唤自己,他肯定会回头看。最近,从事虚拟现实声音的时代拓凌刚刚获得了数千万人民币的融资。我们与时代拓凌首席执行官孙就全息声场交换了意见。
对全景声场的简单理解是指当人在环境中时,不同角度和位置的声源会在不同的时间发出不同的声音,整个环境中的声源及其位置和时间信息共同构成一个声场。通过记录声场数据,我们可以了解整个环境的声音状态,然后我们可以还原当时环境中听到的声音效果,即我们可以区分声音的方向和距离,人们面对不同的角度,听到略有不同的声音。
为了获得这样的声场,需要专业的声场获取设备。为解决这一问题,时代拓凌公司开发了便携式360度声场记录仪,工程样机已经成功测试。孙薛婧告诉氪36,他们的录音机最终售价可能是几千元,vr工作室完全可以负担得起。虽然他们的设备和专业级别的昂贵设备在性能上肯定有差距,但是高端设备带来的性能提升对普通人来说并没有太大的不同。换句话说,他们的设备更具成本效益。
虽然全景声场是采集的,但观众最终还是会听到双通道的声音,这需要一系列的处理。时间拖铃的录音机用四个声道收集声场。采集后,需要根据这四个声道的声音计算声源的位置和距离,模拟声场,声场随着用户头部的旋转实时旋转。最后,根据头部的瞬时角度,从声场中实时渲染并输出双通道声音。通过听这样的声音,观众可以知道位置和距离,例如,有人从后面呼叫自己。
中间的这一系列过程显然非常专业,这也是困扰许多虚拟现实工作室的原因。因此,时代拓凌准备了相应的解决方案,通过云和sdk简化了整个流程。他们的记录器记录的声场文件与捕获的图片一起直接上传到他们的云中,他们的算法直接帮助完成图像拼接和声音处理工作,并生成全动态视频文件。由于播放器的声音是实时交互的,网页上当前的h5播放器还没有工作,需要他们的应用程序来播放生成的全动态视频。
声场记录器和后续解决方案将很快推出。然而,在全动态视频中有大量的图片材料,它们相对较大。上传到云中可能非常耗时,并且在云中拼接也会影响图片后处理的自由度。对于这些问题,孙表示,他们将继续优化工程流程,同时也在开发客户,使之更方便用户。
目前,全景声场技术除了时代在发展,在中国也有少数,但没有一个拿出成熟的商业解决方案。外国音响巨头孙的前东家杜比公司也在推广这项技术,诺基亚的ozo全景相机也具有采集全景声音的功能。孙薛婧告诉36氪,时间拓跋的最终目标是一样的杜比和诺基亚。他们都想达到戴耳机的效果,就像没戴耳机一样,而且他们能准确地听到声音的位置和距离。然而,这三家公司采用的技术路线是不同的。《时间拓跋》的技术路线可以在移动端顺利运行,但另外两条不行。
尽管技术路线不同,一些国外的虚拟现实团队,如虚拟现实系统,已经开始采用全景声音技术。我们也期待更成熟的全景声音技术解决方案尽快出现,让vr视频能够尽快弥补声音的重要环节,给观众带来更好的沉浸感,推动vr影视产业的发展。
2016年将会有越来越多的虚拟现实参与者,我们也在密切关注虚拟现实产业在过去16年的发展。从事虚拟现实或对虚拟现实感兴趣的朋友,特别是对全景声音感兴趣的朋友,欢迎与我交流(微信:838848010)。
尤里的原始文章,如果转载,请注明出处:http://36kr/p/5043397
“读完这篇文章还不够吗?如果你也开始创业,希望你的项目被报道,请点击这里告诉我们!”
标题:【VR 2016】VR 视频光有全景画面是不够的 全景声场才带感
地址:http://www.j4f2.com/ydbxw/8024.html