HHI为VR视频改善HEVC高压缩编码效率,有望2020年纳入最终标准

在NAB 2018大会上,Fraunhofer Heinrich Hertz Institute(HHI)展示了他们在沉浸式成像技术领域的创新成果。由于分辨率和帧率的增加,需要对数据进行流式传输和相应的压缩。作为国际电信联合会视频编码专家组(VCEG)和国际标准化运动图像专家组(MPEG)的合作伙伴,Fraunhofer HHI提交了关于先进编码技术的提案,希望在2020年前纳入最终标准。在NAB 2018大会上,Fraunhofer HHI展示了他们的编解码器,并显示出相对于高压缩编码标准(HEVC),在从标准高清到高动态范围超高清内容范围上的编码效率改进。这使得该编解码器更适合于360度视频和虚拟现实应用。在NAB 2019大会上,Fraunhofer HHI还将展示世界上首个以超过4K分辨率进行实时流传输的VR 360度视频演示。此外,Fraunhofer HHI开发了一种全新的360度多相机捕捉与照明系统,用于创建移动人物的3D视频内容,并可以直接集成至VR和AR应用程序。
HHI为VR视频改善HEVC高压缩编码效率,有望2020年纳入最终标准

VR创企Dexta Robotics完成数千万天使融资,完善VR底层触觉交互技术

VR公司Dexta Robotics宣布已完成数千万元人民币的天使融资,由磐谷创投领投,欣旺达跟投。Dexta Robotics致力于利用机器人技术实现手部触觉交互。该公司设计生产了带有力反馈功能的无线虚拟现实交互手套Dexmo,在虚拟世界中允许用户感受到虚拟物体的大小、形状和硬度,实现触摸。Dexmo能够捕捉完整的手部动作,并提供即时力反馈。这个装置向手指提供反作用力,让用户能够感受到虚拟物体的物理性质。最新的Dexmo在硬件和软件方面进行了改进,提高了舵机的生产加工工艺,并实现了对Windows MR头显全系列头显的软件兼容。Dexta Robotics表示,目前还没有一款成熟且体验好的数据手套产品,而他们的使命是通过机器人技术解决这一难题。Dexmo的客户主要为企业和科研机构,包括NASA、Toyota、Google等。他们预计2018年底可以达到千万级别的流水,并保持高利润率。未来资金将主要用于招聘和继续产品研发。
VR创企Dexta Robotics完成数千万天使融资,完善VR底层触觉交互技术

传2018年的iPhone将搭载三透镜系统

根据供应链消息,至少有一款2018年的iPhone模型将配备三透镜系统,有望提高照片质量并增加光学变焦功能。如果新版iPhone搭载三个透镜,将与华为P20 Pro类似。另据报道,今年秋季发布的三款iPhone中的一款将采用6P透镜系统,通过某种方式将5倍光学变焦与现有的2倍光学变焦结合。额外的透镜可能会提升低光环境下的图像质量,或者用作测距仪以增强摄像头功能,也可能会像Face ID一样,使用深度映射器来支持AR应用。报道提到的Economic Daily News网站并没有透露具体细节或摄像头性能表现,并且该网站之前关于苹果计划的报道存在可信度问题。此外,根据早前的预测,苹果可能会在后置摄像头上使用另一个透镜进行测距,但最终只在前置摄像头上搭载了VCSEL用于Face ID功能。目前最热门的传言是,苹果正在为2018年下半年准备一款6.5英寸的OLED iPhone,可能被称为“iPhone X Plus”。
传2018年的iPhone将搭载三透镜系统

谷歌开源VR180视频、图片格式,人人都可创作VR180

谷歌于2017年推出了VR180视频格式,可以拍摄或创建引人入胜的沉浸式视频,使用起来非常简单。谷歌今天开源了有关创建VR180视频和图片的详细信息,供开发者和厂商探索其可能性。对于VR180视频,谷歌扩展了Spherical Video Metadata V2标准,支持基于网格投影,允许消费者相机输出原始鱼眼片段,并通过Camera Motion Metadata Track来稳定视频,提供更舒适的观影体验。生成的照片按照现有的VR Photo Format编写。当使用Cardboard或Daydream View查看基于VR180拍摄的照片和视频时,可以使用Google Photos或YouTube与他人分享素材。谷歌表示希望这些工具可以帮助任何人轻松拍摄VR内容和浏览观影,未来还将发布更多工具以便编写和播放合适格式的VR180照片和视频。
谷歌开源VR180视频、图片格式,人人都可创作VR180

谷歌推出高质量360度视频拼接算法:基于视图插值的光流

谷歌的Jump Assembler是一个VR视频制作流程工具,可以简化从拍摄到播放的过程。最新的更新为Jump Assembler带来了全新的高质量拼接算法选项,基于多视图三维重建,可以产生与谷歌标准算法相同的无缝3D全景图,同时减轻场景中的伪影并生成清晰的深度图。这种算法利用光流概念将像素匹配,并通过局部移动像素插值中间视图,填补拍摄设备上相机之间的空白,实现无缝拼接。此外,谷歌的新方法还利用多视图三维重建计算每个像素的深度,通过任何能看到该像素的相机帮助建立深度,使拼接过程更可靠。这种算法在处理遮挡方面也更加优秀,可以利用附近相机图像来确定隐藏在一幅图像中的对象的正确深度,减少拼接伪影并生成具有清晰对象边界的深度图。对于VR电影制作工作者来说,可以通过选择“high quality(高质量)”来尝试这种全新的算法。
谷歌推出高质量360度视频拼接算法:基于视图插值的光流

VR视频云服务商Pixvana成立VR内容制作平台WunderVu

VR视频云服务商Pixvana宣布推出旗下的VR制作工作室WunderVu,该工作室提供一站式的VR制作服务,包括客户咨询、概念开发、制作指导以及视觉效果等前期和后期制作的所有方面。WunderVu将利用Pixvana基于云端的SPIN Studio平台,为客户提供行业领先和全面的VR制作服务。WunderVu由联合创始人兼创意总监Scott Squires和执行制片人Aaron Rhodes共同创办。Squires在视觉特效领域拥有超过30年的经验,并曾参与多部知名电影的制作。Rhodes在电影和视频行业有近20年的经验,曾为Adobe、Hewlett Packard、Oculus和英伟达等客户制作过视频。WunderVu与Pixvana SPIN Studio之间的合作推动了XR的发展,为市场带来突破性的创意和故事叙述工具。WunderVu目前正在与西雅图海湾人等合作开展VR项目,并与大型机构合作为品牌带来XR故事讲述的力量。Pixvana创始人兼执行总监Forest Key表示,他们致力于通过优化的头显、惊艳的内容和强大的平台推进VR生态系统的发展,并解决VR内容质量参差不齐和端到端体验等问题。
VR视频云服务商Pixvana成立VR内容制作平台WunderVu

在Oculus平台发行的最佳实践:抢先版的“要”与“不要”

Oculus Store的Early Access是用户先行预览VR体验的区域。Oculus最近通过博文介绍了一系列关于“Do’s and Don’t’s”的建议,以帮助开发者更好地利用Early Access。他们强调了几个要点。首先,开发者应该寻求用户反馈并倾听他们的意见。提供机制来收集社区的反馈,并根据反馈采取行动。其次,抢先体验版应该包含能够展示正式版本质量的“垂直切片”。第三,开发者在推出抢先体验版之前应该开始推广,并且要持续不断地推广。最后,开发者不应该依赖第二次游戏发行机会,因为抢先体验版的营收和下载数据与非抢先体验版接近。总之,抢先体验版是开发者推广应用的开始,但完全版的推出时机并不会带来明显的提升,因此开发者需要充分利用抢先体验版的机会来提升游戏质量和用户体验。
在Oculus平台发行的最佳实践:抢先版的“要”与“不要”