VR在Web上仍然年轻,但幸亏像Arturo Paracuellos这样的先驱者,它正在取得令人印象深刻的进展。他是Inspirit的创作者,这是一种响应式的Web VR体验。Paracuellos介绍了他在Web浏览器中设计跨多个VR平台运行的场景的方法。
Arturo Paracuellos位于西班牙萨拉戈萨,自2001年以来他一直在创建数字互动体验。他将帮助品牌与受众建立联系的工作与寻找与数字用户互动的新方式的个人项目相结合。因此,他于2010年创立了Unboring,他的目标是帮助推动Web上的3D和VR发展,为与用户以前从未见过的方式互动提供机会。
体验Inspirit
Web上的VR面向一个非常有意思的用户群体。高质量的VR体验将在2016年面向大众,但需要将头戴设备(通过电缆)连接到功能强大的计算机或现代游戏机。然而,如今我们已经有了通过Web提供相当舒适体验的机会,这要归功于WebGL(该技术有Ricardo Cabello创建的three.js等库),可通过多种方式使用:
使用Google Cardboard + 智能手机 + Safari/iOS8或Chrome/Android的VR体验
通过Oculus Rift + Chrome或Firefox的最新版本(MozVR)实现VR体验,感谢Google的Brandon Jones和Mozilla的Josh Carpenter等人在为我们的常规浏览器整合VR方面付出了很大努力
使用智能手机浏览器的3D Web,利用陀螺仪在场景中移动
使用计算机浏览器的3D Web,使用鼠标操作
后两点非常重要,因为(通过响应式设计)它们是让大量非VR用户也能享受Web VR体验的入口,鼓励他们通过Web以一种廉价和即时的方式进入VR世界。
这就是为什么我想让Inspirit成为一个面向所有人的体验:因为现在Web给我们提供了一个机会,以一种全新的方式讲故事,与用户建立全新的联系。
灵感来源
尝试以交互方式讲述一个包含小谜题的故事,以推动体验的发展。要讲述一个故事,首先需要一个英雄。我们的英雄需要找到并放置一系列神秘的灯光,从而照亮他的微小世界。
Inspirit看起来似乎是一个关于光的故事,但其实更多关乎人。那些点亮我们内心并使我们完整的人;因为我喜欢认为有些人的存在让我们内心充满光明。
概念和3D场景的草图
最初的想法是让灯光创建一个环绕英雄的圆圈。每个灯光放置在底座上时,都会发出不同的颜色和声音。
最后,我决定在角色行进的路径后面加入山脉和其他元素。这可以帮助虚拟现实中,当你改变视角时,远处的物体看起来移动得更少。元素在画面中停留的时间更长,你能更好地欣赏它们。
多平台体验
有四种不同的方式可以体验Inspirit。因为该项目的目标之一就是向潜在客户展示我在多个层次上讲故事或创建3D体验的能力,让观众可以通过多种方式体验它。也许只有少数访问者会使用VR或Cardboard选项,但如果您能提供这样的选择,就能传达出您能够推动信息传达的程度。
出于这个原因,您可以在计算机上查看它(在体验开始时锁定鼠标光标),或者在具备陀螺仪或WebGL功能的智能手机或平板电脑上查看(特别适合许多iPad用户),使用Cardboard查看(Cardboard拥有大约50万的用户,对于iPhone用户,让它可以正常工作对我来说至关重要),您还可以使用Oculus Rift设备进行VR体验,所有这些都需要通过浏览器来实现。
体验VR故事的四种不同方式
技术挑战
主要挑战是学习基于WebGL开发Web VR,并发现特定的技术问题。在创建Cardboard项目(必须优化为智能手机)或Oculus Rift项目时,遇到了很多挑战。在WebGL建模和导出,将Web音频API集成到3D场景中以及使用粒子效果都是重要的挑战。
以动画人物为主角
使用Blender作为3D工具,第一步是建模一个简单的人物(1075个顶点),并创建一个骨骼以便根据用户的操作进行动作。之后,我创建了12个约2到3秒循环的动画。其中的大部分是为了导出到three.js的骨骼动画,使用的是该库附带的导出工具(在导出之前记得先移除Armature修改器)。
最后,在进行动画制作时,Michael Guerrero在three.js示例中提供的BlendCharacter类非常有用,只需要根据项目的需求进行适配。
Blender pose模式和在体验中的动画人物
3D音频
由于我专注于虚拟现实,我知道3D音效能够丰富场景,并使体验更加沉浸式。我对此产生了兴趣,首先是在阅读Felix Turner的一篇文章时,随后又在Jaume Sanchez去年的演讲“与Web音频API一起舞动”的时候进一步了解。在参加那次演讲后,我觉得总有一天我会在项目中实现这个功能。
我使用了THREE.Audio和THREE.AudioListener作为基础,并将其与SoundJS和PreloadJS集成在一起。因此,我创建了一个名为Audio3DControls.js的类,该类将使用SoundJS加载的声音缓冲添加到之前创建的THREE.Audio实例中。这样就可以创建一个频谱分析器以获取frequencyBinCount或处理音频的panner、gain或context。
在使用Web音频API时遇到的一个障碍是iOS的Safari浏览器与其他浏览器之间的差异,音频在用户交互之前会静音。此外,如果不断修改听众的位置,在iOS上可能无法听到音频。因此,对于我来说,与其不断移动它,还不如在相机位置变化超过5°时进行调整。
另一个需要考虑的方面是听众的位置。我创建了一个在摄像机和主角路径之间的看不见的对象。这样它离声音来源最近,并且会改变位置。对于固定的相机设置,如果将听众设置为0,0,0(同时使用panner音频进行调整),就无法获得预期的效果。
3D音频位置的映射
场景内的音频交互
我对项目的这一部分寄予了很大期望。我请音乐协作者Guillermo Laporta创作了一个分为7个部分的曲调。其中包括一个基础音轨和六个音轨,每个音轨对应一个解锁的讲坛。每个光源会激活一个新的音乐主题。
最后,我成功地使用了从音频分析器导入的FFT的平均值来处理每个音频。因此,根据强度,我们可以修改场景中各种图形元素的参数。同时,将character的步伐的播放速率与角色的速度同步,也非常有效地与角色脚步的声音同步。
音频如何修改场景中的几个参数
统一不同设备的体验
另一个挑战是使不同设备上的导航表现一致且良好。用户既可以使用计算机鼠标,也可以使用智能手机的陀螺仪、带Cardboard的智能手机或Oculus Rift。此外,对于快速测试,还很重要拥有一台计算机作为备选方案。
为了实现这个项目,我还必须修改DeviceOrientationControls、MouseOrientationControls和VRControls类,使其根据用户的视线方向发送一个角度作为圆形光标的控制器。此外,对于每种设备配置,视野(FOV)和摄像机的高度也会相应地改变,以适应设备的视野设置。
不同设备的不同设置
在开发虚拟现实应用中所学到的经验
我最担心的事情之一就是避免使用不当导致用户晕眩或不适。技术。我还想看看用JavaScript开发项目的可行性。
VR 设计
其中一个主要的教训是,在计算机屏幕上看起来吸引人的东西,在 VR 中可能会让人感到烦躁。在前者中,必须避免让观众不断转移注意力。避免多个元素同时朝不同方向移动,因为眼睛迅速疲劳,试图集中注意力。
VR 设计的经验教训
其中一篇与此问题有关的主要文章是 Mozilla 的 Josh Carpenter 撰写的《用 Illustrator 进行快速 VR 模拟》。他对 VR 中人类视野的处理方法非常有价值。VR 界面设计宣言也很有趣,特别是其中对人类视觉知觉的解释。此外,与 Temple Run 的创作者进行的采访也提供了在为 VR 设计体验时应该避免的一些提示。
“要高度敏感人们对运动的感觉,并避免在游戏中做可能导致晕动病的事情。”
“每当引起不由玩家直接发起的相机移动,你就在自找麻烦。”
VR 编程
尽管我使用了用户首次选择体验类型的系统,不过 Boris Smus 已经创建了一个响应式解决方案。WebVR Boilerplate 是一个根据用户要求创建不同类型导航的良好起点。
尤其是在优化与 Cardboard 的使用时,我遇到了两个问题需要解决:
管理设备的休眠时间。这是因为当你用 Cardboard 查看时,屏幕长时间不会触摸。在 iOS 中,这个方法仍然有效,但对于 Android 设备而言却没有这样的方法,你必须在WebVR Boilerplate 的 webvr-manager.js 中访问 Sleep Time 设置,有一种解决这个问题的方法适用于 iOS 和 Android 设备。
另一个问题是如何全屏和处于横屏位置来观看体验。在 Android 中,使用 screen.orientation.lock(‘landscape’); 结合 document.fullscreen 是实现此目的的一键简单方式。但在 iOS 中,我们只能在切换到纵向模式时显示通知。
角色持有不同的灯光
制作
借助诸如 Grunt 的工具,用于自动化发布桌面和移动任务,以及 Bower 用于管理库包,开发工作得到了极大加速。当然,一切的基础都是由 Ricardo Cabello 主要开发的 3D JavaScript 库 three.js,其中我使用了几个示例和类。此外,我将 WebGL 的部分分割成多个文件,每个类一个文件,结果是一个更有结构化和可扩展性的项目。
我通常使用类似 jQuery、TweenMax、SoundJS 或 PreloadJS 的库使编程更加舒适,并利用 js-signals 处理事件,以及 handlebars 用于模板功能。
最终成果
就像艺术书籍或皮克斯短片一样,我为体验的不同时刻创建了色彩脚本和截图。我喜欢认为,由于交互性,每个观众将以不同的顺序看到颜色。
最终产品可以在 inspirit.unboring.net 上查看。希望您喜欢这次体验。
未来的挑战
3D 网络世界以及 VR 的出现给我们提供了通过不同方式与内容进行交互的机会。我的目标是创建创新性的项目,以证明您可以在网络上直接获得惊人的结果。
对于未来的项目,我想使用纹理来绘制角色,通过动态自定义尺寸优化并重复使用角色,并将 Leap Motion 集成到体验中。
您愿意与我合作实现这些目标吗?如果您觉得本文有趣,并且想要进行 3D/VR 网络项目,我很乐意听取您的意见。您可以在这里了解更多关于我的工作并与我联系。
您可以通过 Twitter 上的 @arturitu 联系 Arturo,也可以关注他的创新网络工作 @un_boring。