来自 Luma AI 的可在 Unreal Engine 5 上实时渲染同平台于 2023 年 4 月 3 日 捕获的 NeRF 数据的插件「Luma Unreal Engine Plugin」的 alpha 版已公开。
Luma Unreal Engine 插件
这是 Luma AI 的 NeRF 用 alpha UE 5(Windows)插件!
这个插件使用在本地运行的完整体积渲染。也就是说,不需要去折腾网格格式、几何、材质和流式传输。Unreal Engine Starter Project
包含本插件的 starter(游戏)项目可在此下载:
https://cdn-luma.com/public/resources/LumaAIStarterProject.zip用于电影化用途,推荐我们的 cinematic/film starter project:
https://cdn-luma.com/public/resources/LumaAIFilmStarter.zipHow to download Luma Fields from Luma Web
在各个 capture 的「下载」页面中,现在也可以查看可在 UE 5 中使用的 Luma field 文件。
https://captures.lumalabs.ai/me
已经有人开始尝鲜了
A quick test of the new NeRF #UE5 plugin from the team at @LumaLabsAI. Here with scans of scenes that I made in Dreams on my PS5. Incredible stuff! The jungle here is the result of just a few hours of work from scratch and can now be used for soo many things 😍#MadeInDreams pic.twitter.com/If5k1IbhiW
— Martin Nebelong (@MartinNebelong) April 4, 2023
Luma NeRF 的官方 UE5 plugin 我也立刻好奇地下载了。之前随便把用 Luma 捕获的对象导入 UE5 看看。虽然看起来像是体积渲染,但目前分辨率感觉并不算太高 pic.twitter.com/rkDi3SfpXP
— Hirokazu Yokohara (@Yokohara_h) April 3, 2023
哦哦哦哦哦哦哦哦哦哦哦哦哦哦
已经能用 UE5 进入大冈山 NeRF 了!!!!!!!!!!!!!!!!!#LumaAI #UnrealEngine #NeRF pic.twitter.com/89BnXoGmuj— イワケン@XRコミュニティのキーマン/Microsoft MVP (@iwaken71) April 4, 2023
#ue5 #nerf #LumaAI #ue5study
顺路出门时顺便拍了西八王子站!!
只能说太厉害了
使用 dynamic sky 改变天气的演示 pic.twitter.com/6uv5nDxr8D— aoharu@ue4 (@aoharuisgod) April 4, 2023
我比较了一下 LumaAI 通常可导出的 3D 数据与 UE5 插件用数据,看看观感会有多大差异
左:将 glTF 转换为 FBX 后导入的模型
右:从 Luma Field File 导入的模型#LumaAI #NeRF #UE5 pic.twitter.com/3pgyFfkqWy— MATSUZAKI (@marvo737) April 4, 2023
今后 NeRF 似乎也会越来越多地被用于游戏和 VR 等实时内容中呢
拥有支持机型智能手机的朋友,不妨试着把用 Luma AI 拍摄的场景在 UE5 上跑起来吧!
链接
Introducing the Luma✨Unreal Engine alpha! Fully volumetric Luma NeRFs running realtime on Windows in UE 5 for incredible cinematic shots and experiences, starting today!
Try now: https://t.co/mdyGTWhhgN pic.twitter.com/Lj1Lm3F2P4— Luma AI (@LumaLabsAI) April 3, 2023
Luma AI Beta – 用 iOS 智能手机轻松进行 NeRF 学习并生成 3D 模型的话题应用!Beta 提供开始!