Insider Insider
3dnchu 尚无浏览 2 分钟阅读

LumiTex:基于光照上下文的高保真 PBR 纹理生成——理解 3D 模型的照明信息,生成“更像真的”PBR 纹理!

由香港中文大学(深圳)、香港科技大学、香港大学、北京大学以及企业研究部门 LIGHTSPEED 的研究者组成的联合研究团队,发布了新的 PBR 纹理生成方法「LumiTex」。这是面向 ICLR 2026 的技术论文。

LumiTex:基于光照上下文的高保真 PBR 纹理生成

物理基础渲染(PBR)为计算机图形学中真实材质与光照相互作用提供了一个基于原理的标准。尽管近年来 PBR 纹理生成取得了进展,现有方法仍无法解决两个根本性问题:
1)在有限光照信息下,从图像提示中进行材质分解
2)无缝且视角一致的纹理补全
为解决这一问题,我们提出了端到端框架「LumiTex」。
本框架由三个主要组件构成:
(1) 在共享光照先验下分离 Albedo 和金属光泽・粗糙度的多分支生成方案,实现稳健的材质理解,
(2) 面向光照的材质注意力机制:将光照上下文注入解码过程,生成在物理上有依据的 Albedo、金属度与粗糙度图。
(3) 基于几何信息的补全模块:基于广视野合成模型增强纹理覆盖率,并确保无缝且视角一致的 UV 补全。大量实验表明,LumiTex 在纹理质量上达到了最先进水平,优于现有开源方法和商用方法。

  • 引入补充光照信息的“多视图光照上下文”
  • 以分离方式处理材质特性(Albedo/MR),生成物理上正确的 PBR
  • 利用大型视图合成模型补全缺失区域 → 可实现无缝 UV 生成
  • 实验结果报告称其质量高于现有商用工具

与纹理生成方法的比较

与 PBR 生成方法的比较

进一步比较

纹理补全

再照明比较

据说这是一个能够自动生成在物理上和视觉上都很有说服力的高质量 PBR 的下一代工作流程,今后这类功能大概也会被 3D 生成 AI 类服务陆续采用吧。
目前代码尚未公开,只能确认到论文。
请务必看看!

链接

LumiTex: Towards High-Fidelity PBR Texture Generation with Illumination Context

arxiv 论文页面

Screenshot of lumitex.vercel.app

Screenshot of arxiv.org