公开(公告)号：CN116977431A

公开(公告)日：2023-10-31

申请号：CN202311008492.4

申请日：2023-08-11

Applicant: 中国科学院计算技术研究所

Inventor： 高林 ,  吴桐 ,  孙嘉木

IPC: G06T7/73 ,  G06T15/20 ,  G06N3/0464 ,  G06N3/08

Abstract: 本发明提供了一种三维场景几何、材质与光照解耦和编辑系统，所述系统包括：几何重建模块，解码模块和编辑模块，其中：所述几何重建模块用于根据对三维场景采集的一组带有相机位姿的图像，以显式的三角网格重建三维场景的几何，并建立输入的图像及其相机与所述三角网格的位置关系；所述解码模块被配置为：根据三角网格的顶点上的几何特征和材质特征来确定采样点到所述三角网格的带符号距离和采样点的颜色，并进行渲染，根据输入的图像的像素颜色和对应像素的渲染颜色，更新各顶点上的几何特征、材质特征以及可学习的显示环境光照贴图；所述编辑模块被配置为：获取用户的自定义视角，向用户提供：几何编辑功能、材质编辑功能和光照编辑功能。

公开(公告)号：CN119359914A

公开(公告)日：2025-01-24

申请号：CN202411409585.2

申请日：2024-10-10

Applicant: 中国科学院计算技术研究所

Inventor： 高林 ,  杨婧雯 ,  孙嘉木 ,  杨洁

IPC: G06T17/00 ,  G06T15/04

Abstract: 本发明提出一种基于三平面和多级纹理的动态神经辐射场反走样重建方法，包括：输入待重建的训练视频帧，在观察空间对该训练视频帧的每个像素投射光锥，采样该光锥轴线上的内切球，得到采样球；使用动态变形网络将该观察空间的采样球映射到规范空间；该规范空间使用多级三平面纹理进行表示，该规范空间中的采样球分别投射到三平面上得到三个对应的圆盘，对每个圆盘分别提取对应多级纹理平面上的特征并拼接，得到多级三平面纹理特征；将待重建视频帧输入动态变形网络和多级纹理三平面，并将得到的多级三平面纹理特征和指定视角输入静态神经辐射场网络进行神经渲染，重建出该待重建视频帧在该指定视角下的渲染图像。