公开(公告)号：CN115719413A

公开(公告)日：2023-02-28

申请号：CN202211335132.0

申请日：2022-10-28

Applicant: 中国科学院计算技术研究所

Inventor： 高林 ,  蒋楷文 ,  陈姝宇

IPC: G06T19/20 ,  G06T7/90 ,  G06T17/00 ,  G06T11/00 ,  G06N3/0475 ,  G06N3/04 ,  G06N3/094

Abstract: 本发明提出一种基于神经辐射场解耦的三维人脸编辑和系统，根据随机噪声，通过语义掩码对三维人脸进行几何编辑，并在给定参考图像的情况下，对材质进行三维一致的风格迁移，最终输出可进行局部几何编辑和整体风格编辑的三维人脸，可解决现有技术的生成质量低、训练难、几何控制难和材质解耦控制难并无法进行有效风格迁移的问题。

公开(公告)号：CN116468844A

公开(公告)日：2023-07-21

申请号：CN202310234462.9

申请日：2023-03-13

Applicant: 中国科学院计算技术研究所

Inventor： 高林 ,  蒋楷文 ,  陈姝宇

IPC: G06T15/60 ,  G06T15/50 ,  G06T15/80 ,  G06T7/80 ,  G06N3/0464 ,  G06N3/08

Abstract: 本发明提出一种生成式人脸神经辐射场的光照编辑方法和系统，包括：服从高斯分布随机采样得到的隐变量z和给定球谐光照系数l；基于隐变量z合成三平面搭成体空间，从中根据相机参数散出光线撒点进行双线性插值采样特征并解码，得到密度σ和颜色c；利用光照系数l，通过合成模块得到光影三平面，搭成体空间，从中根据相机参数散出光线撒点进行双线性插值采样特征，通过光影解码器得到光影s；通过密度σ，结合颜色c，通过体渲染得到二维人脸图像的反照率；反照率c与该光影s相乘通过体渲染，得到人脸编辑图像。本发明设计的系统能实现用户对于三维人脸的光照进行解耦控制。减少分解人脸图像为反照率和光影图像的歧义性。