一种基于单张全景图像的新视角合成三维重建方法及系统

    公开(公告)号:CN119693543A

    公开(公告)日:2025-03-25

    申请号:CN202411745027.3

    申请日:2024-12-02

    Applicant: 北京大学

    Abstract: 本发明公布了一种基于单张全景图像的新视角合成三维重建方法及系统,包括串行连接的全景图转化网格模块、网格补全模块和网格转化三维高斯场模块;从单个位置的任意相机捕获的全景图像中生成全景图像。包括首先从输入的全景图像构建初步网格,然后通过全景补全器迭代优化网格,同时收集三维一致性伪新视图。最终,将优化后的网格转换为三维高斯场,并使用收集的伪新视图进行训练。本发明能够仅根据一张全景图输入重建现实世界的三维场景,显著降低了三维重建的数据采集成本,能够有效处理大面积遮挡的情况,还可保留精细纹理的细节,合成具有详细几何结构的真实感新视图。

    一种基于样例的动态纹理迁移方法及系统

    公开(公告)号:CN114283181B

    公开(公告)日:2024-06-18

    申请号:CN202111582171.6

    申请日:2021-12-22

    Applicant: 北京大学

    Abstract: 本发明公布了一种基于样例的动态纹理迁移方法及系统,将单样本动态纹理迁移任务分解为两个阶段;其中,第一阶段合成具有所需动态纹理的目标视频的起始帧;在第二阶段,将合成图像分解为结构无关的纹理图块,根据纹理图块,利用图像离散化隐空间表示算法VQ‑VAE的Transformers模型来生成长离散序列,并预测相应的后续纹理图块;再采用高斯加权平均合并策略将纹理图块平滑地组合到目标样式化视频的每一帧中,输出自动生成的目标动态特效视频,由此实现动态纹理迁移。本发明将视频样例的动态效果自动转换为目标形状或图像,显著提高动态纹理的设计效率,能够处理仅有一个样例的迁移任务,还可保留精细纹理的细节。

    一种基于样例的动态纹理迁移方法及系统

    公开(公告)号:CN114283181A

    公开(公告)日:2022-04-05

    申请号:CN202111582171.6

    申请日:2021-12-22

    Applicant: 北京大学

    Abstract: 本发明公布了一种基于样例的动态纹理迁移方法及系统,将单样本动态纹理迁移任务分解为两个阶段;其中,第一阶段合成具有所需动态纹理的目标视频的起始帧;在第二阶段,将合成图像分解为结构无关的纹理图块,根据纹理图块,利用图像离散化隐空间表示算法VQ‑VAE的Transformers模型来生成长离散序列,并预测相应的后续纹理图块;再采用高斯加权平均合并策略将纹理图块平滑地组合到目标样式化视频的每一帧中,输出自动生成的目标动态特效视频,由此实现动态纹理迁移。本发明将视频样例的动态效果自动转换为目标形状或图像,显著提高动态纹理的设计效率,能够处理仅有一个样例的迁移任务,还可保留精细纹理的细节。

Patent Agency Ranking