国家知识产权局信息显示,杭州灵之宇科技有限公司申请一项名为“基于扩散模型的唇形同步方法”的专利,公开号CN888074A,申请日期为2026年6月。
专利摘要显示,本申请提供了一种基于扩散模型的唇形同步渲染方法,包括:获取与目标视频对应的语音信号并提取语音特征;对目标视频帧进行人脸关键点检测并进行对齐处理;基于对齐后的人脸关键点确定包含完整头部的裁剪区域,裁剪得到整头图像;在整头图像中确定下半张脸矩形区域并进行遮挡处理;将遮挡后的整头图像输入编码器,得到潜在表示;将潜在表示作为扩散模型的初始输入,以语音特征为条件,在潜在空间中执行多步去噪过程,得到完整的潜在表示;将完整的潜在表示输入解码器,解码为人脸图像帧;对连续时间步生成的图像帧进行时序拼接,得到人脸视频序列。本申请在保证头部整体结构稳定的前提下,实现了高保真、自然且时序一致的唇形同步渲染效果。
天眼查资料显示,杭州灵之宇科技有限公司,成立于2024年,位于杭州市,是一家以从事软件和信息技术服务业为主的企业。企业注册资本50万人民币。通过天眼查大数据分析,杭州灵之宇科技有限公司。
声明:市场有风险,投资需谨慎。本文为AI基于第三方数据生成,仅供参考,不构成个人投资建议。
本文源自:市场资讯
作者:情报员
热门跟贴