广州方舟信息科技申请视频生成模型相关专利，提升生成医学部位动画的真实性

更新时间：2024-12-21 18:40  浏览量：36

金融界2024年12月21日消息，国家知识产权局信息显示，广州方舟信息科技有限公司申请一项名为“视频生成模型的训练方法、视频生成方法、装置和设备”的专利，公开号 CN 119152311 A，申请日期为2024年10月。

专利摘要显示，本申请提供一种视频生成模型的训练方法、视频生成方法、装置和设备，涉及人工智能技术。该方法包括：针对由包含不同医学部位的静态图像组成的训练数据，通过图像分类确定表示不同医学部位所属类型的选择系数矩阵；将选择系数矩阵与初始化的权重矩阵融合得到运动模版矩阵；将静态图像输入VAE编码器，通过VAE编码器输出编码潜在表示；将编码潜在表示输入UNET网络，并将运动模版矩阵加入UNET网络的时间注意力层中；将加入运动模版矩阵的UNET网络的输出结果输入VAE解码器，通过VAE解码器生成当前视频；基于与静态图像对应的真实视频和当前视频计算当前损失，并根据当前损失优化UNET网络的时间注意力层和权重矩阵的参数。本申请能提升生成医学部位动画的真实性。