快手图生视频专利可控制生成视频的运动信息

2024-11-06 17:36:14   |   文白不白   |   158

天眼查知识产权信息显示,近期,快手关联公司北京达佳互联信息技术有限公司申请的“图生视频模型生成方法、视频生成方法及装置”专利公布。

摘要显示,本专利所述生成视频方法包括:输入样本图像和样本文本描述信息至预设文生视频模型;基于空间模块对样本图像和样本文本描述信息进行空间特征提取处理,得到第一样本特征处理结果;基于时序自注意力模块对第一样本特征处理结果进行处理,得到第二样本特征处理结果;以及基于运动适配器模块对第一样本特征处理结果进行运动信息控制,得到第三样本特征处理结果;根据第二样本特征处理结果和第三样本特征处理结果生成预测视频数据;根据预设视频数据和样本视频数据更新空间模块和运动适配器模块的参数,得到图生视频模型。本公开能够控制生成视频的运动信息,且降低对系统资源的消耗。

特别提醒:本网信息来自于互联网,目的在于传递更多信息,并不代表本网赞同其观点。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字、图片等内容的真实性、完整性、及时性本站不作任何保证或承诺,请自行核实相关内容。本站不承担此类作品侵权行为的直接责任及连带责任。如若本网有任何内容侵犯您的权益,请及时发送相关信息至bireading@163.com,本站将会在48小时内处理完毕。

快手图生视频专利可控制生成视频的运动信息

2024-11-06 17:36:14 浏览量: 158 作者: 文白不白

天眼查知识产权信息显示,近期,快手关联公司北京达佳互联信息技术有限公司申请的“图生视频模型生成方法、视频生成方法及装置”专利公布。

摘要显示,本专利所述生成视频方法包括:输入样本图像和样本文本描述信息至预设文生视频模型;基于空间模块对样本图像和样本文本描述信息进行空间特征提取处理,得到第一样本特征处理结果;基于时序自注意力模块对第一样本特征处理结果进行处理,得到第二样本特征处理结果;以及基于运动适配器模块对第一样本特征处理结果进行运动信息控制,得到第三样本特征处理结果;根据第二样本特征处理结果和第三样本特征处理结果生成预测视频数据;根据预设视频数据和样本视频数据更新空间模块和运动适配器模块的参数,得到图生视频模型。本公开能够控制生成视频的运动信息,且降低对系统资源的消耗。

,

Copyright ©2018 铋读网 All Rights Reserved.

京ICP备18051707号

京公网安备 11011302001633号