一种基于自监督学习的音乐合成视频MV的方法[发明专利]

来源：年旅网

专利内容由知识产权出版社提供

专利名称：一种基于自监督学习的音乐合成视频MV的方法专利类型：发明专利发明人：康洪文

申请号：CN202010097990.0申请日：20200217公开号：CN111339865A公开日：20200626

摘要：本发明公开了一种基于自监督学习的音乐合成视频MV的方法，它包含以下步骤：一、从已有的素材库中，分离出音频和视频流；二、利用深度学习技术，基于视频理解，从视频中提取出人物、动作、表情、场景信息；三、根据音乐的节奏、声纹信息自动分类；四、从音乐中分离出人声，乐器，伴奏以及歌词；五、由视频文件中的时间戳同步音视频相关特征信息；六、由音乐特征学习对应的视频信息，形成音乐和视频的映射关系；七、输入任何一段音乐，合成相应的视频MV；本发明可以从海量的已有视频数据中，自动匹配选取合适的视频片段，将音乐映射生成相应的短视频MV，给用户更直观的视觉冲击力和更加生动的听觉体验。

申请人：杭州慧川智能科技有限公司

地址：310012 浙江省杭州市西湖区文三路199号13幢北2-10号

国籍：CN

代理机构：北京科家知识产权代理事务所(普通合伙)

代理人：宫建华

更多信息请下载全文后查看

因篇幅问题不能全部显示，请点此查看更多更全内容

查看全文