一种基于音视频节奏关系的视频背景音乐自动生成方法

摘要

本发明提供了一种基于音视频节奏关系的视频背景音乐自动生成方法，提取输入视频的视觉节奏特征，包括视觉运动速度特征、视觉运动显著性特征和相应的视频帧数；根据预设的视频与音乐间的节奏关系，将输入视频的视觉节奏特征所在节奏位置自动替换为相应节奏位置的音乐节奏特征，包括音符组密度和音符组强度；将转换后的音乐节奏特征，连同用户输入的音乐风与乐器类型输入到深度学习模型中，生成视频背景音乐。本发明可快速为视频自动生成背景音乐，所生成的音乐能够在节奏上与视频配合，能够便利视频剪辑工作者或普通人的视频制作，且获得个性化的视频背景音乐。