[发明专利]一种交互式视频创建方法

摘要

本发明公开了一种交互式视频创建方法，包括初始化、目标图像、特征提取、跟踪器训练、检测器、局部/全局搜索和更新的目标图像；所述初始化连接目标图像，目标图像分别连接特征提取和检测器；特征提取连接跟踪器训练，跟踪器训练和检测器均连接局部/全局搜索；局部/全局搜索连接更新的目标图像，且更新的目标图像分别连接检测器和目标图像。本发明的有益效果是本发明通过对物体检测与跟踪方法的有效集成，提出一种同时检测与跟踪方法，该算法能够自动检测跟踪用户指定的商品，从而极小化用户所需的操作；在应用模式上，“交互模”既可以以SDK的方式提供给开发者，也可以在视频网站通过嵌入“交互模”H5代码的形式实现与视频的交互。

主权项

一种交互式视频创建方法，包括初始化、目标图像、特征提取、跟踪器训练、检测器、局部/全局搜索和更新的目标图像；所述初始化连接目标图像，目标图像分别连接特征提取和检测器；特征提取连接跟踪器训练，跟踪器训练和检测器均连接局部/全局搜索；局部/全局搜索连接更新的目标图像，且更新的目标图像分别连接检测器和目标图像，其特征在于：创建方法具体步骤如下：步骤A、进行初始化，初始化采用手动初始化或自动初始化其中的一种；1）、在手动初始化方法中，用户利用交互式视频制作软件提供的标注工具以矩形框、圆形框或点的方式点选感兴趣物体，对于刚性物体，该区域最好能够涵盖整个物体；对于衣服类的柔性物体，该区域可以仅为柔性物体中的一部分；2）、在自动初始化方法中，用户可以预先提供给标注软件待跟踪物体的图片，图片数量可以为一幅或从不同视角拍摄的多幅图像，交互式标注软件进而能够在当前帧中进行全图搜索并给出候选的感兴趣物体区域，在用户确认之后将该区域作为最终的感兴趣物体区域；步骤B、对于步骤A中初始化之后的用户指定或自动识别出的感兴趣区域，交互式标注软件能自动从目标图像中提取出特征用来训练跟踪器；步骤C、进行跟踪器训练，跟踪器为区分当前感兴趣物体与周边背景区域的分类器或回归器其中的一种；1）、当使用分类器进行跟踪器训练时，将与上一帧中感兴趣物体区域交并比在某一阈值之上的物体区域视为正样本，其余样本视为负样本，进而利用在相应区域提取出的特征训练SVM, Logistic regression分类器；2）、当使用回归器进行跟踪器训练时，无需对交并比进行阈值化处理，直接将交并比的值作为回归器的输出，以特征为输入，训练回归器进行值函数逼近；步骤D、将步骤B中的目标图像输送至检测器中形成待跟踪物体的模型，当待跟踪物体从场景中消失并再次出现时，检测器自动检测到该物体，并进而初始化跟踪器以进行持续跟踪；步骤E、局部/全局搜索，通过步骤C中的跟踪器在局部范围内进行搜索，再通过检测器在全图范围内进行搜索；采用滑动窗口法进行搜索：利用图像边缘信息，采用object proposal技术生成物体的疑似区域，进而在这些疑似区域调用跟踪器或检测器进行判别，从而实现交互式视频的创建。