专利交易市场

本发明涉及视频制作技术领域，公开了一种增强现实环境中的实时视频处理方法及系统，包括：基于概念图像序列、分镜文本序列和场景文本序列来构建图结构数据，图结构数据包括基本的数据元，一个数据元关联一个概念图像或分镜文本或场景文本，根据以下规则来定义两个数据元之间的关联性：将图结构数据输入训练好的增强智能体中，输出概念图像序列的一个概念图像的增强结果；本发明将分场景剧本和分镜剧本分离，并且进行稀疏化处理来与概念图像对应，最后通过模型融合稀疏化的剧本语义和概念图像特征，来实现对于概念图像对应于剧本艺术表达的局部针对性增强，增强后的概念图像能够为视频制作提供更优的参考。

本发明公开了一种视频处理方法及系统，方法包括：分别将第一帧图像及当前帧图像输入到卷积神经网络；分别获取第一特征向量、第二特征向量，并获取第一特征向量对第二特征向量的加权因子；利用加权因子对第二高维特征进行加权，获取第三高维特征，获取第一帧图像相对于当前帧图像的差分特征，并将差分特征与第二高维特征进行聚合，获取第四高维特征；将第三高维特征与第四高维特征按照通道进行拼接，将目标特征输入卷积神经网络的解码器进行解码，获取当前帧图像掩码。通过获取差分特征，增加了对前后帧图像共性信息的利用，提高了监督视频目标分割的性能，进一步提高了视频目标分割处理的性能，提高了对多目标的分离精度。