专利交易市场

本发明公开了一种基于向量表示的相似文本检索方法。该方法首先是用词嵌入+池化的方法处理篇章级文本，通过Bert编码得到文本向量表示，利用ball树的方法将所有文本向量表示构建为ball树索引，对所有文本向量表示和ball树中心点进行乘积量化，并建好PQ索引；检索时将查询文本也转化为向量表示，再通过乘积量化计算距离矩阵，基于距离矩阵和Ball树索引结构进行KNN检索得到k个相似文本。本发明构造的基于向量表示的相似文本检索方法支持长文本检索，能对海量的文本向量表示进行准确快速的检索，对复杂的或具有多重语义的文本查询有很好的效果，同时对不熟悉某领域行话的用户或想做探索性搜索的用户非常友好且有帮助，最后相比于Faiss中的IndexIVFPQ方法搜索更加全面准确。

一种基于跨模态对齐的多粒度手语视频‑文本检索方法，首先通过自监督方法增强手语视频表征；再通过时间注意力同时考虑视频片段间和视频片段内信息的相关性优化视频片段特征，利用时间协方差池化将视频片段特征聚合为手语视频粗粒度特征，联合细粒度信息充分挖掘手语视频和文本间的跨模态多粒度对齐信息；接着利用共享注意力残差高斯分布网络将手语视频和文本参数化为特征分布，通过对齐特征分布缓解手语视频与文本的模态差距；最后通过计算文本到手语视频的细粒度相似度分数，来检索与查询文本相匹配的手语视频。本发明考虑了手语视频‑文本检索问题的多粒度跨模态信息，检索结果准确性高，效果好。

本发明实施例公开了一种文本检索字幕库生成方法和装置、视频检索方法和装置。文本检索字幕库生成方法包括：根据预设的语种类型，获取与视频对应的至少两个语种类型的语种检索字幕；将视频库中与各视频对应的语种检索字幕的合集，作为文本检索字幕库；视频检索方法包括：获取文本检索字幕库中与输入检索词对应的至少一个匹配字幕语句集；根据所述匹配字幕语句集获取对应的视频信息，作为所述输入检索词的检索结果。本发明通过在视频检索服务中增加字幕检索，优化了现有的视频检索服务，为用户提供了一种基于台词的视频字幕检索服务，提高了视频检索服务的个性化和便捷化。