一种面向生活记录的跨模态图像检索方法,包括训练网络构建、数据集处理、训练与检索和检索结果输出四个过程。本发明保证了其数据集的可靠、有效、实用,同时利用预训练网络的微调训练出检索模型,并通过检索模型寻找与问询最接近的生活记录图片。在数据集中含有大量图片之外其他模态数据的情况下,在训练模型的过程中,通过对训练集施加的范围限制,有效利用了心跳、步数等生物信息提高训练的性能:判别模型能够找出最符合问询类型的10张图片,并保证这10张图片彼此之间具有一定的差异性,即在确保准确率的前提下,同时尽力提高检索结果的多样性,使得检索结果的查准率和查全率均得到保障。
📄 2019109493079
📂 G06F16_535
👤 浙江工业大学
📅 2019-10-08
本发明公开一种基于深度学习的多模态图文推荐方法及设备,方法包括用一种跨模态图文检索模型MMDNN,其次,将MMDNN用于推荐系统之中,利用正负反馈聚类中心计算模块PNFCCCM和用户的正负反馈历史记录,计算用户的正负反馈聚类中心,结合数据的相似度得分和正负反馈得分,从数据库中找出与用户历史记录中综合得分最高的几条数据,使用MMDNN模型从数据库中找出与这几条数据对应的另一种模态的数据,最后,把成对图‑文资源推荐给用户,并且根据用户的反馈更新用户的历史记录和用户的正负反馈聚类中心,实现多模态图文推荐。
📄 2021103852465
📂 G06F16_535
👤 陕西师范大学
📅 2021-04-09
本申请提出了一种图片查重方法、装置和计算机可读存储介质,其中,该方法包括:基于待查重图片的属性信息,为所述待查重图片生成对应的字符串;通过布隆过滤器对所述字符串进行图片查重计算;通过所述布隆过滤器输出查重结果。通过本申请的技术方案,简化了图片查重过程,提升了查重效率。
📄 2020104265365
📂 G06F16_535
👤 杭州海康威视数字技术股份有限公司
📅 2020-05-19
本发明属于云计算安全技术领域,特别涉及一种基于响应长度隐藏的k‑NN图像检索方法及系统,所述方法包括在云服务器中基于响应长度隐藏的k‑NN图像检索系统中用户加密上传以及用户搜索图像的过程,即包括:可信的密钥代理商生成密钥并分发密钥,需要上传图像的用户通过属性加密制定对加密图像提供细粒度的访问控制的访问策略;加密上传图像,将图像存储在云服务器中;图像用户通过个人属性信息和私钥获取查询所需的辅助信息;根据辅助信息找出由查询视觉单词索引的图像和图像的加权词频向量;本发明使用稠密子图对二部图进行转换,获得比简单填充或截断变换更小的多映射,从而降低存储开销。
📄 201911098577X
📂 G06F16_535
👤 重庆邮电大学
📅 2019-11-12
本发明属于计算机视觉技术领域,提供了一种基于多模态的数据与关系增强的遮挡行人检索方法。步骤如下:首先获取待检索的行人图像,将行人图像输入到训练完毕的遮挡行人检索模型,提取图片的遮挡鲁棒性特征,然后遮挡行人检索模型借助图文模型CLIP来利用图片和文本的特征,在原基准模型的基础上,引入遮挡增强来扩充数据集规模,并对行人被遮挡的现象进行预测并作出特征过滤,通过加入关系增强模块来增强类间的关系,最后将得到的检索特征,与待检索库中的行人图像进行相似度比对,按照相似性得分由高到低的顺序对检索结果进行排序,计算准确率和首位命中率,因此本发明可以有效得应对遮挡场景。
📄 202410557844X
📂 G06F16_535
👤 齐鲁工业大学(山东省科学院),山东省人工智能研究院,天津理工大学,北京阿叟阿巴科技有限公司,山东中联视听信息科技股份有限公司
📅 2024-05-08
本发明公开了一种学前教育用的互动学习系统,包括数据收集单元、数据挑选单元、调取单元、处理器和显示单元;所述数据收集单元用于收集所有用于学前教育的互动信息,互动信息包括若干学前儿童的学习对象,学习对象具体可为卡片、图册等内容;所述数据收集单元用于将互动信息传输到数据挑选单元;本发明通过数据收集单元用于收集所有用于学前教育的互动信息,互动信息包括若干学前儿童的学习对象,学习对象具体可为卡片、图册等内容;之后通过数据收集单元将互动信息传输到数据挑选单元,进行初步筛选,得到所有的潜在对象融合形成潜在对象组;之后借助调取单元将潜在对象传输到处理器,并借助显示单元进行显示。
📄 2021107566405
📂 G06F16_535
👤 汪冬梅
📅 2021-07-05
本公开提供了一种基于深度哈希的运动捕获数据检索方法及系统,所述方案包括:基于运动捕获数据库中的运动捕获数据序列,生成每段运动捕获数据的运动表示图像;构建深度哈希特征提取模型,通过预训练的深度哈希特征提取模型提取所述运动表示图像的哈希特征;对于待检索的运动捕获数据,提取其哈希特征,并计算待检索的运动捕获数据哈希特征与所述运动捕获数据库中每段运动捕获数据哈希特征的距离,选择距离最近的前k个数据作为检索结果。本公开所述方案相对于现有技术具有更高的检索精度和效率。
📄 2021101966480
📂 G06F16_535
👤 济南大学
📅 2021-02-22
本发明提出一种基于融合用户意图的交互兴趣图的图卷积网络推荐方法,该方法结合融入用户意图的兴趣图,进行簇间交互和二次子图分裂操作,使模型能在传播中更有选择性地对高阶节点汲取正反馈,以此来达到增强模型高阶传播学习的能力,本发明融合用户意图构建用户交互兴趣图,从时间和位置因素来考虑用户意图,将传统的用户‑项目交互组织图结构中松散的、孤立的节点进行增强连接,不仅使项目序列变得更为紧密,提高了用户兴趣表示的精确性;本发明的高密度兴趣图通过簇间交互来传导及连接相关节点信息,使项目间的交互更为充分,让用户的潜在兴趣信息更大程度分布在兴趣图的相关位置上,从而提升推荐准确率。
📄 2023104353020
📂 G06F16_535
👤 江西财经大学
📅 2023-04-21