基于图片映射器和文本自遮掩映射器的组合图像检索方法,包括:先对输入的图片进行缩放加噪等操作,然后输入到冻结的预训练图像编码器中,得到图像特征利用图像映射器将图像特征转化成伪词标记s1,利用文本自遮掩映射器将图像特征转化成伪词标记s2,分别将其替换预先提供的提示文本中的标记符号,并将输入的修改文本拼接到提示文本之后,得到两个新的文本x1,x2。将文本x1,x2分别输入到冻结的预训练文本编码器中,得到两个特征,将两个特征进行均值融合,最后将得到的均值特征与目标图像进行对比。本发明既解决了使用昂贵三元组训练组合图像检索模型的缺点,也提高了模型对组合图像检索下游任务的泛化能力。
📄 202411438579X
📂 G06F16_43
👤 浙江工业大学
📅 2024-10-15
本发明公开了一种基于文本生成和迭代匹配的图文检索方法,包括利用BI‑GRU网络模型和CNN网络模型依次提取出初始文本特征向量和初始图像特征向量。本基于文本生成和迭代匹配的图文检索方法通过分别训练BI‑GRU网络模型和CNN网络模型,利用训练好的BI‑GRU网络模型和CNN网络模型分别提取文本特征和图像特征,再分别与数据库中的图像特征和文本特征计算相似度,将数据库中相似度最大的前若干名的图像特征和文本特征作为检索的结果输出,实现图文检索;文本生成模块通过图文信息交互增强了图像和文本的整体语义相关性,有效解决跨模态图文检索中难以直接度量图像和文本的相似性的问题,提升图文检索精度。
📄 202310781908X
📂 G06F16_432
👤 浙江工业大学
📅 2023-06-29
本发明公开了一种基于核稀疏表示的三维模型分类检索方法。本发明步骤如下:1、运用一种基于二次误差作为度量代价的边收缩算法对以点云形式表示的三维模型进行顶点简化处理;2、计算顶点简化后三维模型的方向,保证同类模型在方向上能够对齐,通过计算得到了三维模型的三个特征方向向量;3、基于三个特征方向向量对三维模型进行渲染,得到相应不同方向上的多张不同渲染图像;4、针对不同数据集中三维模型的特点,综合考虑数据特征与描述符特征,选定特征描述符提取渲染图像的特征;5、利用改进的核稀疏表示分类器对提取的特征向量进行匹配,进而实现对三维模型的分类检索工作。本发明具有一定的鲁棒性,取得了较为高效、可靠的优越性能。
📄 2019102127442
📂 G06F16_43
👤 杭州电子科技大学
📅 2019-03-20
本发明公开了一种多媒体文件处理方法、服务器及存储介质,该方法包括:统计预设历史周期内用户处理多媒体文件的历史数据,分析历史数据中多媒体文件特征与处理信息之间的对应关系;提供统一的处理接口,接收待处理的多媒体文件;分析该多媒体文件的特征;根据文件的特征在所述历史数据中查询用户的历史处理信息;根据预先确定的加权分值计算公式,计算出查询的各个历史处理信息的加权分值;自动选择加权分值最大的历史处理信息生成一个处理队列;按照处理队列中定义的处理顺序依次对所述多媒体文件进行处理,在处理至用户设置的反馈位置时,调用该处理接口向用户反馈相应的处理结果,从而简化多媒体文件的处理操作,提高多媒体文件的处理效率。
📄 2018100663737
📂 G06F16_435
👤 平安科技(深圳)有限公司
📅 2018-01-24
本发明公开了一种多数据源数据的归类方法,用于解决现有多媒体信息平台分类标签标准不统一,信息归类混乱的问题。本发明提供的方法包括:根据预设方式从多媒体信息平台展示的数据中确定各个目标数据;从所述各个目标数据中提取各个关键字;分别统计各个关键字在所述各个目标数据中标题位置出现的第一词频以及在内容位置出现的第二词频;根据所述第一词频、所述第二词频以及对应的第一权重、对应的第二权重分别计算各个所述关键字的词语热度值;将词语热度值最高的所述关键字确定为新的分类标签;采用所述新的分类标签对所述各个目标数据进行匹配,并为匹配成功的所述目标数据贴上所述新的分类标签。本发明还提供一种多数据源数据的归类服务器。
📄 2017104333568
📂 G06F16_43
👤 平安科技(深圳)有限公司
📅 2017-06-09
本发明涉及数据监控技术领域,揭示了一种基于用户信息的信息推送方法及客户端。包括:检测到用户输入的信息推送请求时,输出提示信息,该提示信息用于提示用户输入订阅习惯以及身份信息;根据输入的订阅习惯以及身份信息,输出与订阅习惯以及身份信息相匹配的多媒体资源供用户选择;获取用户根据多媒体资源选择的目标多媒体资源,并为目标多媒体资源生成推送时间点;获取指定区域服务器的网速信息,预测指定区域服务器在推送时间点的目标网速信息;若目标网速信息大于预设的网速阈值,推荐用户选择空闲服务器推送数据;若目标网速信息小于或等于预设的网速阈值,推荐用户使用指定区域服务器推送数据。实施该方法能够提高用户在网络平台上订阅数据的效率。
📄 2019105104315
📂 G06F16_435
👤 平安科技(深圳)有限公司
📅 2019-06-13
本申请实施例属于人工智能领域,应用于智慧企业领域中,涉及一种基于协同过滤算法的演示文稿推荐方法,包括接收用户对象的演示文稿推荐请求;根据所述推荐请求获取所述用户对象的对象特征和应用特征,其中,所述应用特征包括所述用户对象对各演示文稿进行应用类型标记的历史信息;基于通过协同过滤算法计算得到的文稿适配度,根据所述对象特征和所述应用特征计算所述用户对象的相似对象;获取通过文稿适配算法得到的与所述相似对象对应的演示文稿的适配类型,并将所述适配类型发送给所述用户对象。本申请还提供一种基于协同过滤算法的演示文稿推荐装置、计算机设备及存储介质。采用本方法大大提高了文稿推荐的准确率。
📄 2021106600786
📂 G06F16_435
👤 平安科技(深圳)有限公司
📅 2021-06-15
本发明提供了一种基于AI的融媒体数据处理方法及系统,该系统根据用户需求和周围环境生成教育资源需求;再利用教育资源需求生成多个教育资源;结合周围环境信息对多个教育资源作动态调整以及优化得到多个最终教育资源,之后构建与最终教育资源匹配的虚拟现实环境以及确定最终教育资源的呈现方式,并利用用户画像构建讲解最终教育资源的虚拟人物;响应于用户操作,在虚拟现实环境由虚拟人物呈现最终教育资源。本发明根据周围环境生成多个教育资源再优化得到最终教育资源,生成多种虚拟现实场景结合虚拟人物,最终向用户呈现最终教育资源,因此可以增加用户沉浸感,且生成的教育资源更能满足用户需求,实现教育资源的高效利用和质量提升。
📄 202410618519X
📂 G06F16_435
👤 西京学院
📅 2024-05-17
本申请实施例涉及学习设备技术领域,公开了一种电子页面的检索方法及装置、学习设备、可读存储介质。该方法包括:获取摄像模组拍摄到的页面图像中的页标识信息,检索获得与页标识信息匹配的至少两个相似的电子页面,获取每一电子页面对应的复杂度信息,该复杂度信息包括区别特征信息和复杂度,根据每一电子页面的复杂度,确定每一电子页面的比对次数,再按照每一电子页面的比对次数,将页面图像与每一电子页面的区别特征信息进行多次比对,以获得与每一电子页面对应的多次比对结果,根据与每一电子页面对应的多次比对结果,从至少两个相似的电子页面中确定出目标电子页面。实施本申请实施例,能够提高电子页面的检索准确率。
📄 2020105740417
📂 G06F16_432
👤 广东小天才科技有限公司
📅 2020-06-22
本发明提出了深度对抗注意力跨模态哈希检索方法及系统,包括:注意力学习步骤:获得图像和文本两种模态,利用通道注意力机制,将每个模态的特征表示分为相关的模态特征和不相关的模态特征;模内对抗学习步骤:通过生成对抗网络将每个模态内的不相关特征补充每个模态的相关特征表示信息;模间对抗学习学习步骤:将图像模态的相关的模态特征设为真,将文本模态的相关的模态特征设为假,通过模间对抗学习使得两种模态各自的相关特征表示分布均匀;哈希学习步骤:将图像相关特征和文本相关特征映射在汉明空间中,用于进行跨模态检索。将生成对抗网络、注意力机制、哈希学习结合在一起,相比较之前跨模态检索方法,进一步提高了跨模态检索的准确度。
📄 2021112142874
📂 G06F16_432
👤 山东师范大学
📅 2021-10-19
本发明属于跨模态检索、模式识别技术领域,公开了一种基于鲁棒监督的深度离散哈希跨模态检索方法及系统,基于鲁棒监督的深度离散哈希跨模态检索方法采用模态内和模态间一致性保持策略,同时进行非冗余特征选择;并选择具有最小冗余度的鲁棒性和鉴别性特征生成二进制哈希码;再基于奇异值分解进行离散哈希学习。本发明的RSDDH方法可以优于几种最先进的浅层跨模态哈希方法,且随着哈希码长度的增加,本发明所提出的方法的性能就越好。根据实验结果,验证了特征选择策略、离散哈希方案,模态间和模态内一致性保持策略的有效性,提高了跨模态哈希检索的性能。
📄 2019102469914
📂 G06F16_432
👤 广东石油化工学院
📅 2019-03-29
本发明提出了一种基于特征选择和虚拟数据生成的半监督跨媒体检索方法。本方法提出根据训练数据的特征生成一些虚拟的数据点以扩充训练数据,同时在学习两对投影矩阵的过程中采用l2,1范数进行特征选择。具体来说,首先对每一类图像和文本求其类中心,然后在其周围随机生成新的数据点,构成新的训练数据;然后,使用新的数据来学习两对投影矩阵,与此同时,采用l2,1范数约束,进行特征选择;最后对检索结果用mAP值进行评估。这种方法不仅生成一些随机数据点来提高训练数据的多样性,同时可以在学习两对投影矩阵的时候选择一些更加具有区分性和丰富信息的特征。在三个不同数据集上的实验结果也表明此方法的优越性。
📄 2017111246189
📂 G06F16_43
👤 山东师范大学
📅 2017-11-14