本发明公开了一种面向数据不平衡的污水处理过程BOD5预测方法,属于污水处理技术领域。该方法将时空注意力机制嵌入Siamese网络中,从而更好地捕获过程变量之间的关系以及时间依赖关系,增强特征的表征能力;针对多模态污水处理过程中的数据不平衡问题,将深度TL机制引入该模型得到TL‑STSFE模型。充分利用源域中充足的过程数据进行模型训练,利用源域预训练模型的知识,有效地将学习到的特征迁移到目标域,具体的,在训练TL‑STSFE模型时,首先以晴天数据进行训练,训练完成后,冻结部分层,再以雨天和暴雨天数据对未冻结层进行训练以对网络参数进行微调。增强泛化能力的同时还解决了数据不平衡的目标领域建模问题。
📄 2024108793039
📂 G06N3_045
👤 江南大学
📅 2024-07-02
本发明涉及人工智能技术领域,具体涉及一种基于全局搜索结合外部信息的智能推理方法及系统,其中,一种基于全局搜索结合外部信息的智能推理方法包括以下步骤:S1:利用预训练的大语言模型在当前状态下生成候选动作,同步输出局部生成概率,根据当前状态检索外部支持数据,计算候选动作的外部支持补偿权重;S2:通过候选动作的局部生成概率和外部支持补偿权重计算候选动作的即时收益;S3:通过上限置信区间算法计算候选动作的综合选择值;S4:输出全局最优推理链。本发明能够实现局部生成与全局搜索的深度融合,在候选动作评估和外部信息动态整合方面具有显著改进,极大地提高了多步推理任务的准确性、连贯性和系统鲁棒性。
📄 2025105255537
📂 G06N3_0455
👤 杭州斗兽场数字智能技术有限公司
📅 2025-04-25
本发明公开了一种基于双重注意力机制的网络安全态势感知方法。该方法利用入侵活动是一个时间序列事件,采用RNN或RNN的变体来堆叠模型;利用特征分离技术预处理样本数据,减少了模型训练的时间和成本;根据全局注意力机制技术,设计有限注意力模块,将有限注意力和全局注意力形成双重注意力机制来做态势预测,提高了预测准确度。
📄 2021101164776
📂 G06N3_045
👤 河北师范大学
📅 2021-01-28
本发明提出一种轻量化医疗问答系统构建方法,以轻量化Transformer模型作为基础模型,并构建预存答案库,将医疗问题对应唯一的目标回答作为正样本,从训练集中选取与医疗问题具有相关关键词但上下文语义不同的回答作为硬负样本,从训练集中随机选取若干回答作为简单负样本;采用对比学习的方式对基础模型进行训练,得到训练后的模型,在训练后的模型输出部分设置临时检索后处理模块,得到轻量化医疗问答系统。本发明通过在训练过程中引入更具挑战性的负样本,并对正样本施加更高的权重,本发明能够通过数学优化手段,有效地提升模型在嵌入空间中对细微语义差异的区分能力。
📄 2025106628949
📂 G06N3_0455
👤 江西财经大学
📅 2025-05-22
本发明公开了基于对比学习的疾病分类ICD自动编码方法和装置,属于自然语言处理及人工智能领域。本发明要解决的技术问题为如何使用自然语言处理技术为患者的电子病历文本匹配相对应的诊断编码即疾病分类编码,以减少医疗人员的工作量,提高自动编码匹配正确率,提高匹配速度,采用的技术方案为:①一种基于对比学习的疾病分类ICD自动编码方法,该方法包括如下步骤:S1、构建ICD自动编码模型训练数据集;S2、构建ICD自动编码模型;S3、训练ICD自动编码模型。②一种基于对比学习的疾病分类ICD自动编码装置,该装置包括,ICD自动编码模型训练数据集构建单元、ICD自动编码模型构建单元、ICD自动编码模型训练单元。
📄 2023108010458
📂 G06N3_0455
👤 齐鲁工业大学(山东省科学院)
📅 2023-07-03
本发明涉及知识蒸馏技术领域,尤其是涉及一种基于因果理论的知识蒸馏去偏推荐方法及系统。方法,包括构建知识蒸馏去偏推荐模型,其中,构建两个教师模型和一个学生模型,根据用户评分数据集生成观测数据的因果路径;基于量化选择偏差的因果效应补充未观测数据的因果路径;利用两个教师模型分别在观测数据的因果路径和未观测数据的因果路径进行预测,生成无偏软标签;基于无偏软标签对学生模型进行知识蒸馏,得到知识蒸馏去偏推荐模型;利用知识蒸馏去偏推荐模型进行用户预测。本发明从因果推断的角度出发,分析知识蒸馏过程中选择偏差产生的因果原因,通过补充未观测数据的因果路径来解决选择偏差问题。
📄 2025102929256
📂 G06N3_045
👤 烟台大学
📅 2025-03-13
本发明公开了基于临床思维的启发式医学教育大模型微调方法及装置,包括基于临床教学数据和专家意见构建临床思维框架。本基于临床思维的启发式医学教育大模型微调方法及装置通过临床思维框架形成结构化的临床教学语料库,并基于临床教学语料库构建教师智能体—专家智能体—学生智能体的三智能体协同架构,通过协同架构生成最终数据集,并通过最终数据集训练微调,得到最终的医学教育大模型,显著提升最终的医学教育大模型的交互性、适应性及教学引导能力;最终的医学教育大模型能够依据临床思维框架逐步引导学生进行推理与探索,在保持教学逻辑性的同时,有效激发了用户的自主思考能力,提供适度的引导与反馈,从而契合临床教学的实际需求。
📄 2025112836050
📂 G06N3_045
👤 浙江工业大学
📅 2025-09-09
一种基于联合预测框架的车辆轨迹预测鲁棒增强方法,首先,构建了一个联合时空注意力网络,包含教师模型和学生模型,形成联合预测结构:教师模型专注于正常轨迹的高精度预测,而学生模型通过知识蒸馏从教师模型中学习,并经过简化和增强,以适应对抗性噪声的干扰;其次,为优化学生模型的结构和鲁棒性,设计了一种多阶段剪枝与自蒸馏结合的鲁棒压缩策略,该策略对教师模型进行逐阶段剪枝,接着通过自蒸馏生成适用于对抗性环境的学生模型;然后,基于极值理论提出了流峰值过阈值方法,分析教师模型与学生模型的预测差异,检测异常输入。本发明在对抗性噪声下显著降低了预测误差,且具有高检出率,充分证明其在复杂噪声环境中的预测鲁棒性。
📄 2024117702467
📂 G06N3_0455
👤 浙江工业大学
📅 2024-12-04
本发明公开了一种基于注意力机制的CNN‑GRU合模拉杆应变预测方法,包括:采集注塑机合模机构装调过程数据并进行预处理,用预处理后的合模机构装调过程数据构建样本数据集,将样本数据集划分为训练集和测试集;采用CNN‑GRU网络结构结合SE注意力机制构建多输入多输出合模机构拉杆应变预测模型,使用训练集对合模机构拉杆应变预测模型进行训练;使用测试集通过训练好的合模机构拉杆应变预测模型对合模机构装调过程进行预测,然后对最终预测结果进行评估;将训练好的合模机构拉杆应变预测模型部署到实际生产现场,输出当前装调操作后的拉杆应变预测值。本发明实现了对合模机构装调过程中拉杆应变的精准预测,提升了装配效率与质量。
📄 2024117969340
📂 G06N3_045
👤 浙江工业大学
📅 2024-12-09
本发明公开了一种基于神经元加固的图像分类深度模型中毒防御方法及装置,该方法将一批干净样本输入到模型中,以神经元激活值和其出现频率,以及其对模型性能的影响为基准,寻找需要加固的神经元,之后将其他神经元固定下来,只加固这些选定的神经元,将训练集中的样本输入到模型中,通过对损失函数梯度上升作为导向来更新加固神经元,不断迭代直到模型趋于收敛稳定,得到干净的图像分类深度模型,用于图像分类任务。本发明解决了现有模型中毒防御方法在祛毒的同时没有增强模型鲁棒性的问题,并且模型在主任务上仍保留很高的准确率。本发明只需要用到少量的测试样本即可获得不错的效果,适用性较好。
📄 2022112411752
📂 G06N3_045
👤 浙江工业大学
📅 2022-10-11
一种基于Transformer‑WGAN的车辆跟驰行为建模方法,包括:获取跟驰场景中多组跟驰车和其前车的状态序列数据,将数据进行预处理使其符合模型输入的数据格式的步骤;建立Transformer网络模型,利用多头自注意力机制学习跟驰场景中车辆状态序列数据中复杂的时序依赖关系,提取驾驶数据中潜在时间特征的步骤;构建生成对抗网络WGAN,使用时间特征数据实现跟驰场景中车辆未来状态预测;将预测结果和真实结果作为由全连接网络构成的判别器的输入,判别器的目的是将预测结果和真实结果区分开,将预测的结果判断为假;通过生成器与判别器的对抗训练后,使判别器难以判定预测的结果为假,使得最小化预测结果和真实结果之间的误差,实现模型准确预测跟驰场景中车辆未来状态。
📄 2022111133622
📂 G06N3_0455
👤 浙江工业大学
📅 2022-09-14
本发明公开了一种基于Temporal_ATT‑Former的药品库房温湿度预测方法,包括如下步骤:获取药品库房环境的温湿度的历史数据,对历史数据进行预处理;建立Temporal_ATT‑Former温湿度预测模型;将获取的药品库房的温湿度数据特征,对Temporal_ATT‑Former进行温湿度预测模型训练;测试Temporal_ATT‑Former模型的效果;建立药品库房温湿度预警系统。本发明方法对未来某一时间区间内药品库房的温湿度进行准确预测,满足药品在库房中安全的环境下存放,具有广泛的应用前景和实用价值。
📄 2021107191298
📂 G06N3_0455
👤 淮阴工学院
📅 2021-06-28