本发明公开了抗坏血酸过氧化物酶1在催化鲁米诺化学发光反应中的应用,属于植物免疫技术领域。本发明首次公开抗坏血酸过氧化物酶1具有催化鲁米诺氧化的活性,可将其开发成鲁米诺‑H2O2化学发光反应催化剂。基于植物细胞内稳定表达抗坏血酸过氧化物酶1的特点,可实现利用鲁米诺化学发光法对胞内活性氧的动态及含量进行实时监测,并以此为模型,用于筛选可引发胞内活性氧迸发的诱导因子。
一种溶解氧电化学传感器,采用丝网印刷技术在Al2O3陶瓷基板上制成叉指金电极、叉指Pt电极、Ag/AgCl电极、以及相应的金焊盘,将聚苯乙烯溶液滴加在叉指金电极和叉指Pt电极上用甩胶机旋涂,经紫外光照射12小时固化形成感测薄膜,膜厚为200~300nm,除感测薄膜及Ag/AgCl电极以外的区域用绝缘胶覆盖形成绝缘层,金焊盘上涂敷环氧树脂。同现有技术比较,本发明具有如下突出的优点:本溶解氧电化学传感器具有更长的寿命,更高的灵敏度,良好的稳定性,制作简单,成本低廉。
本发明公开了一种羟基红花黄色素A代谢物产物的检测方法:(1)取谷红注射液静脉注射SD大鼠,眼眶采血,血样离心分离血浆;(2)微量加样器吸取血浆,加入乙腈,血浆与乙腈的体积比为1:3~3.5;涡旋混匀后离心,取上清液氮气吹干,再用乙腈溶解,离心,取上清作为样品待测;(3)采用高效液相色谱?三重四极杆线性离子阱串联质谱对样品进行检测分析,采用p?MRM?IDA?EPI模式来分析代谢产物。本发明通过质谱采用p?MRM方法结合软件快速鉴定分析,对血浆中各个成分变化及结构改变等代谢变化跟踪,结果发现羟基红花黄色素A代谢产物11个,完成了羟基红花黄色素A及代谢产物在血浆中的时间变化曲线,并成功推断鉴定了其中羟基红花黄色素A的7个代谢产物及同分异构体的分子结构,比目前采用化学结构分析手段更快速、更灵敏。
基于深度强化学习的多园区能源调度方法,包括:S1:构建分布式园区综合能源系统模型;S2:用基于多智能体的深度强化学习算法解决综合能源系统的动态调度问题,搭建分布式园区综合能源系统的多智能体深度强化学习框架;S3:以实时奖励函数代替目标函数,利用各园区内的智能体与环境互动,寻找分布式园区综合能源系统最优调度策略;S4:将测试集数据用于训练后的智能体进行调度决策,并将其获得的目标成本与经由线性化处理后的综合能源系统模型通过求解器获得的目标成本进行比较,证明算法的有效性。本发明还包括基于深度强化学习的多园区能源调度系统。本发明在促进各园区内的光伏消纳的同时,提高了综合能源系统经济运行的有效性。
本发明公开了一种底物强化型长期原位生物电化学传感器。该生物电化学传感器基于沉积物微生物燃料电池原理,包括阳极室、分隔材料、阴极和外部电路。阳极周围添加大分子有机底物并置于阳极室内部,形成底物强化型的阳极。阳极室的其余空间由底泥填充,底泥为阳极提供了严格的厌氧环境和微生物接种源,在发酵细菌的厌氧分解下,大分子有机物被缓慢持续地降解为可被产电微生物利用的小分子有机物,从而保证了传感器产电所需底物的持续供给,在实验室测试中可长达6个月维持传感器的正常工作。本发明解决了一般微生物燃料电池作为传感器难以实现长期原位监测的问题,为自然水体环境的长期原位低成本监测提供了新思路。
本实用新型涉及医学生物化学用装置的技术领域,特别是涉及一种医学生物化学用加热搅拌装置,其可提高工作效率;并且整体高度方便调节,提高适应能力;而且可对上腔室内部进行观察,方便快速检修;包括主体,主体的内部设置有工作腔,并在工作腔内横向设置有第一隔板,工作腔内横向设置有第二隔板,第一隔板和第二隔板将工作腔隔成上腔室、中腔室和下腔室,主体侧壁上设置有第一进入管、第一取出管、第二进入管、第二取出管、第三进入管和第三取出管,主体的顶端和底端分别设置有上电机和下电机,还包括上传动轴、上搅拌叶、下传动轴和下搅拌叶;主体侧壁上设置有第一观察孔,还包括第一把手、第一转轴、第一带动块和第一刷毛。
基于强化学习的多机器人围捕多目标的分布式决策方法,包括:一、仿真环境初始化,随机生成障碍物、追逐者和逃跑者的状态信息,追逐者和逃跑者都为智能体的机器人;二、获取机器人的观测值信息;三、获取机器人的可行动作,遍历其动作空间得到可行动作集;四、策略神经网络根据观测值信息从当前状态的可行动作集中选择出一个动作;五、仿真环境根据选择出的动作对机器人进行更新并计算执行该动作获得的奖励;六、将四‑五的决策过程存储到经验收集池中;七、重复二‑六直到达到单轮最大的仿真时间;八、根据存储器中的各个智能体与仿真环境的交互信息,使用多智能体强化学习算法进行训练;九、重复一‑八直到达到最大的交互训练轮数。
本发明公开了一种用稀疏化注意力辅助决策的嵌入式多智能体强化学习方法,属于强化学习技术领域。初始化多智能体的效用函数网络参数、混合网络参数和目标混合网络参数;获取每一个智能体的自注意力输出和稀疏化注意力输出;使用门控循环单元模块编码当前观测输出,计算本地常规效用函数和本地稀疏效用函数,分别输入到混合网络中,各自拟合得到常规全局价值函数和稀疏全局价值函数,逐渐降低常规全局价值函数的权重,完成强化学习的训练。在决策推理阶段,各个智能体根据本地观测和自身效用函数来选择动作输出给环境,从而与环境进行交互。本发明可以嵌入到任何基于价值函数的MARL框架中,提升智能体决策的效率和精度。
本实用新型公开了一种微通道式化学热泵反应器,包括外壳、电机和搅拌叶,所述外壳的左侧设置有水位监测管,所述外壳的右侧安装有出水口,所述电机位于出水口的上方,所述电机的上方设置有传动带,所述转轴的左侧进料口,且转轴的外部设置有转轮,所述搅拌叶位于转轮的下方,且转轮的外部设置有盖板,所述外壳的前后两端设置有固定套,且固定套的内部设置有阻尼杆,所述阻尼杆的前方设置有锁扣,且锁扣的左右两端设置有滑块。该微通道式化学热泵反应器,与现有的普通化学热泵反应器相比,该设备可以增加热量的利用率,从而减少浪费节约成本,同时该设备具有搅拌功能可以加快设备内部的化学药剂的融合速度,从而提高设备的工作效率。
本说明书实施例提供一种实现隐私保护的更新强化学习系统的方法,其中强化学习系统包括服务端和N个客户端,服务端部署强化学习模型的公共神经网络,N个客户端中各自部署该强化学习模型的线程神经网络,并各自搭建业务环境,其中强化学习模型用于针对业务环境预测业务动作。在该方法中,每个客户端利用其部署的线程神经网络独立地与其搭建的业务环境进行交互,并利用交互数据计算梯度数据,再对梯度数据进行加密后传输至服务端,服务端对每个客户端传输的加密数据进行汇总解密,得到对应于多个梯度数据的梯度和值,用以集中更新公共神经网络的模型参数。如此,可以在防止客户端中本地隐私数据被泄露的同时,实现多个客户端联合训练强化学习模型。
本发明公开了一种无人车强化学习训练环境构建方法及其训练系统,属于机器人导航领域与机器人仿真平台领域。包括:构建真实场景与仿真场景数据集;数据集增强;图像域转换算法的训练与模型保存;建立仿真环境模型与强化学习算法的API接口。在仿真环境中训练时,无人车模型上的摄像头采集观测到的仿真环境图像,经过图像域转换网络,转变为模拟的真实场景图片,作为状态输入强化学习网络,经过决策输出动作指令,发布给仿真端的无人车模型。在实际应用时,无人车摄像头采集现实中的真实场景图片,由于强化学习算法在训练时的输入的模拟真实场景图片与现实真实场景图片非常相似,因此训练好的算法可以直接迁移或者微调之后迁移至真实场景当中。
本说明书实施例提供一种强化学习模型的训练方法,该方法包括:获取业务环境的当前状态,其中包括上一轮交互产生的交互内容;基于该交互内容,将多个备选业务动作划分为本轮交互下的可选动作集和禁选动作集;将该当前状态输入强化学习模型,从可选动作集中选取收益预测值最大的可选动作作为本轮业务动作,如此可以避免用户被无关动作打扰,从而提升用户体验;再将该本轮业务动作施加于上述业务环境,得到该业务环境的本轮反馈,基于本轮反馈计算本轮业务动作的收益标签值,并基于该收益标签值构建其他备选业务动作的收益标签值,从而实现可以利用全量备选业务动作训练上述强化学习模型,有效加速强化学习模型的收敛。
本发明公开了一种基于沉积物地球化学特征识别大洋中脊热液区的方法,本发明通过对沉积物样品进行处理,获取其地球化学组成数据,并计算不同端元组成的沉积物对化学组成的贡献,获得热液来源元素的含量,估计热液来源元素的扩散距离,最后预测调查区热液活动的数量和可能产出的位置。本发明的优点是在大洋中脊热液活动探测中,可以实现活动和非活动热液区的识别,以更准确、方便的确定热液区的位置,具有便捷、高效的特点。
本发明公开了一种基于深度强化学习的EFSM输入序列生成方法,将输入序列生成问题看作是一个复杂的优化问题,求解最优解的过程就是利用元启发式算法对可执行路径中的每条变迁搜索满足其谓词判断条件的输入参数解;其中,元启发式算法被使用强化学习算法训练好的智能体来代替,智能体通过在本发明设计的动作空间内选择动作来改变输入参数的值,然后根据奖赏函数获取对应的奖赏值以指导下一步动作的选择。本发明可以根据各种客观测试路径有效地生成新的输入序列,可以有效地提高EFSM模型输入序列生成的效率和成功率,并能够在进行回归测试和测试用例生成应用中有效地减少输入序列生成的时间开销。
本发明公开了一种基于强化学习的视频多次遍历(Multipass)编码中码率分配与控制的优化解决方案。在第一次编码结束之后,视频分割为多个不重叠的连续的画面组。针对不同的画面组在第一次遍历(pass)后采集的对组内各帧图像的综合统计信息,通过预测网络得到码率分配和控制决策参数,并执行第二次遍历编码和获取编码结果评分。将统计信息和码控决策参数输入判别网络得到估分,执行强化学习的迭代训练过程。利用强化学习训练得到的预测网络,在编码视频图像第二次遍历前,得到各个画面组的码率分配与控制的最优化策略参数,从而最大可能的提升编码压缩效率。
本发明涉及一种基于深度强化学习的群智感知激励机制方法,获取参与者位置和移动轨迹信息,将参与者移动过程建模为马尔可夫决策过程,采用深度强化学习预测其在下一个激励周期内的移动轨迹,预测参与者在下一个激励周期结束时的位置分布,通过计算参与者的预测位置分布与数据请求方提供的感知数据目标分布的相对熵,选择大于相对熵阈值区域内的参与者进行激励。本发明避免在同一时间段内对所有参与者进行激励、对同一个参与者在所有激励周期内都进行激励,合理的激励机制解决群智感知参与者收集到的感知数据分布情况与数据请求方提供的目标数据分布之间差异较大、覆盖质量较低的问题;可被广泛应用于移动群智感知领域,降低激励参与者的成本。
本发明公开了一种基于深度强化学习实现人脸识别端边卸载计算方法及装置,包括:获取真实的人脸图片,根据边端人脸识别模型训练得到分类数据,其中,分类数据包括图片名称、id、图片提取出的128维特征向量、终端预测置信度、终端预测值、边缘预测值;将深度学习与强化学习进行结合,定义马尔科夫决策过程的状态空间、动作集、奖励函数和智能体;根据定义好的马尔科夫决策过程,构建Actor神经网络和Critic神经网络,使用分类数据对构建好的Actor神经网络和Critic神经网络进行训练,获得智能卸载决策模型;对智能卸载决策模型的性能与基准查询策略进行对比评估;根据对比评估的结果,将智能卸载决策模型部署到智能终端设备中,进行人脸识别的任务卸载决策。
本发明提供提高免疫分析仪检测准确性的方法和提高样本中分析物化学发光免疫检测线性范围的方法和试剂,其改进之处均在于生物素标记抗体和亲和素类物质固定的固相先于吖啶酯或吖啶磺酰胺标记抗体加入到样本中并进行孵育,然后加入吖啶酯或吖啶磺酰胺标记抗体,再进行孵育。这种改进可将较高浓度的分析物校准品的发光量显著地或更好地区分开来,从而提高分析物化学发光免疫检测的线性范围,同时显著降低化学发光背景值,而且也能更加准确地测量临床血清或血浆等样品中分析物的浓度。本发明所述方法和试剂与化学发光免疫分析仪配套使用,可用于肿瘤标记物、传染病、激素类、肝病、急性贫血等的检测。
一种危险化学品储存柜,包括柜体,柜体包括若干个储存格,每个储存格上安装有门,门与储存格间安装有与主控装置连接的电子锁,主控装置设有身份认证装置、信息采集装置、输入输出装置、视频监控装置、警报装置、无线数据传输装置,主控装置与远程服务器连接;柜体的储存格均安装有与温度传感器、湿度传感器、烟雾探测器、除湿机芯和冷却器。本发明能够对柜内危险化学品的储存环境进行实时监测和自动调节;实时读取危化品的储存信息以及进出柜体的情况。解决了人工操作时信息管理不及时、不完善、安全监管不到位的问题,有效提高监管水平与工作效率,保障危险化学品的储存及存取安全。
本发明公开一种化学气相沉积法制备Co0.85Se超级电容器材料的方法,其中Co0.85Se超级电容器材料为均匀覆盖在镍网上的纳米膜状结构。具体生长包括:1)硒粉和钴粉磨细混匀后倒入石英舟,放入化学气相沉积反应炉石英管中;2)将泡沫镍网放在气流下游靠近石英管管口的位置;3)通入氩气排尽炉中空气,停止通气,高温加热一段时间后,一定流量氩气通入石英管保温,最后炉子自然冷却至室温;4)取出泡沫镍,用去离子水和乙醇反复清洗,干燥,即得。本发明操作简单,不需要复杂设备,Co0.85Se均匀覆盖在镍网上,可大面积制备。合成的Co0.85Se纳米材料电极在三电极体系下测试,在1A/g的电流密度下表现出4462F/g的高比容量,在20A/g的高电流下经过5000次循环充放电后,仍能保持80%以上的比电容值,电荷转移阻抗为0.82?Ω/cm2。
本发明公开了一种基于图神经网络强化学习的机器人自主控制方法。本发明步骤如下:1、根据环境反馈给机器人传感器的信息和机器人的物理结构,组建机器人的特征图。2、将得到的特征图输入到图神经网络,在训练阶段使用机器人感知到的监督信息对图神经网络进行训练。3、使用训练完成的图神经网络对感知状态信息进行处理,得到更新后的机器人状态信息,预测下一时刻机器人的状态信息。4、使用建立起来的环境模型,以及模型预测控制算法,对未来一步机器人动作进行决策。本发明使用基于图网络的强化学习模型,成功地完成了之前强化学习并不能很好完成的动作提升了机器人自主控制的稳定性和可靠性,使得机器人自主控制更加便于实际应用。
本发明公开了一种博弈对话中基于对话历史和强化学习的多轮对话方法,属于智能体和强化学习模型领域。该方法包括如下步骤:首先将多轮对话作为一个有限重复博弈的过程,存储已经结束的完整多轮对话,构建既往对话历史信息库;然后在一个新的多轮对话中,基于记忆网络构建对手行动估计模型,用当前对话已经进行的轮次去检索对话历史信息库,通过多步估计产生对手下一步策略的估计向量;最后基于编码‑解码模型融合当前对话的信息和估计向量,做出下一步的应答。本发明在多轮对话过程中,将既往对话历史的估计向量和当前对话历史的回应向量进行融合,能够更充分地利用了历史信息,使得对话机器人(智能体)具备更高的适应性、做出更好的应答。
本发明是一种印染方法,特别涉及一种用于去除化学浆和低聚物的坯布染色生产方法。按以下步骤进行:选取样布→前处理退浆→坯布预定型→白坯烧毛→复配助剂配方设计、配制及用量→匹样缸减量→染色配方设计→匹样缸染色→烘干定型→色坯烧毛→水洗烘干→上油定型→后整理轧光→后整理罐蒸→成品检验。用于去除化学浆和低聚物的坯布染色生产方法提高染色稳定性,能有效提高一次成功率,减少染色回修率,节能减排效果明显,且生产加工后织物的手感回弹性、悬垂性、柔软性效果俱佳,各种质量内在指标等都能满足客户的要求。
本发明属于医疗器械领域,具体涉及一种基于化学反应技术的微型血栓清除机器人,包括可探测头部壳体、核心驱动壳体及贮藏释放药物壳体,所述可探测头部壳体上设置监测装置、无线通讯模块和处理器模块,所述核心驱动壳体内腔前后分为第一反应室、控制室和第二反应室,所述控制室内设置化学放能反应原料模块和化学放能反应激励模块,所述第一反应室内滑动配合第一活塞推板,所述第二反应室内滑动配合第二活塞推板,第一活塞推板和第二活塞推板分别配合连接划水机构,所述药物喷剂系统用以释放药物。本发明具有较高的运动速度、较大的驱动力、较强的环境适应性、结构简单等优点,有助于解决体内医用微型机器人驱动速度慢、驱动力小的领域缺点。
本发明公开了一种基于强化学习的深度学习模型安全性保障压缩方法与装置,包括:(1)使用图网络的方式将深度学习模型建模成图网络;(2)采用GCN提取图网络的嵌入向量;(3)将图网络每个节点的当前嵌入向量作为强化学习的环境状态,采用强化学习预测基于环境状态的动作值,并依据动作值实现每个节点的嵌入向量的修剪,直到所有节点的嵌入向量修剪完成,实现深度学习模型的一轮压缩;(4)根据经过一轮压缩后的模型对样本数据的预测结果计算错误率和安全性;(5)根据错误率和安全性计算采用强化学习进行一轮深度学习模型压缩的回报值;(6)基于回报值,重复步骤(3)~步骤(5),直到迭代终止,实现深度学习模型的压缩。
本发明公开一种基于分层强化学习的四足机器人运动规划方法,该方法通过构建基于深度强化学习的上层行为决策控制器以及基于模型预测控制的下层运动执行控制器;对于上层的深度强化学习网络,基于SAC算法设计四足机器人的状态更新网络、动作执行网络以及奖励函数等,结合机器人周围的环境高度图信息输出对应的行为控制参数;对于下层执行控制器中的模型预测控制器,通过求解基于上层输入的控制参数二次规划方程组来获取对应的控制指令。该分层控制框架结合了深度强化学习与模型预测控制的优势,使四足机器人能够根据当前机身状态以及地形环境做出更安全可靠的行为模式,保持机身姿态平稳,从而有效规避风险,实现在复杂地形下的有效运动轨迹规划。
本发明的公开了一种基于神经元覆盖率的深度强化学习鲁棒训练方法和装置,包括以下步骤:(1)搭建智能驾驶环境,从智能驾驶环境中采集状态数据对深度强化学习模型训练,直到达到设定回报值为止;(2)利用训练好的深度强化学习模型在环境中运行,提取多轮的状态动作对;(3)构建用于根据历史状态动作对序列预测未来时刻状态动作对序列的预测器和用于对状态动作对进行质量分类的分类器,并利用提取的状态动作对训练预测器和分类器;(4)依据定义的对抗采样策略,根据状态动作对质量采样状态动作对并进行深度强化学习模型的再训练,以提高深度强化学习模型的鲁棒性。
本发明涉及一种电化学腐蚀实验试样夹持装置,安装于阴极池与阳极池之间,用于夹持测试试样;包括主箱体、装夹部一及装夹部二,主箱体与装夹部一接触面、装夹部一与装夹部二接触面均开设有通孔,且通孔贯穿装夹部一设置,测试试样安装于装夹部一上的通孔内;装夹部二内设有金属顶针,测试试样与金属顶针相接触设置;装夹部二还设有与电极线相连的引出导线,引出导线与金属顶针相触。该夹持装置结构简单巧妙,适配性高,能够对不同尺寸类型的测试试样进行夹持,便于与测试单元相连接,保证测试结果的准确性。一种电化学腐蚀实验试样夹持方法,应用于上述电化学腐蚀实验试样夹持装置,同样具有便于测试试样夹持等优点。
本发明公开了一种基于转基因抗草甘膦杂交棉花的新型化学杀雄制种方法。本方法适合于以转EPSPS-G6基因的转基因抗甘膦除草剂陆地棉种质系为母本,另一陆地棉品种或种质系为父本配制的杂交棉组合。选择隔离条件良好的适合于棉花生长的制种地,将制种的杂交双亲在相邻地块种植(父母本种植比例1:6)。母本植株见蕾后用20mM的草甘膦溶液对母本棉花植株进行第一次化学杀雄,之后每隔15天化学杀雄1次,整个生长期共化学杀雄4次。第一次化学杀雄20天后,母本棉花植株开出的花朵均为不育,表现为雄蕊不散粉、散粉推迟和花粉不正常,镜检花粉粒100%不育时,可开始进行杂交制种。本发明化学杀雄效果稳定,持续时间长,安全可靠。
本发明公开了一种利用风能供电的难降解有机废水电化学处理装置及其方法,主要包括风能发电装置和电催化氧化装置。其首先利用风力发电系统将风能转化为电能,风力发电机的电力经过变压整流,然后给蓄电池充电,以化学能保存在电池中;蓄电池与电化学处理装置相连接,电化学折流处理装置中设置有多组阴阳电极用于电解污水,进出水管处接有水质监测仪,实时监测进出水的水质指标,实现风能的高效应用与污水的深度处理。本发明通过耦合风力发电与电化学处理装置,高效去除难降解有机废水中的有机污染物,具有污染物去除彻底、能源利用率高、运行流程简单的特点,克服了传统生物学方法周期长、效能差的缺陷以及传统电化学方法能耗高的问题。
中冶有色为您提供最新的浙江杭州有色金属化学分析技术理论与应用信息,涵盖发明专利、权利要求、说明书、技术领域、背景技术、实用新型内容及具体实施方式等有色技术内容。打造最具专业性的有色金属技术理论与应用平台!