本发明涉及信息处理领域,具体是一种通过强化学习技术实现无人机自主飞行的方法,包括如下步骤:步骤一、获取模拟数据集和真实数据集;步骤二、提取图像特征和动作特征;步骤三、使用Q‑learn ing训练一个深度神经网络Q‑funct ion;步骤四、构建现实世界策略学习网络,将深度神经网络Q‑funct ion训练好的参数迁移至现实世界策略学习网络中,训练行动条件奖励预测函数;步骤五、输入状态向量和H个未来计划行动向量的序列至行动条件奖励预测函数,通过一个长短期记忆循环神经网络整合之后,并在将来的每个时间点输出预测的奖励;步骤六、根据预测的奖励实现自主飞行;该方法能够使机器人仅使用单目摄像机就可以避免碰撞以实现自主飞行。
本发明公开了一种化学镀铜废液的回收利用方法,其特征在于:(一)将生产系统中排放的硫酸铜废液收集到废液储备槽中备用;(二)将废液储备槽中的硫酸铜废液抽入除Fe++槽中;(三)将除Fe++槽中废液进行加热,加热温度为60~70℃,其次加入CaCO3使溶液pH值调至2~3,然后在除Fe++槽里加入双氧水,通过双氧水将Fe++转化为Fe+++,加入Na2SO4,进行机械搅拌1~2小时使其充分反应,使其生成黄铁钒;(四)将步骤三中黄铁钒过滤清除,经过滤后的硫酸铜溶液进入到液体储槽中待化验硫酸铜溶液的各项指标;(五)检化验液体储槽的硫酸铜各项指标。通过以上步骤的处理,可以完全实现实芯气保焊丝的生产主要工艺用硫酸铜溶液自循环利用,降低了生产成本,消除了铜离子(重金属)对环境的污染,是一项利国利民的项目。
本发明属于分析化学技术领域,具体涉及一种利用高效液相色谱—蒸发光散射检测系统(HPLC-ELSD)检测薯类总糖含量的方法。以液相色谱、蒸发光检测器、色谱柱构成HPLC-ELSD系统,在标准葡萄糖溶液中添加NaCl。本发明具有灵敏度高,且检测器的响应不受溶剂和样品特殊性质的影响。
本实用新型公开了一种危险化学品有毒有害气体泄漏应急处理装置,包括应急处理装置本体、毒气探测器、多根毒气吸气管、可拆卸毒气处理单元装置、风机装置、出风口监测传感器和控制器,在应急处理装置本体中设置有可拆卸毒气处理单元装置,可拆卸毒气处理单元装置与风机装置连接,风机装置与控制器电连,毒气探测器设置在毒气释放源附近,并与控制器电连,在毒气吸气管的第一端头连接有毒气吸气罩,在毒气吸气管的第二端头连接可拆卸毒气处理单元装置,在风机装置的出风口位置设置有出风口监测传感器,出风口监测传感器与控制器电连。本实用新型应对毒气泄漏事故,能起到预防和管控功能,减少人员伤亡和财产损失。
本实用新型公开miRNAs电化学生物芯片,属于医药生物技术领域。该生物芯片是由载体(1)和载体(1)表面附着的腔体膜片(2)组成,所述腔体膜片(2)内具有通道模块腔(3),通道模块腔(3)之间相互连通,通道模块腔(3)的腔壁内贴合miRNAs探针系统;所述miRNAs探针系统是将DNA与miRNA的杂交直接转化为可测的电化学信号。该芯片采用的载体表面设置有腔体膜片,且载体基底为陶瓷;腔体膜片为无纺布材料,无纺布材料吸附能力强,使得探针密度高,样品和试剂的用量较少;而且膜的机械强度高;腔体膜片内具有通道模块腔,腔体膜片还具有防止反应过程中通道模块腔内水分的流失。本实用新型结构简单,原材料易得,成本低,操作方便。
本发明提供了一种基于强化学习的基片集成波导参数优化方法及结构,方法包括如下步骤:对待优化基片集成波导进行参数提取:参数包括阻抗网络中阻抗单元的偏转角度θ,以及加载其上的结构参数L;根据Q‑learning算法,基于强化学习中的ε贪婪策略,以参数夹角θ和尺寸L做范围变化并代入三维电磁场仿真软件进行变量仿真测试,得到参数对应的奖励值或惩罚值;根据所述参数对应的奖励值或惩罚值,得到最优参数。本发明在线下利用深度学习算法学习到最优的基片集成波导优化参数,然后在线上优化时使用,以快速得到给定设计参数及设计目标下最优的优化参数,提高了基片集成波导设计效率。
本实用新型公开了一种可拆卸式电化学再生槽,包括槽体、盖板和电极组件,槽体与盖板连接,槽体内设有小槽体,盖板上设有槽孔,槽孔与所述小槽体相对设置,电极组件可通过盖板上的槽孔插入小槽体内,电极组件包括电极、绝缘套和安装板,电极上部设有接线柱,绝缘套套装在接线柱上,绝缘套与安装板连接,安装板与所述盖板连接,电极与所述小槽体均为矩形结构。有益效果:通过盖板上开设槽孔,电极组件可由槽孔插入槽体,方便拆卸和检修;电极采用矩形结构,增大电解质与电极之间的流通面积,均匀分布;多组电极采用对插式插入电解液,增加电解效率;再生槽内设有与电极相匹配的矩形小槽体,既保证电解效率又减小再生槽外形尺寸。
本发明公开了一种基于深度强化学习的群体教学推荐系统,属于教育和信息技术领域。本发明通过课堂的投票、问答、作业和测验等交互方法采集学生数据,为给定的学生群体提供整体收益最大的教学计划,其整体收益可以用多目标优化函数表示,具体可以包括但不限于及格率、优秀率、平均分等。本发明使用深度强化学习方法为教师进行目标导向的教学路径规划,能够处理大规模的复杂数据。同时将花费大部分时间的训练过程放在了课前和课后,在课堂中,通过学生的课堂反馈,教师能够立即获得推荐的教学知识点。
本发明公开了一种化学掺杂碳制备高阻值埋嵌式电阻的方法。通过采用阻值添加剂提供C源掺杂Ni‑P薄膜进行化学改性,制备了在树脂基板上沉积Ni‑P‑C的三元合金高阻值材料。经测试,该材料制备的方块电阻高达400Ω以上,通过辅予在线监控电阻器的方法,实现制备误差控制在10%以内的目标。本发明公开的方法有效地解决了常规Ni‑P、Ni‑Cr等金属电阻存在的阻值小、功能值不稳定的难题,并降低了高频通信下信号传输的损耗与寄生效应。
本发明属于分析检测技术领域,具体涉及一种环境水中铁离子的快速检测方法和系统。本发明的方法包括如下步骤:步骤1,采用化学显色体系处理待检测水样,使化学显色体系发生颜色变化,拍摄化学显色体系的图片;步骤2,从所述图片中分割出感兴趣区域;步骤3,计算所述感兴趣区域中RGB颜色空间和HSI颜色空间的各分量的变化值;步骤4,以步骤3得到的至少两种分量的变化值作为特征,通过多元性回归方程模型分析待检测水样中铁离子的含量。本发明具有成本低、操作简单、检测效率高、抗干扰能力强等显著优势,适用于自然水体中Fe3+浓度的快速检测,具有很好的应用前景。
本实用新型公开了一种基于微机控制的化学实验箱,包括箱体,箱体底部设置有保温箱,保温箱顶部设置有震荡装置,震荡装置上设置有数个容器插入口,箱体中竖直设置有直线驱动机构,直线驱动机构上设置有横梁,横梁上设置有数个航空插座,航空插座的数量与容器插入口的数量相同,航空插座的位置与容器插入口的位置一一对应。通过本技术方案能够在微机的控制下自动完成一系列的实验,并且使得各类实验的数据采集、显示、存储和处理合为一体,极大地提高了化学实验的自动化程度和实验数据的测量精度。
本发明公开了一种基于强化学习与光载无线技术的高铁电磁干扰规避系统,具体为:分布于高铁沿线的无线接入终端通过天线将电磁信号接收并调制到光信号上,利用密集型波分复用器复用来自不同无线接入终端的上行光信号,经上行光纤链路远距离传输至中心站;上行复用光信号通过光电接收阵列中的波分解复用器解复用至阵列接收信道,利用阵列光电探测器完成电磁信号恢复,并接入多信道模数转换模块进行数字信号处理;集中式数据处理模块通过强化学习技术实现电磁干扰的主动式避免。本发明实时高效完成电磁干扰的主动式避免,尤其对于高铁沿线隧道、山区、高原等难以维护站点的电磁干扰极为有效,保障了高铁列车运行安全,提升运营效率。
本发明公开了沸腾、强腐蚀性溶液环境下电化学腐蚀试验装置及其应用,试验装置包括试验容器,试验容器上设置试样支持体接口、参比电极接口、辅助电极接口、蒸汽循环减压器接口,试样支持体接口、参比电极接口、辅助电极接口、蒸汽循环减压器接口分别安装有工作电极试样支持体、参比电极支持体、辅助电极和蒸汽循环减压器;工作电极试样支持体和参比电极支持体均设置了冷却单元,对工作电极试样支持体的导线进行了隔热处理。本发明有效解决了高温、强腐蚀介质环境下因密封件破坏导致电化学信号短路的问题,通过双冷凝回路串联设计,有效解决了装置内压力过大和参比电极冷却问题,并结合磨口接口设计、蒸汽循环减压器,实现了测量装置密封问题。
本发明属于无线通信技术领域,具体的说是涉及一种D2D系统中基于深度强化学习的功率分配方法。本发明的方案中为每个链路对都单独构建一个深度神经网络,不需要实时得到所有链路的信道信息,而是根据部分历史信息和其他链路地决策信息来预测当前链路周围的通信环境,让各个链路对能够相互配合进而进行实时的功率决策以最大化全局网络的加权和速率,从而实现了无需迭代的基于深度强化学习的功率分配方法。
本发明公开了一种多气氛环境下电化学渗氢电解池及其应用方法。本发明电解池包括两个相同的单电解池和螺杆,每个单电解池包括:电解槽、气氛进气口、参比电极插口、内置对电极、夹具、阳极端、插孔、基座、置气通气口,进水口和出水口;电解槽为内双层结构,基座和夹具分别位于电解槽的两侧,气氛进气口、参比电极插口、置气通气口分别设于电解槽的顶面上,进水口和出水口分别设于电解槽的前侧面和后侧面上,内置对电极设于基座内部;两个单电解池上的夹具的侧面相对设置,且两者形成间隙;螺杆与插孔固定连接;阳极端设于间隙中,样品置入阳极端中,样品的中心位于两个单电解池的水平轴线上。本发明实现了多气氛环境下金属材料的电化学渗氢测试。
本发明提出了一种基于深度强化学习的远程监督文本实体关系抽取方法,该方法包括:进行数据预处理,通过分词、词向量转化、位置向量构成文本向量;Bi‑LSTM+Attentnion将自然文本编码为含有上下文语义的特征向量;通过实体类型嵌入得到实体类型信息的嵌入表示;再构建出依存树,组合表示为最终的句子表示;选用一个句子注意力机制,得到加权的包表示;通过softmax函数计算得到预测标签;使用强化学习方法在远程监督标注和预测标签中选择一个作为软标签,再使用软标签作为正确标签训练,得到最终的关系抽取结果。
本发明公开了一种高温高压电化学实验用样品固定装置及其安装方法,固定装置包括固定圆盘、薄管样品固定夹具和薄片样品固定夹具;固定圆盘上设置有若干竖向螺纹通孔,等间距分布在投影位置四周;薄管样品固定夹具包括定位螺柱,以及铂筒对电极和管状工作电极,铂筒对电极和管状工作电极呈同心布置;薄片样品固定夹具包括定位螺柱,以及片状工作电极和铂片对电极,定位螺柱的顶部可拆卸式设置有定位样品夹,片状工作电极和铂片对电极可拆卸式安装在定位样品夹上,片状工作电极和铂片对电极对称分布在定位螺柱两侧。本发明解决了高压釜中进行电化学实验时电力线不均匀、重复性差、管材样品测试信号不完整以及无法同时对样品进行多通道测试的问题。
本发明公开了一种基于动作采样的强化学习知识图谱推理方法。该发明针对传统知识图谱强化学习推理算法中表征能力不足、无效冗余动作选取以及无记忆组件问题,根据表示学习方法在数据集上的原始事实预测评分,针对性地选取适应性更强的表示学习方法来表示强化学习环境以增强算法表征能力;设计动作采样器以减少智能体在游走过程中的无效冗余动作选择;以LSTM为记忆组件,将历史信息进行编码以增加模型精度,这使得本算法可以在摆脱预训练的情况下取得优于基于路径的推理算法的效果。该方法将智能体在环境中游走得到的路径映射到三层LSTM策略网络,通过动作采样促进智能体选择更有意义的路径,最终实现较为准确的实体关系路径学习。
本发明公开了一种基于强化学习的多径动态复用与分组传输方法,1)将时间划分为以100ms为长度的时间片,并进行顺序编号1,2,……,t,t+1,……;2)在每一个时间片的尾部,收集影响和反映各个链路传输质量的因素,将这些数据进行标准化后做为外部环境观测值;本发明基于深度强化学习的链路捆绑传输技术,将链路捆绑传输控制作为智能体,将传输中影响链路质量的因素作为环境,链路后续的传输质量和稳定性作为奖励和惩罚,从而建立强化学习模型,通过深度神经网络对策略进行不断优化,从而达到不断优化传输策略的目的;具备更好的前瞻性。
一种化学实验废弃物分离与处理装置,包括:沉降罐,其顶部一侧设有注入罐,沉降罐内设有斜面,沉降罐下部相对的两侧壁上设有插槽,插槽内设有固体收纳箱;反应罐,反应罐和沉降罐通过弯管连接,反应罐上设有搅拌电机,且反应罐上表面设有加药器,反应罐底部设有沉淀收集槽,反应罐内设有pH计;吸附装置,其内设有吸附层。本实用新型将化学实验产生的废弃物进行简单的就低分离、处理,处理成本低,适合用于小规模实验室内使用,将本实用新型用于“化学反应焓变的测定”产生的废弃物进行分离时,能够有效的处理废弃物中的铜粉、锌粉、铜离子以及锌离子,使得处理后的液体能够达到排放标准,降低了废液存放、运输过程中的安全隐患。
本实用新型提供了一种化学厂用多介质污水过滤器,属于污水处理技术领域,包括罐体、排水管和进水管,罐体右侧自上而下分别嵌入设置有进水管和排水管,且排水管呈“L”状设置,罐体顶端通过螺栓固定连接有检修口,进水管靠近罐体内部一端固定连接有分水器。该种化学厂用多介质污水过滤器中设置顶帽、第一活性炭层和第二活性炭罐,通过顶帽与分水器的配合使用,使得污水在进水管分流向分水器流动,进而令污水呈向上喷洒状排出,通过增加污水与空气之间接触时间达到对污水冷却的目的,同时利用第一活性炭层和第二活性炭罐双重配合,使得初步过滤完毕的污水在二者中进一步过滤,从而令污水中的杂质被活性炭分离达到更好的过滤效果。
本发明公开了基于模型的高样本率深度强化学习的无人设备控制方法,包括:获取轨迹数据,并将轨迹数据存入环境缓冲池中;对环境状态转移模型进行更新;进行多步交互轨迹预测生成预测数据,并将预测数据存入模型缓冲池;对Actor‑Critic策略模型进行更新;持续迭代更新环境状态转移模型和Actor‑Critic策略模型直至当前策略性能达到预期要求。本发明采用基于模型的深度强化学习的方法,构建一个环境状态转移模型来模拟无人设备与外界环境的交互,从而急剧减少无人设备与真实环境的交互次数,并且由环境状态转移模型产生的数据能够对无人设备行进控制策略进行有效的优化,使得对无人设备的控制变得高效。
本实用新型公开了一种含油乳化液废水电化学分离反应器,反应器本体分别连接有废水进水管和处理后出水管,其特征在于:在反应器本体内设置有用于电化学反应的电极单元,电极单元的两个电极分别与电极专用电源的两个电源输出端连接,在电极单元的下方约50MM处安装有取样口和在线监测仪表接口;在所述反应器本体外设置有加药单元,加药单元包括废水和破乳剂混合单元,加药单元的送水管与反应器本体的废水进水管连接。利用本实用新型可以实现电离及化学破乳,其应用范围更加广泛,具有对乳化液废水分离效率高、脱色率高、操作简便、无易损易耗件更换等优点。
本发明公开一种水力‑化学耦合作用下的孔隙压力传递实验系统及方法,包括双泵流体控制系统和三轴室、围压增压系统;所述三轴室包括轴向增压缸、三轴室支座、三轴室腔体、气泵;所述三轴室腔体上设有与三轴室腔体内腔相通的气管接头、轴向穿设的顶端支撑压头,内部设有流体循环压头、岩心;所述三轴室支座具有向上的轴向凸起部,所述顶端支撑压头、流体循环压头、岩心依次压在所述三轴室支座的轴向凸起部上;所述岩心侧面设有测量岩心内部压力的孔隙压力传感器。本发明可以模拟地层条件下循环的钻井液在水力压差单独作用、化学势差单独作用以及水力压差和化学势差耦合作用下的孔隙压力传递实验,得到各因素对孔隙压力的影响程度和变化规律。
本发明公开了一种基于深度强化学习的时间序列分类方法,包括以下步骤:采集若干时间序列,获取样本数据,并对样本数据进行预处理;构建深度残差网络,根据预处理后的样本数据,并通过深度强化学习方法对深度残差网络进行更新;将待测试的时间序列输入更新完成的深度残差网络,得到时间序列的分类结果。本发明通过将样本打乱顺序输入深度强化学习网络,使其更具鲁棒性,设置奖励和惩罚的方式寻找时间序列分类的最优策略,拥有高的分类准确度。
本发明公开了一种基于相似上下文和强化学习的中文词向量生成方法,解决了现有的中文词向量生成方法都是考虑基于目标词的相邻上下文和目标词的关系来进行预测的,没有考虑到在中文中有些单词虽然相邻,但是语义不相关的情况,且词向量的表示质量不高问题。本发明方法包括:选取语料库,进行语料库预处理,从而构建中文语料库;对中文目标词进行相似上下文发现,获得与中文目标词的语义相关的相似上下文;构建中文词向量强化学习框架,并进行强化学习,得到中文目标词的词向量表示。本发明能够解决中文相邻词不相关的问题,生成高质量的中文词向量。
本实用新型属于化学品腐蚀测试设备技术领域,具体涉及一种用于航空化学品氢脆试验的盛样杯及试验装置。针对现有技术的缺陷,本发明的盛样杯包括杯体,所述杯体底部设置有用于通过氢脆棒试件的通孔,所述通孔中设置有用于密封杯体与氢脆棒试件的密封环。采用本实施例的盛样杯,能够保证航空化学样品体积与氢脆棒表面积的比值为25ml/cm2,同时能避免夹具或杯体被腐蚀产生腐蚀产物,从而影响试验结果。且试验中氢脆棒试件断裂时试验装置仍能够保持稳定,从而提高了实验的安全性。
本发明属于人工智能技术领域,具体的说是涉及一种基于深度强化学习的网络自主智能管控方法。本发明首先构建网络拓扑,然后引入CNN、LSTM层和延迟更新策略构建基于DDPG强化学习算法的路由决策模型,最后对基于深度强化学习的路由决策模型进行迭代训练。在每次迭代训练中,智能体根据测量得到的网络状态和神经网络获得输出的动作,即一组链路权重,并根据链路权重使用最短路径算法计算业务的路由。根据路由计算结果,智能体下发流表,并获取业务的端到端时延和丢包率计算此次迭代的奖励值。算法具有良好的收敛性,能够有效降低业务的端到端时延和丢包率。
本实用新型属于石油化工技术领域,具体而言,涉及一种化学防砂配砂及固砂评价实验装置。该装置包括配砂装置、注砂装置、固砂装置和测评装置。配砂装置、注砂装置、固砂装置和测评装置依次相连。配砂装置包括树脂储罐、树脂辅助剂储罐、固化剂储罐、固化剂辅助剂储罐、第一调节阀、第二调节阀、第三调节阀、第四调节阀、平流泵、第一截止阀和混合釜;注砂装置包括涂敷砂注入管线和携砂液注入管线。固砂装置包括氮气瓶、第七调节阀和固砂模型;测评装置包括进液管线、排液管线和生产流体储罐。实现了对现场化学防砂施工工艺从配砂、注砂、固砂到固砂质量测评整个工艺流程的室内实验模拟,通过实验优选出与出砂层匹配度最佳的涂敷砂配置方案。
中冶有色为您提供最新的四川成都有色金属化学分析技术理论与应用信息,涵盖发明专利、权利要求、说明书、技术领域、背景技术、实用新型内容及具体实施方式等有色技术内容。打造最具专业性的有色金属技术理论与应用平台!