本发明公开了一种基于动作采样的强化学习知识图谱推理方法。该发明针对传统知识图谱强化学习推理算法中表征能力不足、无效冗余动作选取以及无记忆组件问题,根据表示学习方法在数据集上的原始事实预测评分,针对性地选取适应性更强的表示学习方法来表示强化学习环境以增强算法表征能力;设计动作采样器以减少智能体在游走过程中的无效冗余动作选择;以LSTM为记忆组件,将历史信息进行编码以增加模型精度,这使得本算法可以在摆脱预训练的情况下取得优于基于路径的推理算法的效果。该方法将智能体在环境中游走得到的路径映射到三层LSTM策略网络,通过动作采样促进智能体选择更有意义的路径,最终实现较为准确的实体关系路径学习。
本发明涉及热壁修正方法技术领域,公开了一种用于高速飞行器气动加热数值预测的考虑高超声速化学非平衡效应的改进热壁修正方法,本方法将对流热流按物理过程的贡献进行分解,其中温度梯度引起的热流部分满足传统线性的热壁修正方法,而反应扩散引起的热流部分与壁面高温化学作用相关,根据壁面化学反应机制做相应处理。分别求解温度梯度引起的热流和反应扩散引起的热流,再将求解到的热流相加,得到壁面总热流。本发明提出的方法只需要求解冷壁和绝热壁条件下的高超声速流场,不需要流固耦合迭代求解,计算效率高。
本发明公开了一种基于强化学习的多径动态复用与分组传输方法,1)将时间划分为以100ms为长度的时间片,并进行顺序编号1,2,……,t,t+1,……;2)在每一个时间片的尾部,收集影响和反映各个链路传输质量的因素,将这些数据进行标准化后做为外部环境观测值;本发明基于深度强化学习的链路捆绑传输技术,将链路捆绑传输控制作为智能体,将传输中影响链路质量的因素作为环境,链路后续的传输质量和稳定性作为奖励和惩罚,从而建立强化学习模型,通过深度神经网络对策略进行不断优化,从而达到不断优化传输策略的目的;具备更好的前瞻性。
本实用新型公开了一种用于化学实验的智能演示装置,包括试剂瓶、测量仪、电动转轴、玻璃管、加热器、烘干器、软管、废液槽、反应仓、水槽、液体瓶、箱盖、控制器、集气瓶和实验层;实验层上分别设有试剂瓶、加热器、废液槽、液体瓶和集气瓶,加热器的顶端设有反应仓,反应仓的顶端设有水槽,反应仓的一侧设有烘干器,且反应仓的底端通过软管与废液槽活动连接,试剂瓶、液体瓶和集气瓶均通过玻璃管与反应仓固定连接,试剂瓶与液体瓶的一侧均设有测量仪,且试剂瓶与液体瓶的底端均设有电动转轴,实验层的一端活动连接有箱盖,箱盖的内侧设有控制器;该种用于化学实验的智能演示装置,使教学效率更高,演示更方便快捷,实验更精准。
一种化学实验废弃物分离与处理装置,包括:沉降罐,其顶部一侧设有注入罐,沉降罐内设有斜面,沉降罐下部相对的两侧壁上设有插槽,插槽内设有固体收纳箱;反应罐,反应罐和沉降罐通过弯管连接,反应罐上设有搅拌电机,且反应罐上表面设有加药器,反应罐底部设有沉淀收集槽,反应罐内设有pH计;吸附装置,其内设有吸附层。本实用新型将化学实验产生的废弃物进行简单的就低分离、处理,处理成本低,适合用于小规模实验室内使用,将本实用新型用于“化学反应焓变的测定”产生的废弃物进行分离时,能够有效的处理废弃物中的铜粉、锌粉、铜离子以及锌离子,使得处理后的液体能够达到排放标准,降低了废液存放、运输过程中的安全隐患。
本实用新型提供了一种化学厂用多介质污水过滤器,属于污水处理技术领域,包括罐体、排水管和进水管,罐体右侧自上而下分别嵌入设置有进水管和排水管,且排水管呈“L”状设置,罐体顶端通过螺栓固定连接有检修口,进水管靠近罐体内部一端固定连接有分水器。该种化学厂用多介质污水过滤器中设置顶帽、第一活性炭层和第二活性炭罐,通过顶帽与分水器的配合使用,使得污水在进水管分流向分水器流动,进而令污水呈向上喷洒状排出,通过增加污水与空气之间接触时间达到对污水冷却的目的,同时利用第一活性炭层和第二活性炭罐双重配合,使得初步过滤完毕的污水在二者中进一步过滤,从而令污水中的杂质被活性炭分离达到更好的过滤效果。
本发明公开了基于模型的高样本率深度强化学习的无人设备控制方法,包括:获取轨迹数据,并将轨迹数据存入环境缓冲池中;对环境状态转移模型进行更新;进行多步交互轨迹预测生成预测数据,并将预测数据存入模型缓冲池;对Actor‑Critic策略模型进行更新;持续迭代更新环境状态转移模型和Actor‑Critic策略模型直至当前策略性能达到预期要求。本发明采用基于模型的深度强化学习的方法,构建一个环境状态转移模型来模拟无人设备与外界环境的交互,从而急剧减少无人设备与真实环境的交互次数,并且由环境状态转移模型产生的数据能够对无人设备行进控制策略进行有效的优化,使得对无人设备的控制变得高效。
本实用新型公开了一种含油乳化液废水电化学分离反应器,反应器本体分别连接有废水进水管和处理后出水管,其特征在于:在反应器本体内设置有用于电化学反应的电极单元,电极单元的两个电极分别与电极专用电源的两个电源输出端连接,在电极单元的下方约50MM处安装有取样口和在线监测仪表接口;在所述反应器本体外设置有加药单元,加药单元包括废水和破乳剂混合单元,加药单元的送水管与反应器本体的废水进水管连接。利用本实用新型可以实现电离及化学破乳,其应用范围更加广泛,具有对乳化液废水分离效率高、脱色率高、操作简便、无易损易耗件更换等优点。
本发明公开一种水力‑化学耦合作用下的孔隙压力传递实验系统及方法,包括双泵流体控制系统和三轴室、围压增压系统;所述三轴室包括轴向增压缸、三轴室支座、三轴室腔体、气泵;所述三轴室腔体上设有与三轴室腔体内腔相通的气管接头、轴向穿设的顶端支撑压头,内部设有流体循环压头、岩心;所述三轴室支座具有向上的轴向凸起部,所述顶端支撑压头、流体循环压头、岩心依次压在所述三轴室支座的轴向凸起部上;所述岩心侧面设有测量岩心内部压力的孔隙压力传感器。本发明可以模拟地层条件下循环的钻井液在水力压差单独作用、化学势差单独作用以及水力压差和化学势差耦合作用下的孔隙压力传递实验,得到各因素对孔隙压力的影响程度和变化规律。
本发明公开了一种基于深度强化学习的时间序列分类方法,包括以下步骤:采集若干时间序列,获取样本数据,并对样本数据进行预处理;构建深度残差网络,根据预处理后的样本数据,并通过深度强化学习方法对深度残差网络进行更新;将待测试的时间序列输入更新完成的深度残差网络,得到时间序列的分类结果。本发明通过将样本打乱顺序输入深度强化学习网络,使其更具鲁棒性,设置奖励和惩罚的方式寻找时间序列分类的最优策略,拥有高的分类准确度。
本发明公开了一种基于相似上下文和强化学习的中文词向量生成方法,解决了现有的中文词向量生成方法都是考虑基于目标词的相邻上下文和目标词的关系来进行预测的,没有考虑到在中文中有些单词虽然相邻,但是语义不相关的情况,且词向量的表示质量不高问题。本发明方法包括:选取语料库,进行语料库预处理,从而构建中文语料库;对中文目标词进行相似上下文发现,获得与中文目标词的语义相关的相似上下文;构建中文词向量强化学习框架,并进行强化学习,得到中文目标词的词向量表示。本发明能够解决中文相邻词不相关的问题,生成高质量的中文词向量。
本实用新型属于化学品腐蚀测试设备技术领域,具体涉及一种用于航空化学品氢脆试验的盛样杯及试验装置。针对现有技术的缺陷,本发明的盛样杯包括杯体,所述杯体底部设置有用于通过氢脆棒试件的通孔,所述通孔中设置有用于密封杯体与氢脆棒试件的密封环。采用本实施例的盛样杯,能够保证航空化学样品体积与氢脆棒表面积的比值为25ml/cm2,同时能避免夹具或杯体被腐蚀产生腐蚀产物,从而影响试验结果。且试验中氢脆棒试件断裂时试验装置仍能够保持稳定,从而提高了实验的安全性。
本发明属于免疫组织化学技术领域,公开了一种猪不同部位脂肪组织交感神经免疫组织化学染色优化方法,石蜡切片脱蜡水化后,进行抗原修复;利用丙酮固定后,血清封闭,一抗孵育;利用过氧化氢阻断后,进行二抗孵育;进行DAB显色,核复染后,脱水封片;进行显微镜镜检,石蜡切片免疫组化结果判读。通过本发明的优化实验步骤,染出了效果较好的组织学切片;一是加入了丙酮固定这一实验步骤,可以很好的达到使细胞通透且去除一部分油脂的效果,使得抗体更好结合组织抗原的效果;二是调整过氧化氢阻断的顺序,在一抗孵育之后,再进行过氧化氢阻断的步骤。因为在过氧化物阻断后,一些抗原表位被过氧化物修饰了,降低了抗原抗体的结合。
本发明属于人工智能技术领域,具体的说是涉及一种基于深度强化学习的网络自主智能管控方法。本发明首先构建网络拓扑,然后引入CNN、LSTM层和延迟更新策略构建基于DDPG强化学习算法的路由决策模型,最后对基于深度强化学习的路由决策模型进行迭代训练。在每次迭代训练中,智能体根据测量得到的网络状态和神经网络获得输出的动作,即一组链路权重,并根据链路权重使用最短路径算法计算业务的路由。根据路由计算结果,智能体下发流表,并获取业务的端到端时延和丢包率计算此次迭代的奖励值。算法具有良好的收敛性,能够有效降低业务的端到端时延和丢包率。
本实用新型属于石油化工技术领域,具体而言,涉及一种化学防砂配砂及固砂评价实验装置。该装置包括配砂装置、注砂装置、固砂装置和测评装置。配砂装置、注砂装置、固砂装置和测评装置依次相连。配砂装置包括树脂储罐、树脂辅助剂储罐、固化剂储罐、固化剂辅助剂储罐、第一调节阀、第二调节阀、第三调节阀、第四调节阀、平流泵、第一截止阀和混合釜;注砂装置包括涂敷砂注入管线和携砂液注入管线。固砂装置包括氮气瓶、第七调节阀和固砂模型;测评装置包括进液管线、排液管线和生产流体储罐。实现了对现场化学防砂施工工艺从配砂、注砂、固砂到固砂质量测评整个工艺流程的室内实验模拟,通过实验优选出与出砂层匹配度最佳的涂敷砂配置方案。
本发明公开了一种基于催化反应电化学原理的氢气浓度传感器,包括压力平衡膜、内层壳体、对电极、工作电极、浓硫酸电解质、氢气半透膜及信号接头,内层壳体上下两端均开口,压力平衡膜和氢气半透膜分别封闭内层壳体上下两端的开口,压力平衡膜、内层壳体及氢气半透膜三者之间的区域构成电解质容腔,浓硫酸电解质填充于电解质容腔内。对电极、工作电极及信号接头三者均有一端嵌入电解质容腔内,对电极、信号接头均与工作电极连接。对电极的基材表面涂覆有二氧化铂层,工作电极的基材表面镀有铂黑层。本发明应用时测量准确性高,选择性强,具备在220℃、辐照、高浓度水蒸气等苛刻条件下连续稳定工作能力。
本发明公开了微型轴承核心元件超精密柔性化学机械抛光装置及方法。核心元件包括内套圈、保持架、滚动体、外套圈。抛光装置包括元件自转模块、外套圈转向模块、元件夹持模块、抛光液池旋转模块、支架。其中,元件夹持模块针对性提供内套圈夹具、保持架夹具、滚动体夹具、外套圈夹具。抛光方法包括安装调试抛光装置、配制柔性化学机械抛光液、设置抛光工艺参数、测量表面质量并反馈。柔性化学机械抛光液包括非牛顿流体、0.01‑40wt%的研磨颗粒、0‑10wt%的氧化剂、0‑10wt%的金属络合剂、0‑5wt%的金属缓蚀剂、以及余量的水,pH值2.0‑10.0。本发明通过优化化学反应和力流变效应机械力的协同作用,能够实现核心元件表面超精密低损伤加工以及复杂曲面保形加工,且绿色环保。
本发明涉及分析化学领域,公开了一种检测罗库溴铵中溴丙烯含量的方法,具体为取罗库溴铵样品,用乙腈和水体积比为9~6∶1~4的混合溶液作为溶剂溶解,得到供试品溶液;取溴丙烯对照品,用乙腈和水体积比为9~6∶1~4的混合溶液作为溶剂溶解,得到对照品溶液;将对照品溶液和供试品溶液分别进行高效液相色谱法检测,外标法分析测定结果。本发明所述检测罗库溴铵中溴丙烯含量的方法能够检测罗库溴铵产品中溴丙烯含量,检测限为0.044ng。该方法的建立能够在制备罗库溴铵过程中,对溴丙烯残留进行检测,灵敏度高,专属性强,结果准确可靠,从而对罗库溴铵产品质量进行准确的评价,保证罗库溴铵产品的质量。
本发明属于药品管理领域,是涉及使用人工智能技术和物联网技术的全智能化应用场景化学药品管理设备和配套管理系统,主要由智能药品存储系统、智能药品配送系统、环境监测管理系统和智能药品管理系统软件共同组成,包括:常规药品存储单元、危险药品存储单元、有害气体过滤模块、智能分量药品模块、智能取药机器人、智能无人药品配送车、智能无人危险药品配送车、药品视觉识别模块、多量程称量模块、人脸识别模块、取/还药操作屏、常规药品取药栈、危险药品取药栈、常规药品还药栈、危险药品还药栈、中央服务器、显示大屏、机器视觉+物联网环境监测模块。采用本发明的化学药品管理系统操作简单、便于管理,能够大幅提高药品储用工作效率和安全性。
本发明涉及计算机技术领域,特别涉及一种基于深度强化学习的数据中心资源离线调度方法。深度强化学习可以为资源调度管理的人为启发式方法提供一个可行的替代方案。通过不断学习,深度强化学习方法可以针对特定工作负载(例如周期性负载或随机负载)进行优化,并在各种条件下保持高质量优化调度结果。把最小化平均作业slowdown(系统减缓时间)作为优化目标,通过计算离线调度中每一次调度的奖励值,引导深度网络向着目标优化,最终向着最优目标训练。结果显示,在本发明的大量实施例测试中,使用深度强化学习的离线调度方法的slowndown远低于SJF(最短作业优先算法)等传统的优化作业调度方法,体现出深度强化学习方法在这一领域的优势。
本发明公开了一种基于强化学习的网络链路性能指标异常定位方法,通过INT技术获取网络节点的状态信息反映链路性能状态。异常节点定位时,从环境中获取的业务流路由信息,结合用户反馈结果生成环境状态,输入到强化学习(RL)代理,得到每个交换机对应的Q值,选取最大的交换机为异常节点,并开放其INT功能,然后再输入环境状态,再定位异常节点,并进行修复,直到用户反馈所有业务流正常。同时,根据INT信息监测出开放交换机(定位的异常节点)是否为真实的异常节点,给出奖励送到经验回放池,使决策神经网络输出的Q值与交换机对应的奖励值成正相关性,使得决策神经网络更能准确定位异常节点,这样在这些异常节点上使用INT技术实时监测,不必在所有节点上使用,从而减少网络管理开销。
本发明公开了一种基于深度强化学习的3D/2D医学图像配准方法,先获取2D和3D医学图像并进行预处理,得到多分辨率的参考图像和浮动图像;然后搭建深度强化学习网络,对术前待配准3D图像做特定方向投影,得到不同变换参数的DRR图像,再计算每幅DRR图像与2D参考图像的相似性测度,最后选出相似性测度值最高的DRR图像,最后利用深度强化学习网络对选出的DRR图像进行图像配准。
本发明公开了一种基于深度强化学习的共享自行车调度方法,包括以下步骤:S1:划分共享自行车的调度区域,得到调度区域单元,并确定共享自行车的运行环境变量;S2:确定共享自行车的调度变量;S3:构建共享自行车的车辆调度优化模型;S4:基于共享自行车的车辆调度优化模型,利用平均场理论构建共享自行车调度框架,并利用共享自行车调度框架完成共享自行车调度。本发明提出的基于强化学习的共享自行车调度优化方法有利于智能地解决随机和复杂的动态环境下,大规模路网的共享自行车短期和长期调度优化问题。其考虑环境的供需变化和未来时间中调度决策与环境的交互影响,且不需要提前预测需求或进行人工数据处理,不受到需求预测计算效率和准确性的影响。
本发明公开一种复杂断块油藏精细注水与化学复合驱结合的采油方法,依次包括如下步骤:S1、根据化学驱的适用条件,选择最优的应用区块;S2、根据油水井情况,完善井网;S3、聚驱层系的优化;S4、选择综合对比优化后的化学驱溶液注入时机(含水率小于90%),注入量为油藏孔隙体积的0.6‑0.8倍(0.6‑0.8PV),提高综合开采效果;S5、实施过程中定期监测聚合物和表面活性剂溶液的产出浓度。本发明针对复杂断油藏开发特点,通过分层注水提高水驱波及效率,在开采中后期采用化学复合驱的方法提高原油采收率。
本实用新型公开了一种评价固化体在多场耦合作用下化学稳定性的试验装置,包括:计算机数据采集控制系统,温控箱,以及一组样品处理装置,其特征是:所述样品处理装置均由顺次通过输液管相连通的储液器、恒压泵、反应器、冷却箱、恒流泵和溶液收集器构成,所述反应器设置于所述温控箱内。采用本实用新型,能够同时提供温度、应力、渗流、化学多场耦合作用,能够得到多场间的耦合效应,使固化体的化学稳定性试验条件更接近处置条件,且能够独立控制温度、渗流、应力、化学等参数,为固化体在模拟深地质处置环境的化学稳定性评价提供试验平台,测试效果好,实用性强。
本发明公开了一种热室内电化学蚀刻样品台,包括放置台和接触片,所述放置台上设置有第一通孔和第二通孔;所述第一通孔用于放置镶嵌后的试样,所述第二通孔用于放置参比电极和对电极;所述接触片一端与放置台转动连接,另一端设置在第一通孔上方,所述接触片与放置台之间设置有弹性件,所述接触片采用导电金属制成。本发明样品台的兜底开孔设计使得蚀刻过程机械手放置试样便捷,通过带弹簧的压紧接触片设计使得机械手操作能有效的启动和暂停蚀刻过程,能保障热室内放射性试样的电化学蚀刻过程顺利进行,为锆合金包壳材料等的辐照后检验提供技术支撑。
本实用新型提供了一种地下水原位化学氧化修复系统,涉及地下水修复技术领域,解决了目前地下水原位化学氧化修复系统常难以控制药剂量以及处理污染范围较大的区域效率较低的技术问题。该地下水原位化学氧化修复系统包括药剂存储箱(1)、搅拌装置(2)、药剂注入系统、水质监测系统和抽水循环系统。本实用新型设置的水质监测系统以及电磁阀能够保证水质处理效果以及避免药水浪费,设置在监测装置上的显示器以及注药管道上的压力表和电磁流量计方便工作人员观察系统的运行状况,抽水循环系统能够促进地下水循环,增强氧化剂的混合效果,实现快速修复污染范围较大的地下水区域。
本实用新型提供了一种电化学环境下摩擦试验设备,属于摩擦学领域。上述设备包括机架、样品台、载荷施加装置、微动装置、摩擦力测量装置、控制器和电化学工作站。其中,样品台用于安装固定样品;微动装置用于带动摩擦球在样品表面做微量运动,并将位移数据传递给控制器;载荷施加装置用于给摩擦球施加载荷,并将载荷数据传递给控制器;摩擦力测量装置用于测量样品所受到的摩擦力,并将数据传递给控制器,电化学工作站对样品及浸泡样品的电解液施加电压并采集电压电流数据。上述方法采用了上述设备,利用上述设备及方法能够实时采集比较准确的相关数据,为下一步研究提供数据支撑;并且还可以研究不同载荷下微动摩擦的机理。
本发明公开了一种基于生物正交化学法捕获高纯度循环肿瘤细胞的方法,包括以下步骤:S1.制备超顺磁性四氧化三铁纳米粒子;S2.制备仿生磁性囊泡;S3.仿生磁性囊泡的功能化修饰;S4.肿瘤细胞表面生长叠氮基因;S5.循环肿瘤细胞的捕获。本发明将超顺磁性四氧化三铁纳米粒子与巨噬细胞孵育后,可通过小鼠巨噬细胞经过类似外泌体释放的途径,产生仿生磁性囊泡,随后进行功能化修饰;肿瘤细胞则预先通过自身细胞内新陈代谢在细胞膜表面生成功能化基团,与功能化后的磁性囊泡孵育,两个功能基团通过生物正交化学结合,实现对循环肿瘤细胞的捕获,该方式具有运用到液体活检方面的潜力。
本发明属于化学热处理领域,特别是涉及一种涡轮叶片化学去陈渗铝层的方法。该方法包括以下步骤:(1)吹砂,去除所述涡轮叶片表面的积碳和氧化膜;(2)除油;(3)绝缘;(4)去渗铝层,把高温合金钢零件放入去渗铝层溶液,反应时间为1.5小时~2小时,所述去渗铝层溶液由硝酸、氢氟酸和铬酐组成,所述硝酸含量为110ml/l~130ml/l,所述氢氟酸的含量为10ml/l~12ml/l,所述铬酐含量为8~10g/l;(5)中和,把叶片放入碳酸钠溶液中进行中和;(6)清洗,清洗叶片去渗铝层后表面产生的挂灰;(7)去绝缘层后检验。该方法工序简单,能够有效去除高温合金钢渗铝层,且不会对基体材料产生过腐蚀。
中冶有色为您提供最新的四川有色金属分析检测技术理论与应用信息,涵盖发明专利、权利要求、说明书、技术领域、背景技术、实用新型内容及具体实施方式等有色技术内容。打造最具专业性的有色金属技术理论与应用平台!