江苏有色金属理论与应用

基于分层强化学习的自动驾驶决策方法和装置 823     

 0

本发明提供了基于分层强化学习的自动驾驶决策方法和装置，包括：获取上游数据，上游数据包括感知融合数据、定位数据和控制数据；将上游数据输入到深度学习的模型中，输出得到感受野模型和第一预测轨迹；将感受野模型和第一预测轨迹输入到强化学习算法中，输出得到第一规划轨迹；根据第一规划轨迹控制车辆执行相应操作；将深度学习的模型和强化学习算法结合，确保了决策的稳定性和前瞻性，降低了预测的计算消耗。

智能化学品存储柜 918     

 0

本实用新型涉及化学品存储设备技术领域，特别涉及一种智能化学品存储柜，包括柜体，且通过设有指纹锁，进而当打开柜门时，便于对开启本实用新型人员的指纹信息进行采集，且通过设有多个横板和竖板，使得横板和竖板之间形成空腔，便于存放不同种类的化学品，且均匀设有压力传感器，进而便于对使用者拿取的化学品前后重量进行测量，便于对使用者的个人信息以及化学品的种类和拿取数量进行统计，且设有接触开关，当忘记关门时，通过蜂鸣器进行主动提醒，提高本实用新型使用时的安全性，且设有引风机和通风口，便于对柜体的内部进行排气，避免由于化学品挥发，导致浓度过高，产生风险。

对电化学装置内部微观结构进行标记的方法和装置 1056     

 0

本发明公开了一种对电化学装置内部微观结构进行标记的方法，该方法用于模拟计算电化学装置的电化学性能，先获取电化学装置的至少部分区域的正极颗粒，负极颗粒，隔膜，正极导电剂,负极导电剂和电解质的几何分布状态信息，再基于获取的几何分布状态信息，生成二维或三维图形，然后基于生成的图形，利用网格生成软件生成背景网格，再通过网格节点标记负极颗粒，正极颗粒，隔膜，正极导电剂，负极导电剂和电解质的边界或者其覆盖区域，最后获取至少部分标记节点的坐标信息；还包括实现上述方法的装置。通过上述步骤对电池内部进行标记，获取网格节点坐标信息，代入电化学模型后，比其他标记方式能得到较为精确的预测电池性能，且计算效率更为高效。

基于深度强化学习的换挡策略动态优化方法 836     

 0

本发明属于工程机械及车辆工程领域，具体涉及一种基于深度强化学习的换挡策略动态优化方法。包括如下步骤：(1)：确定换挡策略状态输入变量和动作输出变量；(2)：根据状态输入变量和动作输出变量，确定换挡策略马尔科夫决策过程；(3)：根据换挡策略目标建立强化学习换挡策略奖励函数；(4)：根据马尔科夫决策过程和奖励函数，求解深度强化学习换挡策略；(5)：将步骤(4)计算出的预测Q网络放入换挡策略控制器，工程机械及车辆在行驶过程中，工程机械及车辆根据换挡策略控制器选择挡位；(6)：在行驶过程中定期更新预测Q网络。本发明通过深度强化学习方法对换挡策略进行更新，实现换挡策略的动态优化。

基于delta算子的二级化学反应器故障估计方法 1005     

 0

本发明公开一种基于delta算子的二级化学反应器故障估计方法，包括：构造二级化学反应器数学模型；依据Z变换方法和delta算子方法，分别给出二级化学反应器Z变换模型、delta算子模型；考虑时滞、干扰、非线性和故障情况，给出系统delta算子状态方程的一般表达式；设计比例—积分观测器，给出误差动态方程以及达到故障估计目标需要满足的性能指标；给出系统渐进稳定的充分条件；消除系统渐进稳定的充分条件中的非线性项，将充分条件转化为线性矩阵不等式，得出观测器中的参数，实现故障估计。本发明中设计的故障估计方法，对未知输入具有鲁棒性，对故障也具有较高的敏感性，能够实现对二级化学反应器系统的故障估计。

降低红细胞比容干扰的血液检测方法及生物传感器 1049     

 0

一种降低红细胞比容干扰的血液检测方法及生物传感器，用于测定待测血样中目标分析物的浓度，检测方法包括以下步骤：步骤一.将待测血样与酶电极接触，待测血样中的目标分析物与生物识别酶发生化学反应；其中，目标分析物为血糖、尿酸或者血酮；步骤二.对酶电极施加电压，得到目标分析物的响应电流，并开始计时，再依次选取五个时间点，获取对应的电流值；步骤三.将步骤二获取的五个电流值I_t1、I_t2、I_t3、I_t4、I_t5带入计算公式计算目标分析物的浓度，解决现有技术没有同时适用于降低红细胞比容对血糖、尿酸和血酮浓度结果干扰的方法，现有方法较为复杂耗时、成本高、会引入新的干扰因素导致测量结果不准的技术问题。

运动学约束条件下基于深度强化学习的UAV路径规划方法 867     

 0

本发明公开一种运动学约束条件下基于深度强化学习的UAV路径规划方法，具体步骤如下：S1：深度强化学习神经网络根据多个任务点以及静态障碍物的向量坐标得出最短路径；S2：无人机起飞后沿着最短路径飞行执行任务；S3：当探测到存在动态障碍物，无人机向基地发送信号，由超级计算机预测无人机接收信号时所在的位置；S4：根据动态障碍物以及剩余任务点的坐标使用深度强化学习神经网络输出得到新的飞行路径，并通过无线电将新的路径发送给无人机；S5：无人机沿着新的路径执行任务，执行完所有任务后最终返回基地。本发明提出了一种基于online和offline的框架，不仅解决了Q‑Learning中状态和动作都是高维的问题，而且在解决TSP问题的同时考虑运动学模型并避开动态障碍物。

岩土温度-渗透-应力-化学耦合多功能试验系统及其操作方法 884     

 0

本发明公开了一种岩土温度‑渗透‑应力‑化学耦合多功能试验系统及其操作方法，它包括竖向加载装置(1)、化学溶液隔离装置、压力控制装置、压力室(4)、体积变化测定装置(5)、温度控制装置(6)和计算机(7)，通过计算机(7)对竖向加载装置(1)、化学溶液隔离装置、压力控制装置、压力室(4)、体积变化测定装置(5)和温度控制装置(6)的控制，完成多种土工试验操作。本发明结构设计合理，操作简单，应用范围广，自动化程度高，可实现多种土工试验的全过程自动化控制，稳定性能高，使用寿命长。

磺胺甲恶唑分子印迹电化学传感器的制备方法 745     

 0

一种磺胺甲恶唑分子印迹电化学传感器的制备方法，以处理过的玻碳电极作为基底，在邻苯二胺和磺胺甲恶唑的硫酸钠溶液中电聚合形成分子印迹聚合物制得，并用乙醇溶液去除模板，得到对磺胺甲恶唑选择性响应的分子印迹电化学传感器。对磺胺甲恶唑的检出限为9×10^‑8 mol/L，线性范围为2×10^‑7mol/L‑1.5×10^‑6 mol/L。本发明制备出的分子印迹电化学传感器具有良好的稳定性和选择性。

基于深度强化学习的智能移动平台无地图自主导航方法 1006     

 0

本发明公开了一种基于深度强化学习的智能移动平台无地图自主导航方法，在AI2‑THOR仿真框架中选取导航场景；构建基于Actor‑Critic框架的深度强化学习模型；根据动作概率分布进行移动平台与导航场景的动作交互，更新奖励值和当前观测信息，若当前观测信息与目标图像信息匹配，或达到最大移动步数，或连续采取动作数达到设定步数，则更新模型参数，否则继续动作交互；构建Actor‑Critic网络的损失函数，采用异步优势算法A3C训练更新深度强化学习模型；重复训练，直至训练步数达到设定阈值；获取实际导航场景的初始观测信息与目标图像，利用训练好的模型进行导航，规划智能移动平台的导航路径。本发明无需提前构建环境模型，即可实现显示环境的导航。

腐蚀性化学剂温度报警系统 1004     

 0

本实用新型公开了一种腐蚀性化学剂温度报警系统，包括测量端、参考端、差分比例运算电路、跟随放大电路、减法运算电路、同相放大电路、单片机报警模块；所述测量端与差分比例运算电路相连，所述参考端与跟随放大电路相连；所述差分比例运算及跟随放大电路输出端与减法运算电路输入端相连；所述减法运算电路通过同相放大电路与单片机报警模块相连。本实用新型提供一种腐蚀性化学剂温度报警系统，实现自动报警，不仅可以直接测量腐蚀性化学剂在生产或实验中温度，而且可以有效减轻自然对流给测量带来的影响，系统整体有着搭建简单、安全性高、测温距离远、制作成本小的优势。

化学品提纯装置的安全监控系统及控制方法 1010     

 0

本发明涉及化学品提纯装置技术领域，尤其涉及一种化学品提纯装置的安全监控系统及控制方法，其包括用于对化学品进行提纯的第一吸附塔，安全保护装置包括安全罐；第一出水管与第一吸附塔的第一进液管相连接；控制器的输入端连接有第一温度传感器和第二压力传感器，第一温度传感器安装在第一吸附塔上；第二压力传感器安装在第一吸附塔上。通过第一温度传感器与第二压力传感器实时监测第一吸附塔内的温度和压力，当第一吸附塔内的温度或压力较高时，启动第一输送阀门，将安全罐内的纯水注入第一吸附塔内，对第一吸附塔进行冲洗，并将化学品排出第一吸附塔，从而能够实时监测安全隐患，能够避免第一吸附塔内的温度或压力较高而导致爆炸。

多组份化学液料自动配料装置 1119     

 0

本实用新型属于化学原料制备应用技术领域，具体公开了一种多组份化学液料自动配料装置，由搅拌混合组件、输料组件和控制组件组成。本实用新型的一种多组份化学液料自动配料装置的有益效果在于：1、其设计结构合理，能依据生产需要通过多个输料电磁阀进行快速、精准、自动的加料配料作业，同时能实时对各个贮料仓的料液进行监测，控制驱动电机的工作状态并实现及时的预警和远程的管理如与上位机实现数据的实时输送等，提高了生产和管控效率；2、解决了传统手工配料所存在的安全隐患，且无需打开各个贮料仓进行料液监测，二者都保证了作业人员的身体健康。

基于实验类比法的高倍率工况电化学模型建模方法 1114     

 0

本发明公开了一种基于实验类比法的高倍率工况电化学模型构建方法，包括高倍率工况建模关键参数的确定，高倍率电化学关键参数的求解，搭建可变参数高倍率的模型等。有益效果：本发明不仅秉承了传统电化学模型在低倍率下精度较好的特点，并克服了传统电化学模型在高倍率工况下模型精度变差的缺陷，从电化学机理角度解决了以往电化学模型在低温高倍率下精度不高的问题。提出的基于实验类比法建立关键参数与温度和浓度的关系，解决了常规电化学模型参数常通过半电池测试获取，存在电池拆解困难及模型参数难以快速获取的问题。

化学混合槽温度控制装置 835     

 0

本实用新型公布了一种化学混合槽温度控制装置，其特征在于包括加热器、温度侦测器和控制器，其中加热器设置于化学混合槽进液口，温度侦测器设置于化学混合槽出液口，温度侦测器的输出端接控制器的输入端，控制器的输出端接加热器的输入端。本实用新型可以精准藉由温度侦测器的反馈，并配合药剂的吸放热，來精准的控制设定的溫度，來达到生产品质上的要求。

基于深度强化学习的网络负载均衡系统及均衡方法 1012     

 0

本发明公开了一种基于深度强化学习的网络负载均衡系统及均衡方法，均衡系统包括控制平面和数据平面，控制平面包括INT模块、网络模块，INT模块通过发送探测包获取网络模块中各个节点上的网络信息，并发送给控制平面；控制平面包括DQN模块、网络状态信息模块、最短路径路由算法模块节点源路由路径更新模块，网络状态信息模块接收控制平面发送的网络信息，并发送给DQN模块；DQN模块输出动作调用dijkstra算法模块进行最优路径的计算，并将节点流表的更新结果传递给网络中相应的节点设备。该方案基于P4的INT技术和人工智能中的深度强化学习Deep Q Network模型实现SDN网络的智能负载均衡，从而实现网络资源的合理利用，有效提高网络效率，减少网络中的拥塞。

基于强化学习算法SAC的目标跟踪方法、装置及存储介质 933     

 0

本发明公开了一种基于强化学习算法SAC的目标跟踪方法、装置及存储介质，方法包括：获取视频数据；在视频数据的当前帧中确定搜索区域位置和大小；判断当前帧是否为第一帧；响应于当前帧非第一帧，将当前帧输入预训练好的actor网络模型进行特征提取，得到输出的预测框，根据所述预测框对目标进行跟踪；其中所述actor网络模型的训练方法，包括：通过第一帧对actor、target_actor网络进行初始化，根据经验池中存储的数据，通过actor、critic网络计算动作，计算actor、critic1、critic2网络损失，利用强化学习SAC算法更新网络权值。将目标跟踪问题转化为强化学习算法中在线决策的问题，并且本发明只需要少量数据集，充分利用现有技术，提升训练速度。

基于深度强化学习的车辆自动循迹驾驶方法 696     

 0

本发明公开了一种基于深度强化学习的车辆自动循迹驾驶方法，包括如下步骤：步骤1、构建双重深度Q网络进行图像特征提取；步骤2、采用经验回放方案进行环境交互训练样本采集和双重网络训练；步骤3、采用RMSprop算法优化网络的训练过程；步骤4、采用训练完毕的双重深度网络进行预测，进而实现自动循迹驾驶。本发明采取深度强化学习方法，直接实现从图像采集到车辆控制的端到端网络建立，避免了传统方法中复杂的PID控制环节，并且采用双重深度网络进行动作预测，可以有效减少单一深度强化学习网络中最大化偏差带来的性能损失。

强化学习下的无人机集群雷达通信一体化资源分配方法 764     

 0

本发明公开了一种强化学习下的无人机集群雷达通信一体化资源分配方法。涉及的资源主要包括波束、频谱、功率等资源。所述内容包括以下步骤：对无人机集群雷达通信系统进行搭建，分为无人机集群和探测目标群体；构建总性能表征指标，总性能表征指标分别由通信和雷达表征指标按比重合成，通信表征指标是通信率，雷达表征指标是互信息；构建强化学习和深度强化学习；构建相应强化学习和深度强化学习算法；对单个资源进行有效分配，对双资源进行有效分配，对多资源进行有效的分配。本发明提供的方法，能更有效的对无人机集群雷达通信一体化系统进行合理的资源分配，提高资源利用率。

面向蜂窝网络的改进式强化学习网络覆盖优化方法 980     

 0

本发明公开了面向蜂窝网络的改进式强化学习网络覆盖优化方法，包括：(1)从异构无线网络环境中采集终端路测数据和基站侧静态数据，处理得到平衡数据集；(2)从平衡数据集中选取一部分数据作为训练集输入到随机森林模型中，对随机森林模型进行训练得到网络覆盖预测模型；(3)设置覆盖优化的目标函数；(4)设置强化学习与网络覆盖优化问题的空间映射，训练强化学习智能体，得到工程参数的调整策略以及覆盖优化结果。本发明方法自动改进优化行为，从而拥有更快的收敛速度，同时能够积累大量运维优化经验并自主形成优化策略，避免了优化过程对网络性能产生较大影响。

新能源汽车电极材料中磷化学镍镀层六价铬钝化工艺 876     

 0

本发明公开了一种新能源汽车电极材料中磷化学镍镀层六价铬钝化工艺，涉及电镀零件钝化技术领域，具体工艺流程为：(1)对零件进行超声波碳氢除油；(2)将零件吹干；(3)洗硫酸溶液预清洗零件；(4)水洗零件；(5)钝化配方组分A对零件进行钝化处理；(6)水洗零件；(7)热风烘干零件；(8)钝化配方组分B对零件进行钝化处理；(9)水洗零件；(10)将零件进行95℃热水封闭；(11)烘干零件；(12)待贴极耳胶加工处理；(13)检验包装。该新能源汽车电极材料中磷化学镍镀层六价铬钝化工艺，采用新研发的两种钝化处理溶液，结合钝化工艺，可达到目前行业极耳高端材料‑‑中磷化学镍钝化技术的行业领先水平。

带太阳能光伏发电向化学传感器供电的肥水调控装置 949     

 0

本实用新型涉及一种带太阳能光伏发电向化学传感器供电的肥水调控装置，属于新能源物联网技术领域。阳光照射安装在光伏化学传感器插杆的顶端上的太阳能电池产生电流，电流通过导电线、控制器向化学传感器供电，化学传感器的下部浸泡在稻田水层中，感测水稻田施用氮素化肥和磷素化肥后的浓度变化，并将化学量的变化转换为电信号，安装在化学传感器上的发射天线将电信号发送到空中，接收天线接收到电信号后，将电信号输入计算机处理器进行处理，根据稻田水层里实际溶解的氮素化肥和磷素化肥的浓度结合水稻植株的生长发育情况，在显示器上显示出精准的氮素化肥和磷素化肥的施肥量，并打印出施用化肥的意见，交给稻田管理人员去实施。

基于强化学习的频繁写缓存数据压缩方法 1083     

 0

本发明公开了一种基于强化学习的频繁写缓存数据压缩方法，以此更好的解决非易失性缓存中数据压缩存储的问题。包括如下步骤：S1：对于每一次缓存写请求访问操作，将写强度和复用局部性信息记录在数据收集模块；S2：构建强化学习模式选择算法，选择适合压缩的模式，将选择的模式信息记录在预测表中；S3：根据预测表中缓存数据的压缩标志位，如果待写数据适合压缩，则将其压缩后存储在缓存中，下次读取该数据时，根据该信息还原被压缩数据；S4：基于霍夫曼编码的数据压缩算法压缩待存储的数据；S5：返回至步骤S1，继续下一次访问缓存操作，直至该任务执行完毕。本发明所提出的强化学习方法获取频繁写数据，以低功耗的形式压缩存储在非易失性缓存中，提升压缩效率和系统性能。

针对二级化学反应器变时滞系统的故障估计方法 948     

 0

本发明公开一种针对二级化学反应器变时滞系统的故障估计方法，包括：构造二级化学反应器数学模型；考虑变时滞、干扰、非线性和故障情况，给出系统delta算子状态方程的一般表达式；设计比例—积分观测器，给出误差动态方程以及达到故障估计目标需要满足的性能指标；给出系统全局一致指数稳定的充分条件；消除系统指数稳定的充分条件中的非线性项，将充分条件转化为线性矩阵不等式，得出观测器中的参数，实现故障估计。本发明中设计的故障估计方法，对未知输入具有鲁棒性，对故障也具有较高的敏感性，能够实现对二级化学反应器系统的故障估计。

化学品自动排气泡系统及方法 736     

 0

本发明揭示了一种化学品自动排气泡系统及方法，其中，所述方法包括如下步骤：S1、判断第一液体侦测器是否被激发，若是，进入步骤S2，若否，不作操作；S2、开启加压阀，并在等待第一时间间隔后开启排液阀；S3、等待第二液体侦测器的激发，在第二液体侦测器被激发后，关闭所述排液阀及加压阀。本发明通过控制器自动开启排液阀以实现排气泡动作，并通过第二液体侦测器侦测排气完成状态，及时关闭排液阀以避免化学液剂的浪费，化学品的纯度较高，且整个过程实现自动控制，避免人为因素所导致的事故。

基于石墨烯-贵金属复合材料的电化学DNA传感器及其制备方法 1014     

 0

本发明涉及一种基于石墨烯-纳米贵金属复合材料的电化学DNA生物传感器及其制备方法，该方法包括：（1）用Hummer法从石墨粉制备氧化石墨烯水分散液。（2）化学还原法制备纳米贵金属粒子/石墨烯复合材料。(3)将贵金属/石墨烯复合材料黏附到玻碳电极上，用单链DNA修饰，修饰电极和目的基因杂交，制备得到电化学DNA传感器。该传感器能大幅提高DNA的检出限至1.2*10-10mol/L。

用于实验室移液管架的耐化学侵蚀聚乙烯塑料 1046     

 0

本发明提供一种用于实验室移液管架的耐化学侵蚀聚乙烯塑料，其特征在于，包括如下重量份数的组分：聚乙烯：35~50份；含硅聚碳酸酯树脂：6~15份；玻璃纤维：3~10份；纳米氧化锌：3~10份；二氧化锆：1~5份；增韧剂：1~5份；抗氧化剂：0.5~3份。所述用于实验室移液管架的耐化学侵蚀聚乙烯塑料，结构简单、占用空间极小，使用时操作方便、测量准确度高、测试效率高、通用性强，能够满足产品质量安全要求。本发明所述的一种用于实验室移液管架的耐化学侵蚀聚乙烯塑料，耐酸碱及有机溶剂，同时增加了安全性，延长了使用寿命。

获取石墨电化学活性面积的方法 913     

 0

本发明属于电池材料研发测试技术领域，具体涉及一种获取石墨极片电化学活性面积的方法。本发明提供的获取石墨极片电化学活性面积的方法，通过扫描电子显微镜获得石墨极片中石墨颗粒的特征边长，并根据石墨极片的SOC状态选择合适的公式，将特征边长参数带入，即可获得不同SOC状态下的石墨颗粒电化学活性比表面积；根据石墨极片的质量获取石墨极片的电化学活性面积。本发明使用石墨极片质量和石墨晶体结构及石墨颗粒的特征尺寸计算石墨极片参与脱嵌锂电化学反应的电化学活性面积。该电化学活性面积相比直接使用极片面积或使用BET法计算的面积更接近实际的参与脱嵌锂反应的面积。该方法可表征出不同SOC状态下的石墨极片的有效面积。

污水处理厂臭气处理系统的干式化学吸附装置 1071     

 0

本实用新型属于污水处理厂配件应用技术领域，具体公开了污水处理厂臭气处理系统的干式化学吸附装置，由底板、塔体、出气口、出气口连接法兰、三个第一检修人孔、第二检修人孔、第一装料口、第二装料口、第一卸料口、第二卸料口、第一进气口、第二进气口、第一吸附组件和第二吸附组件等组成。本实用新型的污水处理厂臭气处理系统的干式化学吸附装置的有益效果在于：其设计结构合理，用以解决现有污水处理厂污水处理过程中所存在的发酵臭气，同时双层吸附部件(第一吸附组件、第二吸附组件)处理效率高、过滤效率优、占地面积小，且单位面积内产生气量大，处理过程安全、稳定、可靠，既降低了成本，又提高了工作效率(可间歇性运行)，实用性强。

化学品船液罐的平衡吊装工艺 991     

 0

本发明涉及一种化学品船液罐的平衡吊装工艺，具体步骤包括：S1、将液罐鞍座固定在运输船甲板的预定安装位置；S2、将拉索钢丝绳系在液罐的吊耳上，起吊液罐至液罐鞍座的正上方；S3、将环氧胶水涂覆在液罐鞍座的内表面；S4、定位止浮导向装置；S5、吊装液罐使液罐逐步下落；S6、环氧胶水随着液罐的逐步下落而从液罐鞍座内壁沿定位槽溢出，排卸清理结构将定位槽内的环氧胶水排出收集，质检员检查环氧胶水涂抹质量是否填满液罐鞍座与液罐之间的间隙，若有间隙，在间隙处及时手动补上环氧胶水；S7、吊装结束后，松去吊装绳索。本发明具有如下优点：保证化学品船液罐的结构强度，保证吊装的平衡度以及水平度。