江苏有色金属理论与应用

基于模仿学习和强化学习算法的无人机飞行控制方法 704     

 0

本发明公开一种基于模仿学习和强化学习算法的无人机飞行控制方法：创建无人机飞行仿真环境模拟器；定义飞行的基本动作集合；根据飞行基本动作将轨迹数据进行分类；对于每个飞行动作，利用模仿学习学出从飞行基本动作到原始动作的映射网络参数；统计每个基本动作的最小连续行动数量；构建上层的强化学习网络，并将最小连续行动数量作为飞机动作不一致性的惩罚p加入；在模拟器中，获取当前的观测信息和奖励，使用pDQN算法，选取对应飞行基本动作；将飞机自身的状态信息输入到飞行基本行动对应的模仿学习神经网络中，输出模拟器的原始行动；将得到的原始行动输入到模拟器中获取下个时刻的观测和奖励；使用pDQN算法进行训练，直到上层的策略网络收敛。

原位化学修复土壤的方法 916     

 0

本发明属于被污染土壤的修复领域，具体涉及一种原位化学修复土壤的方法，包括以下步骤：(1)注射装置的布设；(2)药剂溶液的加注；(3)监测和调整；(4)重复以上步骤直至土壤修复完成；其特征在于，布设注射装置时，采用插板机布设注射装置；所述注射装置包括内芯和包覆在内芯外围的渗透层，所述内芯的外表面设有轴向的凹槽和/或凸筋，所述渗透层的渗透方向为由内向外。本发明可保证良好的注射效果，简化注射装置的结构，提高布设注射装置的施工速度，降低施工成本。

实验室EHS化学品智能化管理系统 653     

 0

本实用新型涉及实验室管理技术领域，涉及智能系统模块，与智能系统模块分别连接的监控模块、信息采集模块、门禁系统、实验室信息管理系统；所述智能系统模块包括触摸一体机、网络交换机和服务器；所述监控模块包括网络摄像头和硬盘录像机；所述门禁系统包括电子锁和控制电子锁的网络开关；所述实验室信息管理系统包括电子天平和温湿度探测头；形成齐全的化学品管理系统实验室化学品智能化管理系统。

不会倾倒的化学实验圆底瓶 779     

 0

不会倾倒的化学实验圆底瓶，在不会倾倒的化学实验圆底瓶在圆底瓶体的底部，沿着圆底瓶壁一周，顺序设置有三个以上底部呈水平的锥形支脚；锥形支脚与圆底瓶体材质相同，能够一次成型；圆底瓶体的瓶身表面，轴向设置有测量液体容量的刻度线；该不会倾倒的化学实验圆底瓶，制造简单，使用方便，能够自行站立，不会倾倒，不需要使用圆底瓶架放置，不占用实验桌空间，节省实验成本并且不影响实验的加热与烧煮。

典型化学污染物回、排风高效快速净化系统 1017     

 0

本实用新型公开了一种典型化学污染物回、排风高效快速净化系统，包括：净化装置、中央控制器、安装在室内的第一传感器和新风管道；所述净化装置包括回风竖井、位于所述回风竖井底部的进风段、位于所述回风竖井中部的过滤段、位于所述回风竖井上部的出风段；所述出风段安装有压差计和第二传感器；所述新风管道上安装有电动阀门；所述中央控制器分别与所述第一传感器、第二传感器、压差计和电动阀门连接。本实用新型典型化学污染物回、排风高效快速净化系统及控制方法，采用洁净厂房回风净化技术，消除洁净厂房集中空调回风系统典型挥发性有机溶剂交叉污染和蓄积污染。采用化学污染在线监测技术，实现基于洁净厂房化学污染物浓度的自动化新风调节功能。

基于强化学习的可靠车载边缘计算卸载方法 631     

 0

本发明公开了一种基于强化学习的可靠车载边缘计算卸载方法，用于由于城市障碍物导致的路侧单元(RSUs)覆盖范围有限，或者路侧单元计算能力不足等场景中，车辆可以借助无人机(UAV)进行可靠的计算卸载。本发明所述方法将最大化系统效用和最小化功率消耗的多目标优化问题，转化为功率分配问题和计算卸载问题两个子问题，由无人机和路侧单元共同完成任务的分配和计算。该方法通过为传输功率创建机会约束，使用Chebyshev不等式转化机会约束，推导出最小传输功率，确保任务传输的可靠性。本发明通过改进的深度强化学习模型提高计算卸载效率，利用多目标优化问题的结果，调整深度强化学习模型中预测的目标Q值，实现边缘服务器的离线训练，在线更新。

可提高结构稳定性的腐蚀电化学实验用简易复合电极 782     

 0

本实用新型是一种可提高结构稳定性的腐蚀电化学实验用简易复合电极，包括：参比电极槽由固定塞、溶液槽、参比电极、外盐桥构成，溶液槽和外盐桥中都注满了参比电极相对应的溶液，外盐桥固定在固定塞中，参比电极插入外盐桥中；盐桥一端插入参比电极槽中，另一端引出电极槽外，将参比电极的电位输出到电解槽中；辅助电极固定在盐桥的侧面，辅助电极的大表面的角度根据工作电极测试表面的角度位置可调节的。本复合电极将两个电极功效合一，可提高实验效率，结构稳定性强，功效多样，应用广泛，可开展多种类工作电极的腐蚀电化学测试。

智能型多元隔爆化学品储存装置 597     

 0

本发明提供了一种智能型多元隔爆化学品储存装置，包括有储存库，所述储存库是由工字钢焊接而成的框体，框体内外密封包有不锈钢板，所述储存库内还装有恒温装置、电气系统、水系统、泄压系统和可燃气体浓度测试系统，本发明具有结构简单、使用方便的功效，提供一种移动式可根据不同种类化学品制作相应保护系统和报警系统的智能型多元隔爆化学品储存装置。

3-甲基-喹啉-2-羧酸的免疫磁珠检测方法 592     

 0

一种3-甲基-喹啉-2-羧酸的免疫磁珠检测方法,属于免疫分析化学技术领域。本发明是利用磁珠作为固相载体,通过检测化学发光信号检测3-甲基-喹啉-2-羧酸,包括包被原、免疫源和抗体的制备,包被原的固定以及化学发光的检测;大大提高了检测的灵敏度,且操作更加简便,达到了高通量的目的,而且以铁磁微粒作为固相载体,具有清洗和分离方便,操作简单的优点,大大满足国内对其检测的需要。

基于深度强化学习的低时延高可靠性V2V资源分配方法 652     

 0

本发明提出的一种基于深度强化学习的低时延高可靠性资源分配方法，考虑了处于基站覆盖范围外的NR‑V2X侧链资源分配，其中车辆根据自己观测到的信息以及在训练阶段得到的Q网络调度5G网络中供V2V用户使用的URLLC切片资源。为了最大化V2V通信的能量效率，并且保证通信的可靠性以及时延要求，提出了一种使用集中式训练、分布式执行的深度强化学习架构，借助DDQN学习方法训练出满足上述要求的模型。将资源分配问题中目标和约束的建模都转化为深度强化学习中收益的设计，可以有效解决V2V用户信道分配和功率选择的联合优化问题，可以在一系列连续动作空间的优化中表现稳定。

电化学储能电站消防安全评估方法及系统 912     

 0

本发明公开了一种电化学储能电站消防安全评估方法及系统，涉及电化学储能电站技术领域，包括以下步骤：预先获取储能电站参数信息，并评估获取的参数信息分值，作为项目值一，评估当前储能电站电池储能系统分值，作为项目值二，评估当前储能电站消防系统分值，作为项目值三，基于获取的项目值一、项目值二和项目值三的总和与预设安全阈值进行比较，获取安全评估结果。本发明实现较为全面的电化学储能电站消防安全评测，不仅评估体系完善，而且综合评估参考价值高，可降低传统电化学储能电站存在的安全隐患。

基于强化学习的多目标复杂交通场景下自动驾驶解决方法 958     

 0

本发明公开一种基于强化学习的多目标复杂交通场景下自动驾驶解决方法，该方法可以使用一套强化学习自动驾驶建模方法处理所有交通场景，具有较好的通用性。强化学习综合建模基于传统强化学习框架，使用环境感知信息及结合人类知识提取的特征量作为观测空间。模型训练基于时变训练策略，提高训练速度和策略应用的泛化性。为对其形式安全性作进一步保障，还提出了基于长短时记忆(LSTM)网络的危险动作识别器与基于人类知识体的规则约束器，从环境中采样并训练危险动作识别器，使车辆具备识别危险动作与危险场景的能力，并针对特定情形设计规则约束对输出动作加以限制，可以大大提高安全性，减少碰撞次数，以保障车辆的行驶安全。

用于有机化学原料的农药中间体烘干装置 1022     

 0

本实用新型属于农药领域，具体的说是一种用于有机化学原料的农药中间体烘干装置，包括烘箱，所述烘箱的上方固定连接有固定螺丝，所述固定螺丝的下方平行设置有合页，所述合页的右侧固定连接有开合门，所述开合门的内部固定连接有玻璃检查板，所述玻璃检查板的右侧平行设置有拉手，所述拉手的下方平行设置有转轴，所述转轴的右侧活动连接有卡扣，所述卡扣的下方平行设置有机箱，所述机箱的内部活动连接有检修门；通过合页、玻璃检查板、开合门、托盘、固定机构、放置板、外壳和烘板之间的配合工作让设备的整体原材更换全面性更好，通过托盘与放置板之间的可拆卸结构可以让设备在更换烘干原材时可以更好的通过更换托盘进行原材的全面更换。

化学实验室酸碱废液分离装置 739     

 0

本实用新型公开了一种化学实验室酸碱废液分离装置，包括一排废主管，所述排废主管的底端部固定连接有一排废支管，所述排废支管的一侧壁固定连接有第一连管，所述第一连管远离排废支管的一端固定连接有盛放斗，所述盛放斗的内腔设置有漏网板，所述盛放斗的顶部卡接有可拆卸的料塞。本实用新型涉及化学实验器材技术领域，该化学实验室酸碱废液分离装置，通过利用化学反应和机械装置使废液分离自动化，在定期添加药品的条件下可多次使用。相比普通的废液收集装置，本发明无需在倾倒废液前测量pH，程序简单，可以大大降低因废液错误倾倒导致的风险。

基于多智能体强化学习的车联网频谱共享方法 598     

 0

本发明公开了一种基于多智能体强化学习的车联网频谱共享方法，包括建立车联网系统模型，基于马尔科夫决策过程建立强化学习中观测空间、行为空间、奖励设定的基础模型，然后将系统模型中的车辆链路视为智能体，利用强化学习SAC(Soft Actor‑critic)思想设计频谱共享方法。本发明的设计方案能够以合作的方式实现车联网中车辆与车辆(Vehicle‑to‑Vehicle,V2V)链路和车联与路旁基础设施(Vehicle‑to‑Roadside Infrastructure,V2I)链路的频谱共享，保证最大化V2I链路的信道容量和性能和V2V链路载荷的成功传输概率性能。

基于改进A*算法和深度强化学习的无人车路径规划方法 746     

 0

本发明属于无人车导航技术领域，具体涉及一种基于改进A*算法和深度强化学习的无人车路径规划方法，旨在充分发挥全局路径规划全局最优和局部规划实时避障的优势，以及改进A*算法的快速实时性和深度强化学习算法的复杂环境适应性，快速规划出无人车从起始点到目标点的无碰撞最优路径。本发明的规划方法包括：根据环境信息，建立初始化栅格代价地图；利用改进的A*算法规划全局路径；基于全局路径和激光雷达传感器性能，设计滑动窗口，将窗口探测的信息作为网络的状态输入；基于深度强化学习方法，采用Actor‑Critic架构，设计局部规划网络，本发明将知识和数据方法相结合，能够快速规划得到最优路径，使得无人车拥有更高的自主性。

基于嵌合体序列设计和分子信标的荧光检测金黄色葡萄球菌的方法 1026     

 0

一种基于嵌合体序列设计和分子信标的荧光检测金黄色葡萄球菌的方法，属于分析化学、食品安全和发酵分析及环境污染检测领域。本发明首先设计了一条以发夹结构存在并包含金黄色葡萄球菌适配体的嵌合体序列，有金黄色葡萄球菌存在时，嵌合体与之结合打开发夹结构；将Nb.bpu10I切刻内切酶和Bsm DNA聚合酶加入到反应体系中，Bsm DNA聚合酶通过强链置换反应合成完全互补的双链；利用荧光信号与金黄色葡萄球菌的数量间的线性关系可计算样品中的金黄色葡萄球菌含量。本发明放大了荧光信号，使该传感器检测范围扩大，提高检测灵敏度。该方法相比于检测金黄色葡萄球菌的传统方法，特异性强，灵敏度高。

化学镀镍废水处理设备 710     

 0

本实用新型公开了一种化学镀镍废水处理设备，属于废水处理设备技术领域，包括调节箱、进水管、沉淀罐和输送管，所述调节箱顶部表面镶嵌连接有进水管，所述调节箱一侧安装有沉淀罐，且沉淀罐顶部一侧通过输送管与调节箱输出端相连，所述进水管内腔两侧壁均安装有限位块，所述限位块顶部表面拆卸有过滤网板，所述调节箱顶部表面另一侧插接有PH测量计。本实用新型通过过滤网板，可对流入至调节箱中的废水进行过滤处理，并且PH测量计又能监测出废水中的酸碱度，通过进药管，可加入药剂，并且通过电机和搅拌桨相互配合，进而能够加速废水中的镍离子进行化学反应沉淀，通过控制机构，既能起到定时控制功能，又能起到提醒作用。

三维纸基电化学传感器件其制备方法与应用 865     

 0

本发明公开了一种三维纸基电化学传感器件的制备方法，包括以下步骤：步骤一：提供纤维纸、上层塑封膜以及下层塑封膜，上层塑封膜上具有与纤维纸形状一致的开孔；步骤二：将纤维纸夹设在上层塑封膜与下层塑封膜之间，使开孔与纤维纸保持中心对齐；对夹有纤维纸的塑封膜进行封装，使得纤维纸被塑封膜固定住；步骤三：将导电浆料印制在封装好的塑封膜上得到电极；步骤四：将印制好的电极烘干、消毒处理后，在电极的工作区域上修饰(Fe,Mn)₃(PO₄)₂/N‑CNRs纳米材料，得到三维纸基电化学传感器件。本发明还公开了由所述方法制备的三维纸基电化学传感器件及其应用。本发明的三维纸基电化学传感器件，可实现对三维培养细胞释放小分子的原位、实时、高灵敏度监测。

化学指示卡识别判读系统 757     

 0

本发明公开了一种化学指示卡识别判读系统，其特征在于包括：图像采集单元，通过探头获取化学指示卡的信息；按键单元，用于开关设备及激活和隐藏菜单、调节设备参数；信号处理单元，通过主板芯片对探头采集的信息进行处理，为信号（图形）输出到显示屏做准备；图像处理单元，根据指示卡上提供的信息，通过算法判定当前指示卡的结果；显示单元，用于显示输出化学指示卡的实时图像、显示按键的菜单操作、显示判定结果。存储单元，根据预设的频率自动存储当前指示卡的图像和判定结果。本发明实现了对化学指示卡结果的客观、准确、实时判断，体积小、重量轻、具有一体性、可视化交互界面、操作便捷，为医院监测灭菌工作提供了便捷的工具。

水质化学需氧量的标准加热消解器 905     

 0

本发明涉及一种水质化学需氧量的标准加热消解器,包括用于装水样的样品容量瓶、置于容量瓶下底部的加热装置及置于容量瓶上口部的冷凝管;其特征在于:所述的冷凝管的上端部设有封闭的箱体,该箱体的侧壁对向设有鼓风机和抽风机,所述的冷凝管(2)的上口部设有水套。去掉了自来水冷却系统,用风冷和水套冷却,故可作成独立的仪器,适用于野外、室外的COD测试。

基于深度强化学习的馈线-台区两阶段电压优化方法 926     

 0

本发明涉及电压控制技术领域，公开了一种深度强化学习的馈线‑台区两阶段电压优化方法，包括考虑电压越限风险的馈线电压优化：在10kv馈线系统以τ为时间尺度进行概率最优潮流计算，得到将馈线电压的安全运行风险降至最低的馈线设备调控策略以及馈线节点电压期望值；基于馈线节点电压期望值和400V台区量测信息，将400V台区电压优化过程建立为马尔科夫决策过程MDP模型，在τ时间间隔内，以t，t<τ为时间间隔，利用强化学习中的深度Q网络DQN对其进行求解，控制非全观测台区的DG资源实现台区内节点的电压优化。与现有技术相比，本发明通过调节馈线系统的可控设备，将馈线电压风险控制在较低水，将台区电压波动维持在安全范围内，以保持整个系统的安全运行。

用于化学反应罐/混合罐的无源无线声表面波传感器 1044     

 0

本实用新型公开了一种用于化学反应罐/混合罐的无源无线声表面波传感器，包括外壳、PCB板、声表面波传感器芯片和天线；所述PCB板与外壳的一端端部固定连接，PCB板的一端伸入外壳的内孔中；所述声表面波传感器芯片固定在PCB板伸入外壳的内孔中的一端上，天线与PCB板的另一端连接；所述天线通过设置在PCB板上的微带线与声表面波传感器芯电气连接；所述声表面波传感器芯片上设有至少一个叉指换能器和对应的反射栅。本实用新型能够安全、可靠地实现在线、实时监测化学反应罐/混合罐罐内的各项数据，本实用新型在使用时不会带入其他杂质，保证了罐体内化学品等的纯净，安全系数高，工作寿命长。

基于深度强化学习的信息聚合短波选频方法 995     

 0

本发明公开了一种基于深度强化学习的信息聚合短波选频方法。该方法为：将高动态的短波环境下的选频问题，转化为高动态短波通信环境下的信道增益、用户间的互扰和环境中的干扰三个子问题；对于高动态短波通信环境下的信道增益问题，把短波信道情况输入神经网络，对短波下一个时刻的信道增益进行预测，并将输出记为G；对于用户间的互扰和环境中的干扰问题，通过深度强化学习网络训练得到下一个时刻选择每一个信道的通信干扰情况，并将输出记为R；把训练的到的G与R输入到信息聚合深度强化学习网络，通过数据的不断训练，深度强化学习网络得到下一个时刻信道选择的最优解，指导下一个时刻选频。本发明提升了复杂环境下的短波通信能力。

腐蚀电化学实验用简易复合电极 920     

 0

本发明是一腐蚀电化学实验用的简易复合电极，包括：参比电极槽由固定塞、溶液槽、参比电极、外盐桥构成，溶液槽和外盐桥中都注满了参比电极相对应的溶液，外盐桥固定在固定塞中，参比电极插入外盐桥中；盐桥一端插入参比电极槽中，另一端引出电极槽外，将参比电极的电位输出到电解槽中；辅助电极固定在盐桥的侧面，辅助电极的大表面的角度根据工作电极测试表面的角度位置可调节的。本复合电极将两个电极功效合一，可提高实验效率，结构稳定性强，功效多样，应用广泛，可开展多种类工作电极的腐蚀电化学测试。

基于强化学习的无人驾驶汽车多车道行驶的决策方法 978     

 0

本发明公开了一种基于强化学习的无人驾驶汽车多车道行驶的决策方法，首先建立强化学习训练模型，利用强化学习算法收益函数对神经网络参数进行更新、修正从而建立基于强化学习‑BP神经网络算法的决策系统。无人驾驶汽车在多车道行驶过程中，传感器采集周围车辆信息，上述决策系统给出执行动作并预测车辆行驶状态，由收益函数判断车辆行驶危险度，决策多车道工况下车辆当前时刻的最优驾驶行为。本发明能提升无人驾驶汽车多车道高速行驶的效率与安全性，实现在高不确定性、动态环境下的无人驾驶汽车高效、安全的驾驶决策。

血小板衍生生长因子的检测方法 950     

 0

本案涉及血小板衍生生长因子的检测方法，采用电化学的方法，在金电极表面修饰序列一，然后适配体一通过与序列一的互补配对也结合至电极表面；然后浸入包含待测样和适配体二的溶液中，样本中的血小板衍生生长因子(PDGF?BB)会与适配体一及适配体二结合，进而将适配体一从电极表面取代下来，此时电极表面的序列一暴露出的黏性末端将触发杂交链式反应，其产物进一步吸附电活性物质六铵合钌，产生明显的电化学响应；通过电化学工作站读出差分脉冲伏安信息，经分析，其与PDGF?BB浓度在一定的浓度范围内存在线性关系，检测限为0.3pg/mL，满足实际应用所需要的PDGF?BB浓度水平。

有动力化学除油沉淀器 759     

 0

本实用新型属于污水处理应用技术领域，具体公开了有动力化学除油沉淀器，由密封沉淀过滤组件，及与密封沉淀过滤组件相配合使用的进水搅拌组件组成。本实用新型的有动力化学除油沉淀器的有益效果在于：1、解决现有过滤设备污水处理效率低、品质差的问题，对含油污水进行沉淀预处理作业，实现含油污水快速、高质的过滤处理；2、其设计合理，便于清洁、检修维护操作，使用寿命长，节约了污水处理成本，实用性强。

化学气相沉积炉漏气快速处理辅助装置 575     

 0

本实用新型涉及化学气相沉积技术领域，提供一种化学气相沉积炉漏气快速处理辅助装置，包括炉体、第一保护壳和第二保护壳，炉体的外部设置有第一保护壳，第一保护壳的外部设置有拆装结构，第一保护壳的顶端设置有出气管，第一保护壳的底端设置有第二保护壳，第二保护壳的底端设置有抽气管，第二保护壳底端的中间位置处设置有注气管，第一保护壳与第二保护壳的内部设置有防护结构。本实用新型通过设置有拆装结构，将锁紧螺栓从通孔内部拆下，然后分离对接槽与对接块之间的卡合，便可完成对于第一保护壳和第二保护壳的拆卸，对第一保护壳和第二保护壳的便捷拆下，方便了工作人员对于炉体的检修。

用于化学品生产过程中的存放装置 1022     

 0

本实用新型公开了一种用于化学品生产过程中的存放装置，包括第一存放罐、排压管、气体收集装置、显示屏、密封盖、第二存放罐、稳定架、挂接块、底座、螺旋密封环、排气口、内罐、排气孔、伸缩杆、橡胶推盘、泄气口和测距底盘。本实用新型的有益效果是：由于很多化学品在存放时容易易分解、潮解等，从而释放出气体，通过将两个存放罐连接在一起，并通过排压管由气体收集装置将两个存放罐连通，既能够将存放罐内部化学品分解而释放的气体收集，又能够有效防止存放罐长期密封使用罐体内部释放的气体过多导致罐体压强过大带来的安全隐患。通过在气体收集装置内部设置可伸缩的橡胶推盘，从而保证收集的气体的纯净度，便于直接回收使用。