辽宁有色金属分析检测技术理论与应用

基于图像特征深度强化学习的AUV管道循管方法 974     

 0

本发明公开一种基于图像特征深度强化学习的AUV管道循管方法。首先，将AUV循管控制问题建模为连续状态、连续动作的Markov决策过程；其次，控制策略抽象为AUV观测状态（摄像头获取的图像）到运动动作的映射，并利用深度神经网络表达；最后，利用近端策略优化（PPO）方法自主采集数据并训练深度神经网络，最终获得具有一定泛化能力的端到端的循管控制策略。仿真结果表明，本发明能够有效控制AUV的循管动作，而且对于新的和未知的管道几何结构具有较强的泛化能力。该方法是一种端到端(end‑to‑end)的视觉循管运动控制方法，无需知晓AUV的运动学/动力学模型，也无需人工特征提取。

化学镀Ni-P-PTFE-SiC复合镀层的制备工艺 918     

 0

本发明提供一种化学镀Ni‑P‑PTFE‑SiC复合镀层的制备工艺，包括如下步骤：(1)碳钢试样前处理包括喷砂、清洗、除油、除锈、清洗和盐酸活化；(2)PTFE乳液预处理；(3)SiC微粒除油处理；(4)SiC微粒活化处理；(5)SiC微粒分散处理；(6)配置800ml镀液C，将PTFE分散液和SiC分散液加入镀液C中，(7)把试片放入混合镀液C中施镀2h后取出，(8)将镀后试片热水中超声清洗后取出风干，(9)测试试片的厚度、结合力、硬度、摩擦系数和磨损率。该镀层相比Ni‑P镀层、Ni‑P‑PTFE镀层和Ni‑P‑SiC镀层具有更优异的耐磨性能。镀层致密无孔，具有自润滑和耐磨作用，可以有效实现碳钢表面耐磨的目的。

室内化学污染物生态系统处理装置 1168     

 0

一种室内化学污染物生态系统处理装置，属于环境空气生态净化技术领域。该处理装置整体外观呈圆柱状，内部为分层结构。内部组成结构由下至上依次为营养液水箱、周向均布进风口、生物处理载体层、螺旋排列雾化喷嘴、活性炭吸附层、土壤植被层。并设置连接于营养液水箱至土壤植被层的营养液总管，营养液总管在雾化喷淋层分出雾化支管用于连接雾化喷嘴。该装置处理效果大大提升，利用生物处理技术，不会造成二次污染。分层结构是装置更加紧凑合理、操作简便灵活、营养液可循环利用，装置易于拆卸清洗。装置顶部土壤-绿植层除净化空气外，具有极高的观赏价值。该装置性能已通过初步测试，证明效果符合预期设想。

朝鲜越桔枝条角质层蜡质组分及其检测方法 982     

 0

本发明属于植物化学成分分析应用技术领域，具体涉及朝鲜越桔枝条角质层蜡质组分及其检测方法。朝鲜越桔枝条角质层蜡质组分为：烃类:醇类:酰胺类:醛类:酚类:萜类:醚类:酯类:胺类:苯类:其他=31%:23%:6%:2%:2%:9%:1%:2%:2%:6%:16%；其检测方法为将处理过的朝鲜越桔枝条茎段利用GC–MS进行蜡质成分检测，检测后得到蜡质组分的全部组分的离子峰，并对其离子峰进行面积积分，同时依据质谱库对朝鲜越桔蜡质成分进行全解谱检索判定；采用Excel办公软件对数据进行整理与分析，并用SigmaPlot作图；利用DPS软件中的Duncan’s新复极差法进行多重比较分析。本发明检测方法应用在越桔属植物的蜡质组分检测方法中，为朝鲜越桔蜡质的进一步研究提供理论基础。

用于镁及镁合金工件化学镀镍的反应装置 809     

 0

本实用新型涉及一种用于镁及镁合金工件化学镀镍的反应装置，包括温度控制仪、超声波发生器、测温探头、电加热体、循环冷却水套、电动搅拌器、自动恒温控制面板、压电陶瓷换能器、圆筒状容器，温度控制仪与伸入到容器内的测温探头相连接，超声波发生器与压电陶瓷换能器相连接，压电陶瓷换能器设置在容器底部，容器外部设有循环冷却水套，电加热体固定在容器内部，电动搅拌器的搅拌部固定有工件；所述的循环冷却水套连接有带电磁阀的冷却水管。优点是：设备简单，采用电加热体、循环冷却水套控制容器内镀液温度，在由超声波发生器创造的超声波环境下，通过电动搅拌器带动工件旋转达到超声活化与制备均匀镀层的目的。

元素地球化学数据筛选的寻矿标定方法及系统 1194     

 0

本发明公开了一种元素地球化学数据筛选的寻矿标定方法及系统，涉及矿产技术领域，其技术方案要点是：将目标区域划分成多个不同地形类型的地形区域；抽样采集地形区域中的目标对象元素测量数据；对目标对象元素测量数据拟合后得到与地形区域一一对应的拟合元素分布信息；将当前地形区域的拟合元素分布信息向相邻地形区域的预设范围区域外推插值处理后得到外推元素分布信息；依据两个目标对象元素分布信息于相邻地形区域中对应轮廓线轨迹处的分布情况进行平滑处理后构建目标区域的元素等值图；将元素等值图标定划分为确定矿区、待确定区域、确定非矿区。本发明能够得到误差较小、精确度高的标定信息，为矿产分布进一步研究提供的数据支撑。

可穿戴智能高选择性气液双功能醇类电化学传感器的制备方法 1131     

 0

本发明涉及一种可穿戴智能高选择性气液双功能醇类电化学传感器的制备方法，包括如下步骤：制备高分散性的二维碳材料；以过量的还原剂在室温下制备负载铂基纳米粒子的碳基醇类电活性催化剂；将一定质量催化剂与去离子水和全氟磺酸混合，制备成醇类电活性催化剂浆料；制作传感器阵列，修饰醇类电活性催化剂浆料于丝网印刷的三电极体系中的工作电极表面；修饰全氟磺酸作为固体电解质；将三电极传感阵列与电路相连后制得该传感器。本发明的传感器表现出极强的基底适用性和环境适用性，在一定拉伸和弯曲状态下仍表现出可观的传感稳定性。可与电路相连，通过蓝牙装置，在移动手机上实时测量并读取待测物浓度。

消除介质电阻的在线式电化学腐蚀监控仪 915     

 0

一种消除介质电阻的在线式电化学腐蚀监控仪,包括探针基座、探针杆,所述的探针基座的前端面上用玻璃陶瓷焊固有三个螺丝柱,每个螺丝柱上螺纹连接有电极柱,且螺丝柱与电极柱之间设置有O型胶圈,所述探针杆的前端与探针基座的后端焊固连接,探针杆的后端与一航空插座固定连接。探针杆为空腔,探针杆为空腔内穿设有三根导线,三根导线的一端分别于三个螺丝柱连接,三根导线的另一端与航空插座连接。本实用新型与现有技术的最大不同是探针是被反复使用的,测量次数可以用千次、万次来计算,在测量过程中探针将被电信号激励,在设计中需要尽量减小激励信号对探针产生的破坏,因此以线性极化技术作为理论基础,减小激励信号对探针的破坏。

多功能金刚石薄膜的热丝化学气相沉积装置 939     

 0

本实用新型涉及金刚石膜生长领域，尤其涉及一种多功能金刚石薄膜的热丝化学气相沉积装置。该装置主要包括：绝缘层一、导电层一、内孔工件、气体喷淋头、热丝一、气体喷淋环、热丝二、基片、导电层二、绝缘层二、反应腔体、外部气源、直流加热电源二、直流加热电源一、偏压电源一、偏压电源二、调速电机、抽真空系统、水冷样品台二、水冷样品台一、真空测控系统等。本实用新型既可以实现在工件内孔快速、均匀沉积金刚石薄膜，又可以实现在大面积基片上快速、均匀沉积金刚石薄膜，沉积时反应气体消耗量低，沉积过程中能测控热丝的温度、工件表面的温度和反应腔内的压强，能准确控制金刚石薄膜沉积各项主要工艺参数，工艺重复性好。

光化学烟雾箱 964     

 0

本实用新型公布了一种光化学烟雾箱，包括调控平台、防护保护罩、反应室、内置光源、反应配气装置、气体探测装置、清洗机、空调系统和万向轮，其特征在于：调控平台的下端通过连接件固定连接有万向轮，调控平台的上端安装有反应室和防护保护罩，反应室为6块PMMA材质板材组成的正方体，反应室的体积大小为4L，防护保护罩环绕着反应室，防护保护罩和反应室之间的空间与调控平台内部的空调系统联通，在反应室的顶部设置有清洗机，反应室内部设置有内置光源，反应室内部还设置有气体探测装置，反应室的左侧设置有反应配气装置。其优点是：占地面积小，移动方便，成本低，采用光源光损失小，利用率高，适合教学用，且反应周期短，效率高。

高灵敏在线检测呼出气中HCN的装置和应用 1113     

 0

本发明提供了一种高灵敏在线检测呼出气中HCN的装置和应用，所用高灵敏在线分析系统包括呼出气进样装置、呼出气除湿装置、供气装置和HCN高灵敏检测装置。所述高灵敏在线分析的应用是利用上述高灵敏在线分析系统，将一定流速的人体呼出气经过除湿装置的除湿处理后直接进入HCN高灵敏检测装置进行分析。改变人体呼出气的流速和抽气泵的抽速可以获得不同浓度的HCN气体，进而得到不同强度的HCN特征离子信号响应。人体呼出气直接进入HCN高灵敏检测装置而不需要离线预富集、化学衍生等前处理步骤，操作简单，分析快速准确，检测灵敏度高，可检出sub‑ppbv量级的HCN。

应用AuNPs/NiNFs/ITO电极检测亚硝酸盐的方法 1181     

 0

本发明涉及一种应用AuNPs/NiNFs/ITO电极检测亚硝酸钠的方法，属于电化学传感器领域。本发明以氧化铟锡导电玻璃(ITO)为基底，并在基底上利用电化学沉积法沉积纳米金‑镍颗粒，制备出纳米金‑镍电极。以AuNPs/NiNFs/ITO电极为工作电极，Ag/AgCl电极为参比电极，铂丝为辅助电极组成三电极系统，将该三电极系统置于以亚硝酸钠溶液中，在此基础上为亚硝酸钠的测定提供一种新的分析方法。本发明利用ITO玻璃的良好的导电性，制得一种对亚硝酸盐具有高灵敏度的电极，且该电化学分析方法操作简单、检测时间短、准确度和灵敏度高，可广泛应用于实际样品测定。

基于多智能体深度强化学习的无人机网络悬停位置优化方法 785     

 0

一种基于多智能体深度强化学习的无人机网络悬停位置优化方法，首先对无人机对地通信场景中的信道模型、覆盖模型和能量损耗模型进行建模；将无人机对地通信网络的吞吐量最大化问题建模为局部可观察马尔科夫决策过程；通过无人机与环境的不断交互获取局部观测信息和瞬时奖励，并基于这些信息进行集中式的训练，得到分布式的策略网络；将策略网络部署到每个无人机中，每个无人机可以基于自身的局部观测信息得到移动方向和移动距离决策，调整悬停位置，进行分布式协作。本发明还将比例公平调度和无人机能耗损失信息引入到瞬时奖励函数中，在提高吞吐量的同时保证无人机对地面用户服务的公平性，并减少能耗损失，使无人机集群能够适应动态环境。

节能环保型红土镍矿冶炼竖炉冶炼熔渣在线检测方法 1147     

 0

节能环保型红土镍矿冶炼竖炉冶炼熔渣在线检测方法，属于镍铁生产领域。竖炉炉渣经过粒化器冷却降温，温度达到60℃以下后，用皮带输送机传输进入中子活化元素分析仪器，对竖炉炉渣进行在线检测，检测信号经过处理器分析处理，得出元素含量，再传送到相关单位接收使用。检测后炉渣通过皮带输送机直接输送到炉渣堆场。竖炉炉渣经过在线检测装置检测分析，具有分析速度快，反馈迅速；代表性强，整体误差小；安全可靠；自动化程度高，无需增设化验人员，无需增购炉渣化学分析药品。红土镍矿节能环保竖炉冶炼炉渣在线检测装置的使用，可明显提高金属镍回收率，降低生产成本。

在工件内孔沉积金刚石薄膜的热丝化学气相沉积装置 904     

 0

本实用新型涉及金刚石膜生长领域，尤其涉及一种在工件内孔沉积金刚石薄膜的热丝化学气相沉积装置。该装置设有密闭的反应腔体，反应腔体的一端设有气体喷淋头，气体喷淋头通过管路与外部气源连接，反应腔体的另一端设有抽真空系统和真空测控系统；反应腔体内部设有中空的水冷样品台，水冷样品台的中空部分向内依次设有绝缘层、导电层、工件、热丝。本实用新型可以实现在工件内孔快速、均匀沉积金刚石薄膜，减少反应气体的消耗，沉积过程中能测控热丝的温度、工件表面的温度和反应腔内的压强，能准确控制金刚石薄膜沉积各项主要工艺参数，工艺重复性好。

基于强化学习的水下机器人避障路径规划方法 933     

 0

一种基于强化学习的水下机器人避障路径规划方法，首先对水下机器人的能耗模型以及动力学模型，水下洋流场景模型进行建模；其次将水下机器人对到达路径点的能耗与时长最小化问题建模为抽象的马尔可夫决策过程；将当前水下机器人的观测信息通过抽象网络转到隐藏层成为隐藏状态，将隐藏状态和想采取的动作通过转移预测网络映射至下一隐藏向量和预测奖励，另外策略网络通过给定的隐藏向量选择采取的动作以及当前局面的总奖励，在这个场景中即为到达目标点。通过水下机器人与环境的不断交互学习环境模型，得到即时奖励改进神经网络。最后将训练好的策略网络部署到水下机器人中。

快速检测唾液中毒品的方法 780     

 0

本发明公开了一种快速检测唾液中毒品的方法。取唾液样品加入碱溶液调节pH值，然后量取上述唾液溶液在进样片取样处，再向唾液样品中添加一定体积的辅助化学添加剂，将进样片送入离子迁移谱分析检测仪热解析进样器内。经热解析后分析检测输出分析检测结果。测量检测限可以达到1ng以下量级(0.1ppm以下浓度)。单个样品分析时间小于5S，软件自动输出检测结果。本发明中测量方法简便、快速、高效、可靠性好。针对口入服毒、吸毒案件，离子迁移谱分析检测仪利用本发明中的方法完全可以通过检测唾液中毒品成分实现快速稽查。基于法庭科学方面的应用研究需求，软件控制仪器可以根据毒品迁移时间实施报警模式。

熔盐中电化学还原固态金属氧化物低温合成高熔点金属碳化物方法 1077     

 0

本发明一种熔盐中电化学还原固态金属氧化物低温合成高熔点金属碳化物方法,涉及高熔点金属碳化物低温合成技术领域。该方法步骤包括:(1)以氯化钙作熔盐电解质,200℃,恒温2天脱水;(2)将金属氧化物粉和碳粉按比例球磨混合、压块,氩气保护烧结制成阴极片;石墨等碳素材料为阳极;(3)将阴极片放入石墨坩埚兼阴极导体中,加入氯化钙,氩气保护,极间距≥1cm、850℃左右,施加低于氯化钙分解高于金属氧化物还原的恒电压合成高熔点金属碳化物;(4)还原一段时间后取出阴极片,再放入另一个阴极片继续还原;取出的阴极片破碎,水洗除盐,60℃烘干,检查、封装。该方法工艺流程短,能耗少,成本低,对环境友好。高熔点金属碳化物含量可达2-4N。

用于铅离子检测的方法 1124     

 0

本发明涉及电化学分析技术领域，具体涉及一种用于铅离子检测的方法。该方法以AgNWs/PDMS可塑电极为工作电极，Ag/AgCl电极为参比电极，铂丝为辅助电极组成三电极系统，将该三电极系统置于Pb²⁺离子待测液和支持电解质中。设置初始电位为‑0.1V，终止电位为‑1V，电位增量为0.01V，记录Pb²⁺的交流阻抗‑电位关系曲线，并利用Pb²⁺在峰电位点的阻抗值用标准曲线法进行Pb²⁺离子的定量分析。本发明利用PDMS良好的柔韧性并结合银纳米线良好的导电性制得一种对铅离子具有高灵敏度的电极，且该电化学分析方法操作简单、检测时间短、准确度和灵敏度高，可广泛应用于实际样品测定。

数据驱动的无人船强化学习控制器结构及设计方法 728     

 0

本发明公开了一种数据驱动的无人船强化学习控制器结构及设计方法，所述的控制器结构包括未知信息提取模块、预测模型生成模块、奖励函数模块和滚动时域优化模块。本发明是基于数据驱动的，无需对被控无人船进行精确数学建模。控制器仅利用未知信息提取模块收集无人船的控制输入与输出状态数据信息并提取到动力学未知函数，通过预测模型生成模块对提取信息进行重构得到预测模型，控制器不依赖于精确无人船人工建模。本发明不需要针对运动学与动力学两级分别设计不同的控制器。通过预测模型和设定的奖励函数，对控制输入进行滚动时域优化达到最优的控制效果。本发明同时适用于全驱动无人船与欠驱动无人船。

医疗用温度和化学传感器结构及制备方法 975     

 0

一种医疗用温度和化学传感器结构及制备方法，温度传感器和湿度传感器均是由金属薄膜，玻璃衬底，钝化层组成；在金属薄膜和玻璃衬底之间，带有一层金属粘附层，温度传感器外部带有金属薄膜，湿度传感器外面带有金属薄膜，玻璃衬底设置在温度传感器和湿度传感器下面，钝化层设置在金属薄膜侧面。金属薄膜，能由铂、镍、铱、镍铬合金、Balco、铑金属组成，由物理气相沉积方法完成；钝化层，为聚酰亚胺或者金属氧化层。本发明的优点：将传感器安装在医院的病床和轮椅上可以监测病人的体温，判断是否发烧；监测病床上的湿度，以更换床单或床垫。将温度和湿度集成起来，传感器的测量可以无线或是远程的，使用更加方便，制备方法简单，性能稳定。

物理化学实验用天平 1117     

 0

本实用新型公开了一种物理化学实验用天平，包括装置本体以及与装置本体配套使用的透明保护盖，装置本体的顶部设置有支撑台，支撑台采用PVC环保材质制作而成，支撑台的中间设置有称重区，称重区与装置本体信号连接，装置本体的表面设置有滑槽，装置本体的底部设置有支撑地脚，装置本体的前部设置有显示屏，显示屏采用发光二极管制作而成，显示屏的左侧设置有启动按钮，启动按钮的右侧设置有复位按钮，启动按钮以及复位按钮均与装置本体信号连接，显示屏的右侧设置有夜间照明按钮，装置本体的左右两侧均设置有凹槽，凹槽与装置本体嵌套连接，该种物理化学实验用天平测量精度较高，使用起来非常方便，同时配有多种保护装置，更加安全。

钢构件在荷载与电化学腐蚀耦合作用下的轴压装置 812     

 0

本实用新型涉及一种钢构件在荷载与电化学腐蚀耦合作用下的轴压装置，属于结构工程领域，包括承载板、拉杆、腐蚀槽、荷载传感器；钢管砼轴压构件置于腐蚀槽中，在钢管砼轴压构件的两端设置绝缘层，绝缘层的外侧设置钢制垫块，钢制垫块和钢管砼轴压构件之间设置圆钢球铰，钢制垫块的外侧设置承载板，拉杆的下端穿过承载板并通过螺母固定，拉杆的上端穿过承载板和荷载传感器并通过螺母固定，两块承载板之间设置机械式千分表，通过荷载传感器和机械式千分表对钢管砼轴压构件长期荷载作用和电化学腐蚀作用进行测量。本实用新型优点：更容易实现集中受力；通过改变腐蚀槽的形状可以加大构件在腐蚀溶液里的有效面积，避免局部浸泡不到位影响腐蚀效果。

用于轴类工件外圆成型的电化学加工方法 1076     

 0

本发明公开了一种用于轴类工件外圆成型的电化学加工方法，先采用整体阴极加工，整体阴极与轴类工件的轴向长度相同，轴类工件可沿自身轴向旋转运动，整体阴极可沿轴类工件径向做进给运动；然后采用移动阴极加工，移动阴极的轴向长度较轴类工件的轴向长度短，移动阴极可沿轴类工件径向做进给运动，也可沿轴类工件轴向做移动运动。测量系统可进行轴类工件直径的测量，将获得的直径数据传输给控制系统，控制系统根据直径测量结果控制移动阴极沿零件轴向的运动速度；通过两步法加工能够实现细长管轴类工件的高精度、高效率加工。

应用于CWSBR工艺的化学除磷装置 1188     

 0

本实用新型属于环境工程污水治理领域，特别涉及一种应用于CWSBR工艺的化学除磷装置。包括储药装置、PLC控制站、总磷测定装置；所述总磷测定装置包括进水总磷测定仪和出水总磷测定仪，两者均连接PLC控制站；所述储药装置包括配药箱、储药箱，两者通过带有药液释放电动阀的管路连接，所述配药箱通过电动加药阀连接加药斗，配药箱上开设加水孔，内部设置搅拌器，所述储药箱上连接超声波液位计，储药箱通过加药泵法兰连接反应池。本实用新型可以实现CWSBR工艺中加药的自动化，配药、储药可根据液位自行调节，可以预测系统的除磷效果，根据进水水质的不同实时调整加药量。节省成本的前提下，达到稳定的出水指标。

基于硼酸基团的印迹分子聚合物及分子印迹电化学传感器 1047     

 0

本发明涉及一种基于硼酸基团的印迹分子聚合物及分子印迹电化学传感器。所述的印迹分子聚合物由苯硼酸类化合物0.02‑0.2mol/L、聚合物单体1.0‑2.0mol/L、聚合物交联剂0.1‑0.3mol/L、自由基引发剂0.1‑0.5mol/L、目标分子0.02‑0.2mol/L和水余量制备。将印迹分子聚合物，均匀涂在金属Pt电极上，之后将Pt电极放入干燥箱内，50℃聚合形成无色透明聚合物薄膜，自然冷却至室温后放入HCl溶液中，浸泡30‑40分钟，取出，用蒸馏水洗涤，干燥，得分子印迹电化学传感器。本发明制备过程简单，可快速简便识别出待测溶液中的葡萄糖分子，准确性率高。

镍合金的绿色环保化学机械抛光方法 738     

 0

本发明提供了一种镍合金的绿色环保化学机械抛光方法，属于超精密加工技术领域。先对镍合金进行研磨，然后进行粗抛光和精抛光。粗抛光时，抛光磨粒为α‑氧化铝，平均粒径为3‑5μm，抛光液为去离子水，抛光垫为聚氨酯。精抛光时，陶瓷磨粒为氧化硅、α‑氧化铝、氧化铈、氧化镁，平均粒径为20‑60nm，重量百分比为0.5％‑3％；络合剂为亚氨基二琥珀酸钠盐、柠檬酸钠，重量百分比为0.5‑2％；pH调节剂为酒石酸、醋酸，重量百分比为0.5‑2％，调节抛光液pH为3‑5；抛光垫为磨砂革。抛光后镍合金的测量范围为50×70μm²，表面粗糙度R_a达到0.4‑0.7nm，实现了镍的超光滑超低损伤化学机械抛光。

荧光比率探针及其合成方法和检测细胞内溶酶体甲醛应用 959     

 0

一种荧光比率探针及其合成方法和检测细胞内溶酶体甲醛应用，属于分析化学领域。该荧光比率探针的结构式为：其制备方法包括：制备甲硫氨酸碳点固体粉末；制备荧光比率探针粗产品，然后用水合肼进行取代，得到荧光比率探针，用于检测甲醛，尤其用于检测水环境中的甲醛和生物样品时的甲醛。该荧光比率探针成功地实现了对细胞内外甲醛的检测，具有较好的选择性和检测灵敏度，对未来双发射荧光比率探针进一步应用于生物标记等领域提供了重要的理论意义。

快速可重复利用的六价铬离子检测系统及方法 874     

 0

快速可重复利用的六价铬离子检测系统及方法，属于化学分析技术领域，检测系统包括亚甲基蓝溶液、没食子酸修饰的金纳米颗粒溶液和NaBH4溶液；方法为：将待检测的水样加入到亚甲基蓝溶液和没食子酸修饰的金纳米颗粒溶液组成的混合溶液中，然后加入NaBH4溶液；通过紫外分光光度计测吸光度，带入标准曲线方程；或者方法为：将纤维素滤纸浸入混合溶液后晾干；滴加待检测的水样后滴加NaBH4溶液，进行标准比色或用固体紫外分光光度计测吸光度。本发明的方法不需要采用复杂昂贵的仪器，检测结果与ICP‑MS等方法相近，满足工业要求。

基于邻居感知的多智能体强化学习的交通信号控制方法 915     

 0

本发明提供了基于邻居感知的多智能体强化学习的交通信号控制方法，包括：将自适应交通信号控制问题建模为邻居感知的马尔可夫博弈，根据道路网络将交叉口建模为连通的智能体；所述邻居感知的马尔可夫博弈中，智能体的观测被定义为交叉口和它的邻居信息；所有交叉口在时刻采取动作后所观察到的智能体的奖励定义为所有进入的队列中等待车辆的平均数量；运行交通控制交互环境；确定智能体与其连接邻居之间的相关性；根据智能体之间的相关性对各个分散的加强学习智能体的观测和奖励信息进行加权，得到更新后的观测和奖励信息；根据更新后的观测和奖励信息训练智能体，进而每个智能体进行交通信号分散控制。本发明能够达到缓解交通拥堵的技术效果。