上海有色金属分析检测技术理论与应用

基于深度强化学习的共生无线电智能抗干扰方法 1043     

 0

本发明提供了一种基于深度强化学习的共生无线电智能抗干扰方法，所述共生无线电网络包括发射器、接收器以及干扰器，包括：在每个时隙，发射机根据感测到的状态选择动作与环境交互；发射机收到奖励并感测下一个状态，所述奖励用于表示成功传输概率；获取预设置的DDQN模型，通过DDQN模型通过查找最佳动作值函数Q*(s，a)确定该动作对应的动作值；判断所述动作值是否为最佳动作值，且在所述动作值为最佳动作值时输出最佳奖励值。本发明提供的基于DDQN的模拟共生无线电网络和干扰器之间的对抗，Q网络使用Transformer编码器实现，以从原始频谱数据中有效地估计动作值，本发明能够有效地防御多种干扰攻击，从而最大限度地提高通信系统的成功传输率。

提高等离子体辅助化学气相沉积设备性能的方法 974     

 0

本发明公开了一种提高等离子体辅助化学气相沉积设备性能的方法，其中，包括以下步骤：在一设置多个电阻感应器的等离子体辅助化学气相沉积设备的反应腔室中，淀积不同厚度的薄膜于所述反应腔室内壁，并且计算出电阻与所述薄膜厚度的变化关系；感应测试出所述腔室内壁淀积薄膜厚度为T时的电阻值R，比较R与所述反应腔室没有薄膜时的电阻值R0和所述反应腔室内淀积临界厚度薄膜Tm时的电阻值RM；当R≤RM时，所述电阻感应器触发所述PEVCD设备自动进行清洗；当R=R0时，所述PEVCD设备停止清洗。本发明能够精确计算出清洗该薄膜所需要的时间，提高设备的生成效率以及减小由内腔壁清洗不干净而导致的薄膜剥离污染。

基于多智能体分层强化学习的多无人机空战决策方法 1190     

 0

本申请提供了一种基于多智能体分层强化学习的多无人机空战决策方法，所述方法包括：基于实际多无人机空战场景构建的仿真环境，包括环境约束模型、无人机个体约束模型和对抗影响规则；将多无人机空战问题建模为半马尔可夫博弈模型，单个无人机的决策过程抽象为代表高层和底层策略的两个智能体，分别定义各智能体的状态空间表示、动作、奖励函数和动作终止条件；采用一种异策略同步学习与自博弈机制结合的多智能体强化学习算法分别训练无人机高层和底层策略智能体；完成训练后无人机基于底层策略智能体的策略网络和局部观测进行决策；该方法可实现空战环境下多无人机的自主无人协同决策，无需人类驾驶员介入，具有较好的即时性和鲁棒性。

基于强化学习的自动驾驶车辆换道轨迹规划方法及系统 818     

 0

本发明提供了一种基于强化学习的自动驾驶车辆换道轨迹规划方法及系统，涉及自动驾驶技术领域，该方法包括：模型构建步骤：依次构建状态空间、动作空间、状态转移、奖励函数以及安全修正模型；模型训练步骤：构建完成相应模型后，采集训练数据，训练强化学习模型，再对各模型进行相应测试，以实现在不同场景下的换道轨迹规划。本发明能够有效地提高换道过程中的安全性和效率，进而有利于整体交通流的通行效率。

化学气相淀积装置及其调节方法 1026     

 0

本发明提供了一种化学气相淀积装置，包括反应器及多个进气管，所述进气管的进气端位于所述反应器外并连接一供气设备，出气端位于所述反应器内且能够伸长或缩短，至少两个所述进气管的出气端在竖直方向上位于所述反应器的不同位置处。通过调整所述进气管的出气端在所述反应器内的位置以调整所述反应器内的反应气体的分布，降低反应器内各处的反应气体浓度差，从而使同一批次的晶圆上淀积的薄膜一致性更好。基于此，本发明还提供了一种所述化学气相淀积装置的调节方法，根据测试晶圆所处的位置及淀积的薄膜厚度绘制关系模型，并通过关系模型获取反应器内各处反应气体的浓度，然后精细化地调整进气管出气端的位置以降低反应气体的浓度差。

高压环境下恒电位电化学气体传感器的校准方法 913     

 0

一种高压环境下恒电位电化学气体传感器的校准方法。其中，通过测量传感器在有限个离散环境压强下的气体成分浓度-电解电流响应曲线，获取一定范围内任一固定环境压强下传感器电解电流和气体成分浓度之间的响应曲线，实现对恒电位电化学气体传感器进行高压下的校准。

应用于化学气相沉积设备的插销高度校准工具及校准方法 1040     

 0

本发明公开了一种应用于化学气相沉积设备的插销高度校准工具及校准方法，包括固定环，所述固定环内侧壁上开设有环形槽，环形槽内活动连接有转动环，转动环的内壁固接有固定滑轨，固定滑轨上滑动有调节滑块，调节滑块上螺纹连接有调节螺栓，调节滑块的底部设有两个卡扣机构并通过两个卡扣机构可拆卸安装有高度表，此应用于化学气相沉积设备的插销高度校准工具，区别于现有技术，对高度表拆装方便，转动环可带动固定滑轨旋转，同时移动调节滑块处于固定滑轨上的位置，从而可以测量加热器插销中间任意点的数据以及加热器插销在腔体内的高度，减少破片以及停机时间，校准加热器插销高度，可以计算加热器插销中心点与四边点的水平差值。

新型化学试剂助剂加热冷却一体机 910     

 0

本实用新型公开了一种新型化学试剂助剂加热冷却一体机，包括处理箱，所述处理箱上铰接有箱门，所述处理箱内固接有盛放槽，盛放槽的内部固接有隔板，隔板上等距设有多个放置孔，盛放槽的内部还安装有搅拌组件，处理箱的一侧壁安装有加热器，加热器与处于处理箱内侧底部的加热管连接，此新型化学试剂助剂加热冷却一体机，区别于现有技术，实现对多个反应管的同时加热或冷却作业，工作效率更高，再通过搅拌组件的设置，能对传导液进行搅拌，加热或冷却速度更快，进一步提高工作效率，且可实时监测处理箱内部传导液的温度，从而了解反应管的加热或冷却温度，当传导液蒸发减少时，也能通过浮球阀自动进行补充，使用时更加方便。

化学品船甲板的步桥结构 943     

 0

本实用新型公开了一种化学品船甲板的步桥结构，包括中央母步桥、纵向货油管系、电缆及阀门遥控多芯管，中央母步桥的两翼设有环形子步桥，中央母步桥作为从居住区域通往货油及艏部区域的前后“通行”通道，其高度与艏楼及艉楼甲板齐平，左右设置有下到主甲板面的梯道；子步桥贯穿整个货油主甲板面区域，作为船舶操作、维修、巡检的“作业”通道，高度位于货油主甲板面结构横梁的上方，左右设置有通到货油主甲板面的作业集中区域的直梯。本实用新型将“单一的中央主步桥”调整为“中央母步桥辅以两翼子步桥布置模式”，并合理布局货油甲板面的管系、电缆、阀门遥控管、通行通道、作业通道及各种支撑等系统，布局美观合理，施工方便。

取样针和包括该取样针的全自动化学发光免疫仪 1091     

 0

本发明公开了一种取样针和包括该取样针的全自动化学发光免疫仪，所述取样针包括：固定挡片；取样针本体，其一端为针头，另一端可导电地连接至所述固定挡片；以及钢管，其同轴套接于所述取样针本体的外侧，所述钢管与所述取样针本体之间绝缘连接，使得所述取样针本体通过固定挡片与电控单元的正极/负极电连接且所述钢管与电控单元的负极/正极电连接而形成闭合回路。本发明中的全自动化学发光免疫仪通过引入与取样针可导电连接的液位传感器，能够实时监测液面与针头的相对位置，确保足够的取样量，在提高抗干扰能力的同时也降低了携带污染率。

自动清洗化学反应噪声数据的方法及系统 1100     

 0

本发明公开了一种自动清洗化学反应噪声数据的方法与系统，方法包含获取反应结构式的数据集并进行标准化处理与去重得到预处理数据；去掉预处理数据中所有多产物反应数据，仅保留预处理数据中单产物反应数据进行训练得到一个正向合成算法模型；取出预处理数据中多产物反应数据中的反应物输入至正向合成算法模型中得到预测产物；判断预测产物是否为多产物中任一个产物；是则将该多产物反应数据中的多产物替换成预测产物后加入到训练数据集中；否则删除；处理全部多产物反应数据得到清洗过的训练数据集并训练新正向模型；系统包含反应结构式数据预处理模块、正向合成算法模型训练模块、多产物反应数据预测模块、判断模块、新的正向模型训练模块。

化学锚栓胶水包装结构 1004     

 0

本实用新型涉及一种胶水包装结构,尤其是一种化学锚栓胶水包装结构,能够直接从外观上了解包装结构内胶水的质量。一种化学锚栓胶水包装结构,为透明的软袋,该软袋内包容有一独立的内管。因本实用新型包装结构为透明材质制成,可直接目测其内的胶水,又是采用软袋,可进一步通过触摸准确判断其流动性,进而准确获知胶水的质量;另外,收尖的端部包装结构能更容易地插入钻孔处。

带有摄像、显示装置的微波化学仪器 1119     

 0

本实用新型涉及一种带有摄像、显示装置的微波化学仪器,包括微波炉腔(1);所述的微波炉腔(1)中包括与其固定的摄像装置(2),所述的摄像装置(2)通过连接件(3)与微波炉腔(1)外的显示装置(4)相连;本实用新型的有益效果是:实验人员可以清楚地观察到微波炉腔内的搅拌程度和反应情况,实时跟踪和监测化学反应的过程和条件,从而为快速掌握各种反应的条件和产物提供了方便;同时也可以通过观察到各种不安全状况的出现在第一时间采取必要的安全保护措施;为科研和实验工作人员提供了极大方便。

基于深度强化学习的战斗机自动近地防撞系统碰撞评估方法 1233     

 0

本发明公开一种基于深度强化学习的战斗机自动近地防撞系统碰撞评估方法，在航空器飞行过程中，周期性预测航空器未来一段时间内的飞行轨迹；并生成对应区域内的地形包线。结合数字地形高程数据库，通过深度强化学习海量飞行数据及飞行员经验，来综合评估航空器撞地的风险。

强化学习结合循环网络的机器人路径规划及控制方法 1160     

 0

本发明涉及一种强化学习结合循环网络的机器人路径规划及控制方法，该方法包括：构建生成机器人路径的循环网络，所述的循环网络依次生成机器人路径中的路径点；采用强化学习方法训练所述的循环网络；利用训练的循环网络执行机器人路径规划；控制机器人按照规划的路径点依次移动。与现有技术相比，本发明能够在局部信息受限的同时极大程度上对未知环境进行推理，节约资源，提升效率，实现可观测范围内的可行路径规划，从而在复杂场景下能够找到目标点，实现机器人的移动控制。

基于参数化量子线路的强化学习策略梯度方法 829     

 0

本发明提供一种基于参数化量子线路的强化学习策略梯度方法，属于量子计算技术领域。因为该方法将输入状态密度矩阵输入至量子决策神经网络进行演化，从而输出决定动作对应的概率，因此，该方法相比传统的强化学习策略梯度算法需要训练的参数大幅减少，并且增加了智能体的优化方向，同时在测量后的输出数据设置全连接层还可以使得输出动作的输出维度可调，灵活性更强。

适用于污染土原位化学氧化修复的养护方法 719     

 0

本发明公开了一种适用于污染土原位化学氧化修复的养护方法，包括以下步骤：在原位加药搅拌完成后的修复范围内划分出若干呈网格状的养护监测单元；在养护过程中，对各所述养护监测单元内土体进行PH值的监测；以所述养护监测单元内的PH值监测结果为依据，在所述养护监测单元的中心点以及四个角点位置处设置注药点并插入注药钢管，经所述注药钢管将碱性激发剂投加至相应深度的土体中；如此往复，依次完成各所述养护监测单元内土体的养护。本发明的优点是：养护方法简便易操作，通过实时监测各养护监测单元内土体的PH值，以了解氧化反应过程，根据监测结果补充投加碱性激发剂，从而提高各药剂的利用率，并提高对于有机污染物的去除效率。

云雾混构环境下基于深度强化学习的服务组合优化部署方法 869     

 0

本发明属于计算机领域中的云计算、边缘计算和服务计算技术领域，涉及云雾混构环境下基于深度强化学习的服务组合优化部署方案，具体涉及一种主要在边缘计算场景下基于深度强化学习的应用服务动态优化部署方法，本发明在用户与运行在各边缘节点之上的服务之间增加智能决策体Agent，让Agent综合当前各个边缘节点之上运行的应用服务，在各时间段内的资源情况和用户请求量，对下一时间段内各服务的访问使用量进行预测，随后调整各服务在边缘节点上的资源使用情况，以此对服务集合在各边缘节点上进行动态服务部署，帮助服务提供商作出各时间段内的优化部署策略，在提升服务质量的同时，节约能耗，节约成本，同时高效利用边缘服务器的系统资源。

用于钎焊金刚石铣磨刀具高频感应加热化学修整装置 765     

 0

本发明提供了一种用于钎焊金刚石铣磨刀具高频感应加热化学修整装置，实现了钎焊金刚石铣磨工具在机即时高温石墨化化学修整，纯氮保护/隔离气氛能够有效隔绝修整区域的空气，极大减缓了超高强度钢高温修整基体在高温环境下的氧化损耗，提高了其使用周期和使用稳定性。氮保护/隔离气氛接口、高频感应加热线圈均与数控机床的控制阀门连接，在实现压力、流量和启停控制的同时，所有PLC数据均可被PLC控制器读取，实现数控加工程序、修整装置启停控制内嵌，完全实现数控化。内嵌式热电偶用于超高强度钢高温修整基使用前和使用过程中热变形测定和修整中环境温度控制。

微波化学合成仪 877     

 0

本实用新型涉及一种微波化学合成仪,包括微波炉腔(12),红外传感头(1),反应容器(11);反应容器(11)安置在微波炉腔(12)内;还包括:一个升降测温杆(2);红外传感头(1)在升降测温杆(2)的底端,红外传感头(1)的电缆连线(3)通过升降测温杆(2)的顶端与外接控制系统相连;一个测温管(7);所述的测温管(7)穿过微波炉腔(12)上一个可收缩的孔(5),再穿过反应容器(11)上的测温孔(8);升降测温杆(2)安置在测温管(7)的上部;测得的温度是反应容器内反应物质的实际温度;红外传感头插在密封的玻璃测温管里面,不受任何有害气体和其它外力的伤害,且由于红外传感头连接在微波炉外面,有利于维护保养。

化学纤维分离的电机系统及其转速获取方法 1141     

 0

本发明提出一种化学纤维分离的电机系统及其转速获取方法，用于化工方面的纤维分离。电机系统在运行过程中，对纤维分离程度实时获取，然后根据纤维的分离程度来获取最佳转速，使得系统在保证用户要求的前提下，对纤维进行最大效率的分离，即电机系统运行在最大功率点。该电机系统实时采集当前纤维分离状态，将纤维分离状态信息作为变量纳入爬山算法进行快速搜索，得出最佳转速。本发明将传统的纤维分离系统由人工观测变为自动控制，更加智能化，改善了化学纤维的分离质量，从而能够满足用户对纤维的分离程度和工艺的特殊要求。

应用于化学气相沉积设备的插销高度校准工具 987     

 0

本实用新型公开了一种应用于化学气相沉积设备的插销高度校准工具，包括固定环，所述固定环内侧壁上开设有环形槽，环形槽内活动连接有转动环，转动环的内壁固接有固定滑轨，固定滑轨上滑动有调节滑块，调节滑块上螺纹连接有调节螺栓，调节滑块的底部设有两个卡扣机构并通过两个卡扣机构可拆卸安装有高度表，此应用于化学气相沉积设备的插销高度校准工具，区别于现有技术，对高度表拆装方便，转动环可带动固定滑轨旋转，同时移动调节滑块处于固定滑轨上的位置，从而可以测量加热器插销中间任意点的数据以及加热器插销在腔体内的高度，减少破片以及停机时间，校准加热器插销高度，可以计算加热器插销中心点与四边点的水平差值。

基于深度强化学习的服务机器人行人感知避障方法 762     

 0

本发明公开了一种基于深度强化学习的服务机器人行人感知避障方法，涉及深度学习和服务机器人避障领域。该方法在训练阶段：首先，使用ORCA算法生成训练数据。然后，随机生成实验场景，使用初始化后的强化学习模型与环境交互生成新的训练数据，并融合进原有训练数据。最后，在新的训练数据上利用SGD算法训练网络，得到最终的网络模型。该方法在执行阶段：通过激光雷达获取周围行人的状态，根据训练好的模型和奖励函数计算预测状态，选择获得最大奖励的动作作为输出并执行。本发明具有很强的实时性和适应性，在行人环境下，可以使机器人遵守行人的右行规则，规划出高效、安全、自然的路径，提升了服务机器人的智能性和社交性。

纳米级氧化膜的电化学定量表征方法 857     

 0

本发明提供了一种纳米级氧化膜厚度的电化学定量表征方法，该方法包括：多层薄膜样品的制备：将待测样品去除油污及杂质，在样品表面镀一层金属薄膜；电化学实验：用恒电位仪，将样品作为三电极系统中的工作电极，饱和KCl甘汞电极作为参比电极，Pt作为对电极，在含NaCl？0.1～10mol/L的溶液体系中，使用恒电流法，将电流密度控制在0.1～100mA/cm2的范围内，记下电位随时间的变化，直至腐蚀电位趋于稳定；定量表征：在材料、电流密度及电解液浓度不变的情况下，标定腐蚀速度，从而得到氧化膜的厚度。本发明的方法对纳米级氧化膜非常灵敏，结果可靠性高；取样面积大，获得的数据有代表性，可重复性高。

基于深度学习与强化学习的视频考勤系统及方法 830     

 0

本发明公开了一种基于深度学习与强化学习的视频考勤系统及方法，所述系统包括：信息采样模块，用于获取训练数据和测试数据；训练模块，用于根据接收到的训练数据对深度神经网络架构进行训练，得到训练模型；测试模块，用于采用接收到的测试数据对训练模型进行测试，输出测试结果，并判别测试结果，输出判别信息；终端处理模块，当所述判别信息为成功时，其用于将与该判别信息相对应的测试结果存储至预先设有的数据库内；以及强化模块，当判别信息为失败时，用于将与测试结果所对应的所述测试数据对训练模型进行重新训练，更新训练模型。本发明解决了视频考勤过程等待过长、不能实现多人同时考勤、识别错误率高等技术问题。

同时检测水产品中日落黄和孔雀石绿的方法 1043     

 0

本发明公开了一种同时检测水产品中日落黄和孔雀石绿的方法。该方法包括以下步骤：(1)通过水热法制备还原石墨烯(RGO)纳米材料；(2)通过晶种生长法合成金纳米棒(GNRs)；(3)采用电化学富集法在丝网印刷电极上分别吸附溶液中的RGO、GNRs、SY、MG；(4)检测丝网印刷电极表面物质的拉曼光谱信号，从而对水产品中SY、MG进行定性和定量分析检测。本发明采用电化学富集‑SERS检测技术不仅具有分析快速、灵敏度高、样品用量少、应用范围广、操作简便和携带方便等特点，最重要的是，本发明具有优良的选择性，而且不需要标记和分离纯化，可同时对水产品中日落黄和孔雀石绿进行分析检测，且检测限低。

个性化学生作业分配系统及其作业分配方法 1076     

 0

本发明公开了一种个性化学生作业分配系统及其作业分配方法，属于智能化教学技术领域。本发明包括囊括学生阶段学习内容知识点的数据库模块、考察阶段学习内容知识点的测试试题库模块、测试试题发送和反馈模块、测试试题的评价模块、个性化作业生成模块以及个性化作业发送模块，各模块之间的映射关系为：考察阶段学习内容知识点的测试试题库模块中的测试试题基于囊括学生阶段学习内容知识点的数据库模块中的阶段学习内容知识点，测试试题发送和反馈模块将考察阶段学习内容知识点的测试试题库模块中的测试试题发送至学生测试后，学生再反馈至测试试题的评价模块，个性化作业发送模块将个性化作业人工或电子发送至映射关系相对应的学生。

水溶性不饱和醇电化学加氢与电能共生法 812     

 0

一种水溶性不饱和醇电化学加氢与电能共生法,利用质子交换膜燃料电池进行水溶性不饱和醇加氢合成与电能共生,将质子交换膜燃料电池接入测试系统并控制电池的温度,阴极反应物泵入前用氮气对阴极室进行预处理,然后对电池进行初始极化,即在阳极通入氢气后接通电路,使阴极室中残余的氧气充分反应。反应时,控制通入阳极室的氢气流量和泵入阴极室的醇水溶液流量,通过调节可变电阻器控制反应电流,得到不同纯度的饱和醇。本发明的质子交换膜燃料电池采用多孔气体扩散三合一膜电极,工艺过程简单,污染小,能耗低,能在合成产品的同时产生电能,对于生产少量高品质化学品,具有重要意义。

抛光垫与抛光盘之间的气泡检测方法 1156     

 0

本发明公开一种化学机械抛光系统中抛光垫与抛光盘之间的气泡的监测方法,包括步骤:声波检测装置发射进入抛光垫上晶片运行轨迹处的声波;接收从抛光垫上晶片运行轨迹处返回的回波;分析回波延迟,监测是否出现气泡和出现的气泡大小;显示监测结果;根据监测结果产生控制化学机械抛光系统运行的命令信号;控制化学机械抛光系统运行的命令信号发送到化学机械抛光系统,由此控制化学机械抛光系统运行。

基于强化学习的混合动力汽车能量管理方法 878     

 0

本发明涉及一种基于强化学习的混合动力汽车能量管理方法，包括以下步骤：基于强化学习中的Q‑学习算法得到混合动力汽车在不同循环工况下的能量管理策略；将能量管理策略写入微型控制器；确定当前循环工况，数据采集系统获取当前驾驶参数并传输至微型控制器，微型控制器基于当前循环工况下的能量管理策略得到控制动作，并将控制动作传输至整车控制器；整车控制器根据控制动作调整动力系统。与现有技术相比，本发明基于强化学习得到混合动力汽车在不同循环工况下的能量管理策略并写入混合动力汽车的微型控制器，在汽车行驶时只需查表就可以快速找到当前状态下的最优控制动作，速度快，能够满足目前甚至未来的混合动力汽车状态监测的采样频率。