本发明公开了一种基于深度强化学习实现人脸识别端边卸载计算方法及装置,包括:获取真实的人脸图片,根据边端人脸识别模型训练得到分类数据,其中,分类数据包括图片名称、id、图片提取出的128维特征向量、终端预测置信度、终端预测值、边缘预测值;将深度学习与强化学习进行结合,定义马尔科夫决策过程的状态空间、动作集、奖励函数和智能体;根据定义好的马尔科夫决策过程,构建Actor神经网络和Critic神经网络,使用分类数据对构建好的Actor神经网络和Critic神经网络进行训练,获得智能卸载决策模型;对智能卸载决策模型的性能与基准查询策略进行对比评估;根据对比评估的结果,将智能卸载决策模型部署到智能终端设备中,进行人脸识别的任务卸载决策。
782
0
本实用新型提供一种用于化学气相沉积工艺的喷淋头,所述喷淋头用于向衬底提供反应气体,所述喷淋头具有端口,所述端口具有与之对应设置的窗口透明板,所述窗口透明板作为观察通道或测试通道,通过所述窗口透明板对化学气相沉积工艺进行监控,所述窗口透明板与端口之间通有吹扫气体,所述吹扫气体用于防止反应气体在窗口透明板上发生化学反应或物理沉积。本实用新型使得本领域技术人员能够在化学气相沉积工艺过程中对喷淋头下方的衬底的情况进行实时监控。
904
0
本实用新型公开了吸化学液体棉生产用原料回收装置,包括吸化学液体棉生产装置、清洗吸尘装置和储棉箱,所述吸化学液体棉生产装置的顶部设有清洗吸尘装置,所述清洗吸尘装置的底部分布有通风口,所述通风口的中间分布有烟尘感应装置,所述清洗吸尘装置的左部经过管道连接有水箱,所述水箱的内部设有水泵,所述清洗吸尘装置的内侧顶部设有金属编织过滤网,所述清洗吸尘装置的右部连接有抽风风扇组,所述吸棉回收端口的底部设有连接软管,所述连接软管的底部设有储棉箱。该吸化学液体棉生产用原料回收装置,环保性能高,耐高温,智能化性能高,实时监测到烟尘,便于清洗吸化学液体棉生产装置内部,便于将吸化学液体棉生产原料回收,避免堵塞。
920
0
本发明涉及一种基于深度强化学习的群智感知激励机制方法,获取参与者位置和移动轨迹信息,将参与者移动过程建模为马尔可夫决策过程,采用深度强化学习预测其在下一个激励周期内的移动轨迹,预测参与者在下一个激励周期结束时的位置分布,通过计算参与者的预测位置分布与数据请求方提供的感知数据目标分布的相对熵,选择大于相对熵阈值区域内的参与者进行激励。本发明避免在同一时间段内对所有参与者进行激励、对同一个参与者在所有激励周期内都进行激励,合理的激励机制解决群智感知参与者收集到的感知数据分布情况与数据请求方提供的目标数据分布之间差异较大、覆盖质量较低的问题;可被广泛应用于移动群智感知领域,降低激励参与者的成本。
1223
0
本实用新型公开了一种泡沫法化学粘合无纺布纤维切割装置,化学粘合无纺布纤维切割装置设置于无纺布纤维输送方向上,其特征在于,包括机架、上切割模块、下切割模块和螺杆同步总成,通过设置相互交错且贴合的上刀和下刀,设置于无纺布纤维输送方向上,在无纺布纤维通过时得以通过相互交错的上刀和下刀,并实现对不同厚度蓬松状态下的无纺布纤维的切割,设置了螺杆同步总成,实现了对上刀和下刀的同向移动,使得切割设备具备了在运行中调整无纺布切割宽度的能力,避免了停机进行切割位置的调整,且重新开机时需要检查和处理胶黏辊,切换无纺布设定宽度的效率低下的问题。
本发明公开了一种基于强化学习的视频多次遍历(Multipass)编码中码率分配与控制的优化解决方案。在第一次编码结束之后,视频分割为多个不重叠的连续的画面组。针对不同的画面组在第一次遍历(pass)后采集的对组内各帧图像的综合统计信息,通过预测网络得到码率分配和控制决策参数,并执行第二次遍历编码和获取编码结果评分。将统计信息和码控决策参数输入判别网络得到估分,执行强化学习的迭代训练过程。利用强化学习训练得到的预测网络,在编码视频图像第二次遍历前,得到各个画面组的码率分配与控制的最优化策略参数,从而最大可能的提升编码压缩效率。
1124
0
本发明公开了一种基于深度强化学习的EFSM输入序列生成方法,将输入序列生成问题看作是一个复杂的优化问题,求解最优解的过程就是利用元启发式算法对可执行路径中的每条变迁搜索满足其谓词判断条件的输入参数解;其中,元启发式算法被使用强化学习算法训练好的智能体来代替,智能体通过在本发明设计的动作空间内选择动作来改变输入参数的值,然后根据奖赏函数获取对应的奖赏值以指导下一步动作的选择。本发明可以根据各种客观测试路径有效地生成新的输入序列,可以有效地提高EFSM模型输入序列生成的效率和成功率,并能够在进行回归测试和测试用例生成应用中有效地减少输入序列生成的时间开销。
817
0
本发明公开了一种基于沉积物地球化学特征识别大洋中脊热液区的方法,本发明通过对沉积物样品进行处理,获取其地球化学组成数据,并计算不同端元组成的沉积物对化学组成的贡献,获得热液来源元素的含量,估计热液来源元素的扩散距离,最后预测调查区热液活动的数量和可能产出的位置。本发明的优点是在大洋中脊热液活动探测中,可以实现活动和非活动热液区的识别,以更准确、方便的确定热液区的位置,具有便捷、高效的特点。
822
0
本发明公开了一种新型化学试验机,包括箱体,所述箱体上端面上固定安装有第一支杆,所述第一支杆上设置有PH测试装置,所述第一支杆上设置有位于所述PH测试装置右侧的取液装置,所述取液装置右侧设置有清洗装置,所述箱体上固定安装有滑道,所述箱体下端壁上固定安装有第二支杆,所述第二支杆上端转动安装有第一转轴,所述第一转轴上固定安装有第一带轮,第二带轮,所述箱体下端壁上固定安装有位于所述第二支杆右侧的第三支杆,所述第三支杆上端固定安装有第一电机,所述第一电机输出轴上固定安装有第三带轮,本次发明的新型化学试验机将部分化学仪器结合起来,使得实验更加的自动化和提升效率。
1180
0
一种危险化学品储存柜,包括柜体,柜体包括若干个储存格,每个储存格上安装有门,门与储存格间安装有与主控装置连接的电子锁,主控装置设有身份认证装置、信息采集装置、输入输出装置、视频监控装置、警报装置、无线数据传输装置,主控装置与远程服务器连接;柜体的储存格均安装有与温度传感器、湿度传感器、烟雾探测器、除湿机芯和冷却器。本发明能够对柜内危险化学品的储存环境进行实时监测和自动调节;实时读取危化品的储存信息以及进出柜体的情况。解决了人工操作时信息管理不及时、不完善、安全监管不到位的问题,有效提高监管水平与工作效率,保障危险化学品的储存及存取安全。
1176
0
本发明提供一种用于化学气相沉积工艺的喷淋头和改善化学气相沉积工艺的均匀性的方法,所述喷淋头用于向衬底提供反应气体,所述喷淋头具有端口,所述端口具有与之对应设置的窗口透明板,所述窗口透明板作为观察通道或测试通道,通过所述窗口透明板对化学气相沉积工艺进行监控,所述窗口透明板与端口之间通有吹扫气体,所述吹扫气体用于防止反应气体在窗口透明板上发生化学反应或物理沉积。本发明使得本领域技术人员能够在化学气相沉积工艺过程中对喷淋头下方的衬底的情况进行实时监控。
934
0
本发明提供提高免疫分析仪检测准确性的方法和提高样本中分析物化学发光免疫检测线性范围的方法和试剂,其改进之处均在于生物素标记抗体和亲和素类物质固定的固相先于吖啶酯或吖啶磺酰胺标记抗体加入到样本中并进行孵育,然后加入吖啶酯或吖啶磺酰胺标记抗体,再进行孵育。这种改进可将较高浓度的分析物校准品的发光量显著地或更好地区分开来,从而提高分析物化学发光免疫检测的线性范围,同时显著降低化学发光背景值,而且也能更加准确地测量临床血清或血浆等样品中分析物的浓度。本发明所述方法和试剂与化学发光免疫分析仪配套使用,可用于肿瘤标记物、传染病、激素类、肝病、急性贫血等的检测。
985
0
本实用新型涉及一种化学实验用温度计,其特点是包括测温杆,以及设置在测温杆上的测温探头,所述测温杆与本体连接,所述本体内设置有芯片,芯片上设置有显示屏,所述芯片与测温探头连接,芯片将温度信号转化并显示在显示屏上,所述测温杆上设置有保护套,所述保护套为一端封闭的长管,其开口端设置有与本体之间通过螺纹连接的螺纹口。所述本体上设置有开关和复位开关。所述测温杆为导热性能较佳的铜管。所述测温杆与测温探头之间填充有导热硅胶。与现有的技术相比,本实用新型提供了一种化学实验用温度计,本实用新型采用电子式测温,测温杆的长度较大,容易测量较深的实验容器内的温度,本实用新型实用可靠,简单实用。
1127
0
本发明的实施例提供了一种电镀化学品监控方法、系统和装置,涉及半导体化学品监控技术领域。通过浓度监控装置和液位探测装置实时监控电镀化学品的浓度数据以及剩余量,使得处理装置可基于监控得到的浓度数据以及剩余量计算得到电镀化学品的目标添加量,并控制调节装置将储液槽中的原液添加至电镀化学品中,且通过流量监控装置监控储液槽中的原液的添加量,并在原液添加量达到目标添加量时,发送信号至处理装置,以使处理装置根据信号控制调节装置停止将储液槽中的原液添加至电镀化学品中,如此,便可实时监控电镀化学品的浓度数据,并根据电镀化学品的浓度变化自动进行添加,效率高,且准确度高。
1225
0
本发明涉及的是化纤设备的技术领域,尤其是一种生产化学纤维用流量计。其主要由进料口、出料口、管道和设置在管道上的流量计组件组成,所述进料口和出料口分别设置在管道的两端;所述流量计组件包括两根U形测量管、电磁监测探头和活动支架,所述两根U形测量管对称设置,所述两根U形测量管的下端均联通管道,所述活动支架分别滑动设置在两根U形测量管上,所述电磁监测探头设置在活动支架的一端。该装置结构简单,采用双U形管式设计,可以有效的对瞬时的大波动流量进行缓冲,通过电磁监测探头进行随时监测,提高了测量的精度和范围,从而保证聚酯反应釜的正常运行,间接的提高了化学纤维的质量。
749
0
本实用新型涉及电化学测试技术领域,具体是一种电化学试片用夹具结构,包括上夹具和下夹具,所述上夹具位于下夹具的正上方,所述上夹具与下夹具之间设置有安装腔,所述上夹具中部设置有连接件,所述连接件中部设置与安装孔,所述安装孔内设置有导电芯棒,所述连接件底部设置绝缘橡胶垫圈,所述下夹具的底部中心处设置有绝缘橡胶座,所述上夹具和下夹具的两侧分别对称设置有上连接板和下连接板,所述上连接板和下连接板之间安装有调节装置。本实用新型结构简单,使用方便,提高了对测试件固定效率的同时,使测试件便于安装拆卸,提高了电化学试片的测试效率。
1069
0
本发明公开一种化学气相沉积法制备Co0.85Se超级电容器材料的方法,其中Co0.85Se超级电容器材料为均匀覆盖在镍网上的纳米膜状结构。具体生长包括:1)硒粉和钴粉磨细混匀后倒入石英舟,放入化学气相沉积反应炉石英管中;2)将泡沫镍网放在气流下游靠近石英管管口的位置;3)通入氩气排尽炉中空气,停止通气,高温加热一段时间后,一定流量氩气通入石英管保温,最后炉子自然冷却至室温;4)取出泡沫镍,用去离子水和乙醇反复清洗,干燥,即得。本发明操作简单,不需要复杂设备,Co0.85Se均匀覆盖在镍网上,可大面积制备。合成的Co0.85Se纳米材料电极在三电极体系下测试,在1A/g的电流密度下表现出4462F/g的高比容量,在20A/g的高电流下经过5000次循环充放电后,仍能保持80%以上的比电容值,电荷转移阻抗为0.82?Ω/cm2。
824
0
设有工艺通道孔的万吨化学品船分段,包括船体底部、舭部、舱壁、甲板层、分隔甲板、半纵隔壁和工艺通道孔,船体底部通过焊接与舭部安装在一起,舭部通过焊接与舱壁安装在一起,半纵隔壁安装在船体底部和甲板层的右侧;舱壁上方安装有甲板层,在船体底部和甲板层之间还有一层分隔甲板,在船体底部和舱壁上开有工艺通道孔。设有工艺通道孔的万吨化学品船分段弥补了因不能设置人孔盖而给分段内施工来回穿梭带来的极大的不便,而且满足各个船级社的防护等级要求,大大方便了工人的安装操作,减少施工和检验人员的迂回路线,提高工作效率,应该具有广阔的应用前景。
1058
0
本发明涉及化学领域,一种真空中化学反应方法,真空反应及测试装置包括反应腔、观察窗、液体容器、直线驱动器、冷却杆、样品、样品座、样品台、金属杆、气体进口、真空泵I、波纹管I、门阀、波纹管II、测试腔、样品架、传送杆、真空泵II和测试电路,冷却杆使得通入真空环境中的气态试剂分子冷冻凝固,在真空环境中首先对气态的试剂分子进行预先冷冻,并采用升温的方法使得试剂融化后滴在样品表面以进行化学反应,避免反应腔内的真空度突然变差,在需要液态试剂参与的真空反应中无需将固态样品转移到真空环境外或是对真空腔内通入保护气体,避免样品周围的真空度突然变差,进行化学反应的操作步骤简单且不会引入杂质。
896
0
本实用新型涉及环保设备领域,具体涉及一种化学废液及油污水处理装置。一种化学废液及油污水处理装置,包括固体物分离框池、二级油污吸附池、三级厌氧油污吸附池、四级微小悬浮吸附颗粒填料吸附池、五级检查循环利用池;所述固体物分离框池内设置若干X形状相互相交的网格框,第一出水管连接二级油污吸附池,所述二级油污吸附池设置胶装吸附物层和沉淀水层;所述沉淀水层中设置S形状或Z字形状第一引流管,所述三级厌氧油污吸附池顶部铺设吸油脂悬浮颗粒剂层或吸附垫,吸油脂悬浮颗粒剂层或吸附垫底部设置第一引流管朝上部,所述四级微小悬浮吸附颗粒填料吸附池与五级检查循环利用池之间设置净水排出管。
1208
0
本发明公开了一种融合深度强化学习和BBR协议的自适应拥塞控制方法及系统,涉及网络传输控制领域;包括以下模块:netlink模块、强化学习智能体、底层拥塞控制模块、网络状态监测模块和速率调整模块;其中netlink模块用于用户态和内核态的通信;强化学习智能体用于接收这一动作的状态和奖励,并给出下一动作,在这里动作对应的是β值;底层拥塞控制模块采用的是BBR算法,它在收到β值后,根据公式计算出带宽值B,并发送给速率调整模块;网络状态监测模块提取ACK包里的有用的网络信息,并传递给强化学习智能体;速率调整模块根据B值调整发送速率。对比传统的拥塞控制方法需要手工的调整以适应不同场景的现象,我们的方法能够实现自适应的功能。
872
0
本实用新型为一种二合一尿液成分检测仪及试剂条,二合一尿液成分检测仪,包括处理器、人机交互模块、干化学检测模块、电化学检测模块和电源模块,所述处理器分别与人机交互模块、干化学检测模块和电化学检测模块相连,所述干化学检测模块设于二合一试剂条插槽侧面,所述电化学检测模块设于二合一试剂条插槽底部。二合一试剂条包括干化学测试部、电化学测试部、尿液滴入口、尿液导流通路和电化学接口。本实用新型的优点是:干化学检测模块和电化学检测模块均设置在二合一试剂条插槽处,能够同时进行干化学和电化学检测,检测效率高;将干化学测试部和电化学测试部整合在同一试剂条上,只需采集一次尿液即可完成尿液成分的定性分析和定量分析。
1096
0
本发明是一种印染方法,特别涉及一种用于去除化学浆和低聚物的坯布染色生产方法。按以下步骤进行:选取样布→前处理退浆→坯布预定型→白坯烧毛→复配助剂配方设计、配制及用量→匹样缸减量→染色配方设计→匹样缸染色→烘干定型→色坯烧毛→水洗烘干→上油定型→后整理轧光→后整理罐蒸→成品检验。用于去除化学浆和低聚物的坯布染色生产方法提高染色稳定性,能有效提高一次成功率,减少染色回修率,节能减排效果明显,且生产加工后织物的手感回弹性、悬垂性、柔软性效果俱佳,各种质量内在指标等都能满足客户的要求。
1240
0
本发明公开了一种博弈对话中基于对话历史和强化学习的多轮对话方法,属于智能体和强化学习模型领域。该方法包括如下步骤:首先将多轮对话作为一个有限重复博弈的过程,存储已经结束的完整多轮对话,构建既往对话历史信息库;然后在一个新的多轮对话中,基于记忆网络构建对手行动估计模型,用当前对话已经进行的轮次去检索对话历史信息库,通过多步估计产生对手下一步策略的估计向量;最后基于编码‑解码模型融合当前对话的信息和估计向量,做出下一步的应答。本发明在多轮对话过程中,将既往对话历史的估计向量和当前对话历史的回应向量进行融合,能够更充分地利用了历史信息,使得对话机器人(智能体)具备更高的适应性、做出更好的应答。
800
0
本发明公开了一种基于图神经网络强化学习的机器人自主控制方法。本发明步骤如下:1、根据环境反馈给机器人传感器的信息和机器人的物理结构,组建机器人的特征图。2、将得到的特征图输入到图神经网络,在训练阶段使用机器人感知到的监督信息对图神经网络进行训练。3、使用训练完成的图神经网络对感知状态信息进行处理,得到更新后的机器人状态信息,预测下一时刻机器人的状态信息。4、使用建立起来的环境模型,以及模型预测控制算法,对未来一步机器人动作进行决策。本发明使用基于图网络的强化学习模型,成功地完成了之前强化学习并不能很好完成的动作提升了机器人自主控制的稳定性和可靠性,使得机器人自主控制更加便于实际应用。
1068
0
本发明的公开了一种基于神经元覆盖率的深度强化学习鲁棒训练方法和装置,包括以下步骤:(1)搭建智能驾驶环境,从智能驾驶环境中采集状态数据对深度强化学习模型训练,直到达到设定回报值为止;(2)利用训练好的深度强化学习模型在环境中运行,提取多轮的状态动作对;(3)构建用于根据历史状态动作对序列预测未来时刻状态动作对序列的预测器和用于对状态动作对进行质量分类的分类器,并利用提取的状态动作对训练预测器和分类器;(4)依据定义的对抗采样策略,根据状态动作对质量采样状态动作对并进行深度强化学习模型的再训练,以提高深度强化学习模型的鲁棒性。
1254
0
本发明公开一种基于分层强化学习的四足机器人运动规划方法,该方法通过构建基于深度强化学习的上层行为决策控制器以及基于模型预测控制的下层运动执行控制器;对于上层的深度强化学习网络,基于SAC算法设计四足机器人的状态更新网络、动作执行网络以及奖励函数等,结合机器人周围的环境高度图信息输出对应的行为控制参数;对于下层执行控制器中的模型预测控制器,通过求解基于上层输入的控制参数二次规划方程组来获取对应的控制指令。该分层控制框架结合了深度强化学习与模型预测控制的优势,使四足机器人能够根据当前机身状态以及地形环境做出更安全可靠的行为模式,保持机身姿态平稳,从而有效规避风险,实现在复杂地形下的有效运动轨迹规划。
1153
0
本发明公开了一种计算材料高通量电化学磨蚀数据处理方法,包括:输入电化学磨蚀试验的基本参数,所述基本参数包括测试材料基本参数及测试基本参数;输入电化学磨蚀试验的试验结果相关数据,所述试验结果相关数据包括腐蚀试验结果相关数据和磨损试验结果相关数据;对所述电化学磨蚀试验的基本参数及电化学磨蚀试验的试验结果相关数据进行处理,从而获得电化学磨蚀试验的计算结果。利用本发明能准确、高效、简单、便捷地挖掘和解析材料电化学磨蚀数据,从而利于更有效地量化评价材料在磨损环境下的性能,为后续的数据融合提供可靠的数据基础。
1095
0
本发明公开了一种基于强化学习的深度学习模型安全性保障压缩方法与装置,包括:(1)使用图网络的方式将深度学习模型建模成图网络;(2)采用GCN提取图网络的嵌入向量;(3)将图网络每个节点的当前嵌入向量作为强化学习的环境状态,采用强化学习预测基于环境状态的动作值,并依据动作值实现每个节点的嵌入向量的修剪,直到所有节点的嵌入向量修剪完成,实现深度学习模型的一轮压缩;(4)根据经过一轮压缩后的模型对样本数据的预测结果计算错误率和安全性;(5)根据错误率和安全性计算采用强化学习进行一轮深度学习模型压缩的回报值;(6)基于回报值,重复步骤(3)~步骤(5),直到迭代终止,实现深度学习模型的压缩。
1111
0
本发明公开了一种近化学计量比铌酸锂晶体的生长方法,其经过步骤(1)~(5)后得到近化学计量比铌酸锂晶体,且在步骤(3)中加入掺入量为0.3~2.0mol.%的Nd2O3或Er2O3,在步骤(4)中对Pt坩埚进行密封Pt坩埚,在步骤(5)中用坩埚下降法生长晶体,生长晶体的参数为:炉体温度为1250~1350℃,接种温度为1100~1200℃,温度梯度为80~120℃,下降速度为1~3mm/h,待晶体生长结束后,以20~80℃/h下降炉温至室温;这样能得到较大和质量较高的晶体,铌酸锂晶体中-OH的量也较低,测定得到本发明得到的铌酸锂晶体中的稀土金属离子Nd和Er具有较长的荧光寿命,从具体实施结果比较,本发明得到的晶体,掺杂其中的稀土金属离子Nd和Er的荧光寿命比现有生长方法得到的晶体掺杂其中的Nd和Er的荧光寿命长3倍多。
北方有色为您提供最新的浙江有色金属理论与应用信息,涵盖发明专利、权利要求、说明书、技术领域、背景技术、实用新型内容及具体实施方式等有色技术内容。打造最具专业性的有色金属技术理论与应用平台!