1065
0
本发明提出了一种基于深度强化学习的集群空调负荷差异化调控方法。包括:构建空调负荷基础模型,基于LSTM神经网络预测用户用能需求,模拟单个用户行为特性;根据用户行为模拟,引入用能行为相似度来量化用户差异化用能需求的切合程度;建立差异化用能需求的集群空调负荷调控模型;利用基于DDQN的集群空调负荷差异化调控算法优化控制策略。本发明通过建立负荷调控模型、搭建神经网络与深度学习网络,切实考虑与量化用户差异用能需求,设计了基于DDQN的差异化负荷调控优化方法,解决了既降低用户用能成本又满足各用户的差异化舒适需求的问题,并有效降低了峰谷差。为节约能源、需求侧管理的精细化以及制定用户个性化用能策略方面提供了一种可行的方法。
980
0
本发明公开了带动作集合的强化学习干扰波形生成、评价方法及装置,建立干扰波形库;构建干扰波形决策网络,包括策略网络和价值网络;探索阶段使用跟踪算法进行干扰,填充经验池;从经验池中随机选取一组数据;根据当前通信状态的干扰动作,通过策略网络预测下一时刻相应干扰动作;根据策略网络输出的干扰动作,生成离散化干扰动作,从干扰波形库中选取干扰动作,并结合策略网络输出的干扰动作,共同输入价值网络,得到价值最高的干扰动作作为实际的干扰动作;再进行干扰效果评价。针对干扰动作和干扰参数庞大的情况,对通信方的抗干扰行为进行学习,解决了现有干扰波形算法收敛速度慢、准确率不高的问题,实现了精准干扰。
918
0
本发明公开了一种基于神经网络和强化学习的混合能量管理方法,属于自动化技术领域。本发明采用模糊控制器的输出作为神经网络初始的离线数据集来进行训练,应用学习得到的神经网络产生新的数据加入至原有的数据集中,并反复更迭这两个过程。针对每个时刻的状态,采用训练之后的神经网络来预测当前状态在采取相应动作之后转移到的下一状态,根据累计奖励最大化的原则选择一定长度的最优动作序列,选取动作序列的第一个动作作为当前状态的最优控制动作。利用该方法可有效减少能量的浪费并且通过超级电容辅助锂电池供电,减少了锂电池的使用,达到了延长锂电池寿命的目标。
1233
0
一种用于塑料表面化学镀铜的活化液,1L该溶液由下述质量配比的原料组成:硝酸银3.0g~15g,17%~28%氨水40g~120g,可溶性支链淀粉0.5g~14g,聚乙二醇0.001g~0.3g;酒石酸钾钠 6g~30g。其中硝酸银提供银源,氨水作为络合剂,可溶性支链淀粉作为稳定剂,聚乙二醇作为保护剂防止银颗粒的团聚等,酒石酸钾钠作为还原剂。本发明利用该活化液代替钯活化液实现塑料表面镀铜,且活化处理后镀铜,进行粘结强度测试良好,无漏镀现象,镀膜层均匀。
895
0
本发明公开了一种化学教学用可搅拌试剂瓶,包括试剂瓶主体,所述试剂瓶主体由瓶体、设置在瓶体顶部的瓶盖和设置在瓶体底部的瓶底构成,所述瓶体的顶部设有瓶颈,且所述瓶颈嵌入设置于所述瓶体中,所述瓶盖的顶部设有电池槽和纽扣电池,且所述电池槽嵌入设置于所述瓶盖中,在搅拌子的下表面设置有呈半球形的凸起,以便于液滴的汇聚,在搅拌杆取出时,残留在搅拌子上的液体能够集中在凸起上然后滴落,进而减少药物浪费,本设备还在瓶体内部添加了温度计,利用温度计进行测量温度,使得教师能够准确的掌握试剂的温度,而且成本低,操作简单,值得大力推广。
1229
0
本发明为基于强化学习和模仿学习的智能补货决策方法及存储介质,包括MDP设计模块,模仿学习建模模块以及智能决策模块;模仿学习建模模块包括行为克隆模块以及对抗式模仿学习模块;智能决策模块包括基础策略以及探索策略。本发明结合行为克隆和对抗式模仿学习两种方式,通过行为克隆应对简单业务场景,使智能体的补货决策能力达到专家平均水平,通过对抗式模仿学习构建对抗奖励函数应对复杂业务场景,超越专家决策水平。本发明有效解决现有补货系统对输入数据依赖度较高,模型稳定性低、泛化能力弱的问题,并避免了黑盒预测,拥有更好的商业落地能力以及业务拓展能力。
860
0
本发明涉及一种深层土壤中无机物和有机物的原位实时光学检测装置,所述检测装置包括深层土壤原位实时探测探针和深层土壤光谱分析仪,所述检测装置对可见光谱和红外光谱分别进行分析,为解决无机和有机物等所有种类的污染物放在一起检测提供了保障,通过光学可见光的发射光谱和红外的吸收光谱,实现非靶向的、原位实时的土壤污染物检测。本发明的突破点在于整合了对土壤中无机物和有机物的进行原位实时检测化验,通过结合金属元素的可见光发射光谱和有机物的红外吸收光谱判断土壤的污染情况。本发明为绿色检测技术,检测过程无副产品、无额外化学反应物生成。
1105
0
本发明公开了一种强化学习多代理合作任务下的代理贡献分配的方法,包括:每个代理独立观测环境状态,输入各自的策略网络,得到各自的动作决策;在模拟环境执行各代理的动作,环境反馈的全局奖励;将各代理之间的交互建模为一张无向图,使用此图计算出每个代理的贡献权值;使用各代理的贡献权值计算各代理的局部奖励,使用此局部奖励对每个代理各自的策略网络进行训练。该方法能够对多个代理与环境交互后的结果(奖励)进行贡献分配,能够起到可信度赋值的效果,给训练算法提供更加精准的奖励描述,帮助多代理系统在合作任务上学习到更好的策略。
874
0
一种用于人类行为识别的深度联合结构化和结构化学习的方法,包括以下步骤:1)构造联合结构和结构公式化;2)使用空间网络从图像中的人体区域提取深层卷积神经网络特征,将空间网络的fc6层的输出作为深度特征,使用梯度直方图和光流直方图特征来进一步增强特征表示;CNN,HOG和HOF特征被连接以表示图像中的个人行为或交互关系,使用这种特征为每个数据集训练两个线性支持向量机分类器,使用组合特征来计算公式(1)中的联合特征;3)训练模型的参数;4)训练和预测中的相关推理,在训练的每次迭代期间,针对每个训练示例解决损失增强推理。本发明适用于多个行为类别的图像、能够识别交互行为。
1150
0
一种带有气体扩散电极的实验用电化学反应器,所述反应器包括一个气体腔室和两个液体腔室,两个液体腔室分为工作室腔室和辅助室腔室,且所述气体腔室和所述工作室腔室均为透明腔室,且各自的体积为10~1000mL;气体腔室上部设有气体导出接嘴和气体导入管;气体扩散电极组件密封夹设于气体腔室与工作室腔室之间;所述工作室腔室的顶部和所述辅助室腔室的顶部均开口,依次放置参比电极组件和对电极;所述参比电极组件包括参比电极、鲁金毛细管和/或盐桥;另外,所述工作室腔室内的底部放置一搅拌转子,用于对其内部的电解液进行搅拌。本实用新型的结构简单、拆装简便,实验时可实时观测、监控实验进程,以及搅拌电解液增强其传质过程。
本发明公开了一种单层二硫化钼的化学气相沉积制备方法及其在薄膜晶体管中的应用;本发明以三氧化钼和硫单质作为反应物,在三氧化钼中加入氢氧化钠,生长得到了质量更好的单层MoS2,晶畴大于100μm,且不局限于一种或者几种衬底材料,在多种单晶和多晶衬底材料上均可稳定生长,本发明还将制备出的单层MoS2应用于薄膜场效应晶体管中,并对薄膜晶体管进行电学测试,获得转移特性曲线,计算出迁移率达121cm2V‑1s‑1,证明该方法制备出的单层MoS2符合半导体器件的应用需求。
1018
0
本发明公开了一种基于强化学习防御渗透攻击的方法及装置、电子设备,该方法包括:(1)将渗透测试过程建模为马尔可夫决策过程,其中所述马尔可夫决策过程包括状态、动作、奖励值;(2)训练智能体,其中所述智能体作为渗透攻击方,训练目标为生成当前最优渗透攻击路径过程;(3)将网络环境中敏感主机的价值进行符号翻转,并设置获得目标敏感主机的Root权限时渗透攻击的回合不结束,将渗透攻击的回合的结束条件修改为回合中训练步数达到了预定阈值;(4)将对主机价值的修改更新到步骤(1)的奖励值中,利用训练好的智能体对步骤(3)中的网络环境进行防御训练,重复防御训练的过程直至训练回合数达到预定阈值,得到防御渗透攻击的策略。
974
0
本实用新型公开了一种化学气相淀积反应室用气体注入环,包括气体注入环本体、进气旋钮和反应室本体,所述气体注入环本体的内环设置有调节结构,所述调节结构包括喷气管、翻转轴、锁紧螺母、翻转固定座、进气口和波纹管,所述气体注入环本体的内环均匀连通有喷气管,所述喷气管与气体注入环本体之间设置有翻转固定座,本实用新型通过在喷气管的顶端设置有翻转轴,喷气管与翻转轴固定,利用翻转轴可在翻转固定座上进行伸缩,伸缩完成后并利用两侧锁紧螺母进行锁紧,在翻转的同时,由于采用波纹管连接喷气管和气体注入环本体,因此可将喷气管随意翻转,不会造成气体测出的情况,继而改变喷气角度,提升喷气均匀性。
1088
0
本发明提供一种致密金纳米颗粒的快速化学镀膜方法及其生产设备,包括以下步骤:以二氧化硅颗粒为镀膜载体,进行表面羧基化处理;在氯金酸溶液中投加还原剂、氨基硅烷偶联剂,制备氨基金纳米颗粒溶胶B;通过NHS/EDC的偶联作用,将氨基金纳米颗粒溶胶B嫁接到羧基二氧化硅颗粒A表面,形成含致密种子生长层的颗粒C;在颗粒C中加入还原剂和核黄素介体,缓慢注入氯金酸溶液,反应0.5‑1h后,经真空干燥后进行高温隔氧煅烧。本发明可以获得表面金膜层粒径为5‑40nm的二氧化硅颗粒,对汞的富集和脱附效果好;采用金膜富集‑冷原子法测定汞的回收率可以达到96%以上,循环次数达到3500次以上,产品性能稳定,表面金膜颗粒均匀。
960
0
本发明涉及新型农药检测技术领域,为解决现有农作物残留农药检测方法存在的分析时间长、能耗高、重现性差、回收率和灵敏度低的问题,提供了一种铁皮石斛中残留农药的检测方法,包括以下步骤:(1)将生物质吸附剂填装固相萃取小柱并活化;(2)将铁皮石斛样品溶液离心,淋洗固相萃取小柱,得洗脱液;(3)离心过滤,采用超高效液相色谱串联四级杆飞行时间质谱仪分析检测。本发明将微波化学合成法与微型固相萃取方法结合应用于本项工作,节省了分析时间,减少了能量消耗,可靠,准确,重现性好,回收率高,提取效率高效且灵敏度显著增加。
1175
0
一种模块化储能单元及化学储能电站,模块化储能单元集成了组串式PCS、电池包单元、BMS单元、EMS单元、温控单元、消防单元、交直流配电单元、远程监控单元,所述BMS单元和EMS单元分别与组串式PCS相连,所述组串式PCS的直流侧无需汇流,每个电池包单元直接接入组串式PCS,组成一个完整的、独立的模块化储能单元,所述组串式PCS的交流侧无需汇流,所述组串式PCS的交流测接入交直流配电单元,单个模块化储能单元可直接并网运行。本专利解决了集中式PCS的直流侧并联环流和容量损失、热失控无法有效灭火、系统充放电效率低、BMS多级管理复杂、系统成本高等缺点。
787
0
本实用新型公开了一种用于原位化学氧化的土壤修复系统,包括药剂制成搅拌桶、增压泵、电磁阀、原位投放井和监测井,所述药剂制成搅拌桶内部的正中通过连接轴杆固定安装有三组搅拌桨,所述药剂制成搅拌桶的顶部固定安装有入药口,所述电动机的输出端通过皮带轮组件与连接轴杆转动连接,所述药剂制成搅拌桶的顶部固定安装有增压泵,所述输药管上依次固定安装有电磁阀与计量管,所述药剂制成搅拌桶的正面固定安装有控制面板与警报器,所述药剂制成搅拌桶另一侧的底部固定安装有原位投放井;本实用新型通过药剂制成搅拌桶与入药口与搅拌桨与电动机,实现了修复系统自动原位自动投放药液,提高修复系统的实用性。
974
0
一种在线检测微波反应装置,包含有微波炉(6)和反应器(5),其特征是温控器(7)与微波炉(6)相连,反应器(5)内的温度探头(4)连接温控器(7),反应器(5)有输液管与检测器(2)相连,检测器(2)与微机(1)连接,恒流泵(3)由输液管分别与检测器(2)和反应器(5)连接。本实用新型适用于蛋白合成、氨基酸合成、MAILLARD REACTION反应的食品添加剂合成、药物化学、食品化学等具有特征吸收的化学反应的在线检测,具有反应能连续进行、在线检测反应、温控精度高、能对反应进行定量研究、图谱分析带来方便等优点。
本发明公开了一种电位分辨双肿瘤标志物的电化学发光免疫传感器的制备方法及其应用,特点是包括将氧化石墨烯进行羧基化得到羧基化的氧化石墨烯溶液,然后依次加入偶联试剂、anti?CA1252和Ru?NH2得到第一信号单元的步骤;将氮化碳薄膜溶液加入胶体金溶液中得到AuNPs/g?C3N4溶液;然后加入anti?SCCA2溶液得第二信号单元的步骤;最后将金电极插入anti?CA1251和anti?SCCA1的混合溶液中,然后孵育在含有CA125和SCCA的待测混合溶液中,再置于含有第一信号单元和第二信号单元的混合溶液中孵育即可,优点是操作简单,特异性强,灵敏度和准确率高。
本发明提供了一种基于强化学习的大型电动汽车充电站的充电优化调度方法。首先在当下实际的电动汽车充电站采集数据,并根据状态空间、动作空间及目标函数的定义对采集的数据进行处理,然后运用处理后的数据进行神经网络模型的训练及测试,在保证所用模型的有效性的前提下,将充电站的实际情况作为模型的输入,以模型的输出作为电动汽车充电的参考策略进行实际的充电操作。有效了解决了充电环境下的不确定性问题,而且本发明的方法并不受限于充电站的规模以及充电站达到的电动汽车的数量,训练所得的模型更具有通用性,适用于不同规模下的电动汽车充电站。为电动汽车充电站解决充电调度模型的通用性以及最大化能源和经济效益问题。
808
0
本发明属于软体机器人领域,具体涉及一种基于化学放能反应驱动的仿青蛙水下软体机器人,包括机器人主体和腿部驱动组件,所述腿部驱动组件包括主腿管、柔性弹力隔膜、伸缩腿管、仿生伞蹼、放能激励装置和放能原料储放装置,放能原料储放装置用以为反应室输送放能反应原料,放能激励装置用以激励反应室内的原料进行放能反应以推动柔性弹力隔膜鼓起。本发明的机器人具有结构较简单、环境适应性高、驱动简单等优点,且能够进行向前的运动。该设计的发明,有助于解决仿生软体机器人驱动效率低、运动表现速度慢的领域缺点,与此同时,可实现迅速启动、水下监测等功能。
1160
0
本申请提供了一种血泵性能检测装置,其包括储血件、机械性能检测组件和生化性能检测组件。机械性能检测组件包括血泵、输血管路和机械检测件,储血件与血泵通过输血管路连通且构成循环通路,检测件设于输血管路上,用于检测血泵的机械性能。生化性能检测组件包括输送泵、离心机以及生化分析仪,输送泵同时与储血件以及离心机连通,用于将储血件内的血液引入离心机;生化分析仪与离心机连通,用于测试被离心机离心分离后的血液中的化学成分。该检测装置将机械性能和生理性能的测试结合起来,实时同步地测量血泵的综合性能,提高了测量效率,有利于机械性能和生理性能间影响规律的发现,提高血泵综合性能检测结果的准确性。
962
0
本实用新型公开了一种化学机械平坦化设备,包括研磨垫,设于旋转台上;研磨头,用于带动晶圆在研磨垫上旋转以研磨晶圆表面;研磨液输送臂,包括带有出口的研磨液输送管,用于向研磨垫上输送研磨液;还包括,冷却单元,用于降低研磨液输送管内研磨液的温度;加热单元,用于升高研磨液输送管内研磨液的温度;调控单元,用于至少监测研磨垫的温度和研磨液输送管内研磨液的温度,以通过冷却单元和/加热单元的调节,使得研磨垫的温度和研磨液输送管出口处的研磨液温度趋于相同。本实用新型中研磨液温度可以快速升降双向切换;降低能耗;提高生产效率。
906
0
本发明涉及一种通过分析脑瘤患者的磁共振图像得到脑瘤MIB-1指数范围的检测方法,包括步骤:采集脑瘤患者的磁共振图像,构造病变区域图像训练样本;提取病变区域图像训练样本的图像特征,根据提取的病变区域图像训练样本的图像特征,训练得到支持向量机模型;构造病变区域图像检测样本,提取病变区域图像检测样本的图像特征;根据病变区域图像检测样本的图像特征,用支持向量机模型检测并获取该病变区域图像检测样本的MIB-1指数所处的范围。本发明克服了现有技术中只能通过手术获得脑瘤病理组织后利用免疫组织化学检测MIB-1指数的缺陷,避免了在免疫组织化学检测中引入的检测者主观思维及标准化不足的问题。
986
0
本发明涉及化学分析检测技术领域,尤其是涉及一种基于肽图的单抗糖型检测方法。基于肽图的单抗糖型检测方法,包括如下步骤:(a)采用超高压液相色谱‑质谱采集肽图试样的质谱信号,获取不同糖型修饰的糖肽的分子量;(b)对照含有各种糖型修饰的糖肽的分子量的数据库,确定所述不同糖型修饰的糖肽所对应的糖型;所述肽图试样的制备包括:在液相环境中,采用变性剂和还原剂对单抗样品进行变性处理;再进行烷基化处理和酶切反应,然后终止酶切反应。本发明基于单抗样品的肽图分析单抗的糖型,解决了现有技术无法兼顾糖型分析效率和分析精度的技术问题。
836
0
本发明公开了一种检测工作中工业润滑油中残留抗氧化剂含量的方法,分别取等体积、同型号的未使用和工作中工业润滑油样品,加入溶有支持电解质的有机溶剂和入石英砂,盖上塞子振荡、静置,待混合体系上部形成清澈的分析液后,插入三电极体系,以电化学检测方法检测记录抗氧化剂的电化学响应曲线,得到未使用和工作中工业润滑油中抗氧化剂的电化学响应峰电流值Ipn和Ipu,计算得到工作中工业润滑油中残留抗氧化剂的相对含量RUL%=Ipn/Ipu×100%。本发明通过电化学技术能进行及时快速的监测使用中工业润滑油残留原始抗氧化剂的含量,预测润滑油的剩余使用寿命,及时换油,延长机械设备的使用寿命,检测下限低,检测结果准确可靠。
1188
0
本发明公开一种用于电化学重金属污水处理系统的自动控制方法,包括:获取第一处理池对应重金属含量降低到达标量的时间t1;获取第二处理池对应重金属含量降低到达标量的时间t2;获取第三处理池对应重金属含量降低到达标量的时间t3;建立时间拟合函数T(t,m),时间拟合函数T(t,m)给出m含量的污水处理时间与一个单位的含重金属污水中重金属被附加剂反应完全的时间的映射关系,测量一个周期中等待处理的污水的含量m,将t1、t2、t3分别与m代入到时间拟合函数T(t,m),计算对应m含量的污水处理时间T1、T2、T3;然后通过控制器编程设置第一电磁阀的开启时间为:T0+T1+合理周转时间;设置第二电磁阀的开启时间T0+T1+T2+合理周转时间;设置第三电磁阀的开启时间T0+T1+T2+T3+合理周转时间。
811
0
本发明公开了一种多代理强化学习合作任务下的奖励函数建模方法,包括:每个代理独立观测环境状态,输入各自的策略网络,得到各自的动作决策;在模拟环境执行各代理的动作,得到每个代理各自的奖励;将各代理之间的交互建模为一张无向图,使用此图计算出每个代理的奖励的加权总和;使用加权后的奖励训练代理的策略网络。该方法能够对多个代理与环境交互后的结果进行整合,同时建模出的无向图能够起到可信度赋值的效果,给训练算法提供更加精准的奖励描述,帮助多代理系统在合作任务上学习到更好的策略。
762
0
一种基于强化学习的Baxter机械臂轨迹跟踪控制方法,首先对Baxter机械臂前三个关节进行系统辨识,确定其连续时间的状态空间方程并将之离散化,得到离散的状态空间模型,该步骤仅用于在仿真时获取机器人前三个关节下一时刻的位置和速度跟踪误差;首先给定机械臂前三个关节一个初始状态,按照固定的采样时间测量并记录三个关节下一时刻的位置和速度跟踪误差,对采集到的位置和速度信息预处理之后使用递归的最小二乘法计算最优控制策略所对应的权值矩阵H,最后根据权值矩阵计算出下一时刻的最优反馈控制。本发明自动适应模型改变带来的模型误差,提高机器人在日常使用中的准确性。
918
0
本发明通过将强化学习中的动作,通过词向量嵌入的方式,转化为具有内在联系的向量表示,以此作为预测器,并结合给定目标的环境特征,计算其到达目标状态的规划路径,从而将稀疏环境奖励转化为密集奖励的形式。同时,通过采用规划器和执行器对抗训练的方式,一定程度上解决了局部最优问题。
北方有色为您提供最新的浙江有色金属理论与应用信息,涵盖发明专利、权利要求、说明书、技术领域、背景技术、实用新型内容及具体实施方式等有色技术内容。打造最具专业性的有色金属技术理论与应用平台!