江苏南京有色金属化学分析技术理论与应用

基于记忆网络的深度强化学习交通信号控制方法 1040     

 0

本发明公开了一种基于记忆网络的深度强化学习交通信号控制方法，包括：1、建立基于DQN算法的交通信号灯控制主网络和目标值网络；主网络将t时刻状态值st输入LSTM中得到t+1时刻预测状态值合并st和并输入全连接网络，得到预测Q值的最大值和对应动作2、初始化算法参数，采集路况信息建立状态值st；3、将st输入主网络得到预测Q值取最大值的动作采用1‑ε策略选择动作at；4、执行动作at并计算奖励rt和状态st+1；5、在经验池中随机抽样B个记录，通过最小化损失函数训练主网络参数；6、定时更新目标值网络参数，根据当前路况更新st，跳转至步骤3继续执行。该方法根据当前路况以及对当前路况的预测来计算Q值，能够更精确地对交通信号进行控制。

三维细胞纸芯片传感器及在细菌脂多糖检测中的应用 1114     

 0

本发明公开了一种三维细胞纸芯片传感器及在细菌脂多糖检测中的应用，属于分析检测技术领域。本发明通过将喷蜡打印技术、丝网印刷技术、细胞三维培养技术和电化学传感技术相结合构建一种新型三维细胞纸芯片传感器，同时具备纸芯片的低成本和便携式、细胞三维培养的真实性、电化学分析的高灵敏性和快速性，能准确地进行低含量脂多糖的检测。本发明还公开了该三维细胞纸芯片传感器的制备方法以及应用，可实现对食源性致病菌的间接检测及毒力判定，具有灵敏、高效、微型化等优点，并且价格低廉，适用于已知致病菌的检测及未知致病菌的毒力判定。

基于强化学习的无线局域网调制编码自适应选择方法及无线设备 1179     

 0

本发明提出基于强化学习的无线局域网调制编码自适应选择方法及无线设备，该方法在无线设备内训练一张关于当前链路信噪比SNR和所有支持的MCS索引值的Q值表；在训练Q值表的过程中，无线设备根据学习策略在Q表中选择MCS索引值，并根据搭建的外部环境反馈的吞吐量和丢包率计算奖励值，通过更新策略更新Q表。最终训练完成的Q表可获得特定SNR下一定丢包率范围内吞吐量最大的MCS索引值，无线设备实时通过带宽测试得到无线局域网络的吞吐量和丢包率数据，然后自适应地从训练好的Q值表中选择预设丢包率范围内预计获得最大网络吞吐量的最优MCS索引值，并执行相应调制编码方案，保证了传输的可靠性和有效性，同时避免了抽样探测带来的网络性能浪费问题。

基于深度强化学习的智慧家庭能量管理方法及系统 803     

 0

本发明公开了一种基于深度强化学习的智慧家庭能量管理方法及系统，方法的设计步骤如下：将在无建筑热动力学模型和维持室内温度在舒适范围的情况下最小化智慧家庭能量成本这一能量管理问题建模为马尔可夫决策过程并设计相应的环境状态、行为、奖励函数；利用深度确定性策略梯度算法训练出不同环境状态下能量存储系统或/和可控负载的最优行为，进而最大化奖励函数；将训练好的深度神经网络参数定期拷贝至智慧家庭能量管理系统本地的深度神经网络，用于实际性能测试。本发明提出的方法无需知晓任何不确定性系统参数的先验信息和建筑热动力学模型，且采用本地测试与云端训练相结合的在线学习模式来应对环境变化可能带来的性能降级问题。

应力场与化学场耦合的试验装置 1001     

 0

本发明提供一种应力场与化学场耦合的试验装置，包括：上底板、下底板，所述上底板、下底板的左右两端分别通过拉杆连接；拉杆的一端固定在下底板上，另一端穿过上底板后在其端部固定有盖帽；在盖帽与上底板之间的拉杆上分别套有弹簧，用于测试耐受力的实验试件放置在上底板、下底板之间。本装置通过这两个破坏因素对产品的耐受力进行测试，从而能够更加精确地测试出产品结构的耐受力，进而根据测试的结果能够更好地指导工作。

复合有机污染场地原位热强化化学氧化还原耦合修复方法 1204     

 0

本发明公开了复合有机污染场地原位热强化化学氧化还原耦合修复方法，包括：S1、确定污染处理边界，然后设置隔离墙；根据土壤中有机污染物的种类和含量确定修复药剂的用量；最后调节土壤的pH和含水率；S2、在污染处理边界内布设注药井、加热井和监测井；S3、向注药井内通入修复药剂，向加热井内通入热蒸汽；S4、利用监测井内的监测设备监测复合有机污染场地修复效果；本发明设计合理，复合有机污染场地修复效果显著，适宜推广使用。

牛奶中氧四环素残留的比色检测方法 1147     

 0

一种牛奶中氧四环素残留的比色检测方法，属于分析化学技术领域。本发明首先将氧四环素适体(APT_OTC)与生物素标记的探针CP_OTC退火杂交形成双链DNA修饰在链霉亲和素偶联磁珠(SDB)表面；探针SP_OTC和HP_OTC修饰于金纳米颗粒(AuNPs)表面。当体系中存在氧四环素(OTC)时，OTC与APT_OTC的特异性结合并使APT_OTC脱离SDB，紧接着CP_OTC则与AuNPs修饰的HP_OTC杂交形成SDB‑AuNPs体系；AuNPs表面修饰的SP_OTC结合SAv‑HRP后可催化TMB‑H₂O₂溶液变色，利用370nm处紫外吸光度的变化与氧四环素浓度梯度的关系，绘制标准曲线，通过测量待测样品370nm处紫外吸光度，即可实现氧四环素浓度的检测。该方法具有高灵敏度，低成本，快速、易操作等特点，可实现样品中氧四环素的灵敏测定。

基于点击反应的还原糖定量检测方法 1171     

 0

本发明属于分析化学领域，涉及一种基于点击反应的还原糖定量检测方法。本发明利用巯基丙酸修饰纳米金，进而通过酰胺反应分别固定炔基、叠氮基；以葡萄糖为目标检测物，利用葡萄糖的还原性将二价铜还原为一价铜，后者充当点击反应的催化剂，促使炔基与叠氮基之间发生环加成反应，从而改变纳米金间距，使纳米金聚集变色。根据纳米金的聚集程度，判断催化剂一价铜的含量，进而实现对生物样品中还原糖的定量检测。该方法操作简单，成本低廉，不需要特殊的仪器设备，重现性，灵敏度相较于以往还原糖检测手段有明显提高，是一种在食品科学、分析化学、医学等领域中具有广阔应用前景的检测方法。

AIE型三苯胺衍生物荧光探针及其制备方法和其在水合肼检测中的应用 1039     

 0

本发明涉及一种AIE型三苯胺衍生物荧光探针，化学名称为(Z)‑2‑(4‑(((E)4‑(二甲胺基)苯亚甲基)氨基)苯)3‑(4‑(二苯胺)苯基)丙烯腈，分子式为C36H30N4。一种所述AIE型三苯胺衍生物荧光探针的制备方法，具体制备步骤如下：第一步，制备(E)‑2‑(4‑(4‑(二甲胺基)苯亚甲基)氨基)苯基)乙腈；第二步，制备4‑(二苯胺)苯甲醛；第三步，(E)‑2‑(4‑(4‑(二甲胺基)苯亚甲基)氨基)苯基)乙腈和4‑(二苯胺)苯甲醛在碱性环境下反应，制得所述荧光探针。本发明首次提供了一种具有AIE性能的三苯胺类化合物荧光探针，为有机分析和光化学提供了新型的探针分子，可广泛应用于荧光分析或检测领域。该新型荧光分子探针实现了对水合肼的高灵敏检测，其检测限为0.13µM，可以实现在HeLa细胞中对水合肼含量检测和成像研究。

一步均相H-FABP检测试剂盒及其制备和使用方法 1118     

 0

本发明公开了一种一步均相H‑FABP氧通道化学发光检测试剂盒，主要组成包括：抗H‑FABP抗体偶联的发光微球、抗H‑FABP抗体偶联的感光微球、分析缓冲液、反应孔；本发明还公开了所述一步均相H‑FABP氧通道化学发光检测试剂盒的制备方法，该方法包括：抗H‑FABP抗体偶联发光微球的制备；抗H‑FABP抗体偶联感光微球的制备，以及分析缓冲液的制备；最后本发明公开了该试剂盒的使用方法；本发明的试剂盒具有灵敏度高、特异性好、检测范围宽、重复性好、操作简单、免清洗等特点，便于临床检测使用，其应用于心脏病的监测，可以提高心肌梗塞诊断的准确率，具有极大的市场价值。

电化学工作站 1078     

 0

本发明提供了一种电化学工作站，包括电解液池，电解液池内设有对电极和参比电极，待测零件通过升降传送带依次悬挂于电解液池上方，所述的升降传送带可以进行水平传送以及垂直运动。待测零件通过升降传送带依次经过电解液池，下降进入电解液池中，测量完成后升起，随升降传送带传送，一下个零件进入电解液池上方，进行测试，节约了人工成本，提高了生产线自动化程度。

深水水库表层沉积物磷、铁、锰、硫化学反应与平衡计算方法 1126     

 0

本发明公开了一种深水水库表层沉积物磷、铁、锰、硫化学反应与平衡计算方法，所述方法包括如下步骤：对所选水库采样点原位沉积物进行采集，得到沉积物样品，并采集原位水作为上覆水，对所述沉积物样品表层样品的含水率进行测定，根据所述含水率计算得到沉积物孔隙度Φs，并测定沉积物样品平板式DGT有效态磷、铁、锰、硫浓度CDGT，以及间隙水磷、铁、锰浓度CPeeper，其中，DGT为薄膜扩散梯度技术，对所述沉积物样品表层样品不同形态磷、铁、锰浓度进行测定，得到沉积物固相浓度Cs，计算沉积物系统受扰动后达到平衡所需的时间Tc、吸附动力学常数K1、解吸动力学常数K‑1，将上覆水水温、平板式DGT有效态磷、铁、锰、硫浓度CDGT输入软件进行计算，判别沉积物内源物质释放是否会对表层水体水质造成影响。

推演弱透水层孔隙水水化学组分的方法 1091     

 0

本发明提供一种推演弱透水层孔隙水水化学组分的方法，包括以下步骤：S1.进行土体的易溶盐离子含量的测定；S2.进行土体的湿密度、比重和天然含水量的测定；S3.采用步骤S2得到的土体湿密度、比重和天然含水量进行土体物理指标间的换算，推导出土体的干密度、天然孔隙比和饱和度；S4.采用土体的干密度、湿密度和易溶盐离子含量等换算出土体孔隙水中的易溶盐离子质量及矿化度指标。弱透水层孔隙水样品难以获取且相关测试成本高。将水土作为一个整体进行研究，进行水土的含盐特征及其相关性研究，建立水土盐分换算数学模型，建立的水土盐分换算数学模型具有较高的应用价值。

基于深度强化学习的多无人机任务规划方法 849     

 0

本发明公开了一种基于深度强化学习的多无人机任务规划方法。首先，根据任务需求，建立多无人机多目标场景下的分布式部分马尔科夫决策过程模型；然后，在建立的任务模型基础上，设计基于QMIX的任务规划算法。本发明设计了多智能体强化学习算法与协作任务奖赏函数，使得多无人机在集中训练后，执行任务时可以在分布式框架下根据不同的环境状态与自身观测做出协作完成任务的动作，使任务完成时间减少，最大化任务收益。

化学实验用的物质可见吸收光谱的采集装置 997     

 0

本实用新型提供了一种化学实验用的物质可见吸收光谱的采集装置，包括光源部件、3D打印支架和图像采集装置，3D打印支架上设有光通道以及待测溶液比色皿，光源部件发出的光源穿过3D打印支架的待测溶液比色皿并通过光通道传送到图像采集装置。所述3D打印支架包括图像采集支架和比色皿支架，图像采集支架设有与比色皿支架适配的底座，比色皿支架安装在底座上，比色皿支架上设有测量槽、凹槽以及比色皿凹槽，测量槽放置待测溶液比色皿，凹槽放置狭缝，比色皿凹槽放置待测溶液比色皿；图像采集支架上设有反射镜和衍射光栅，光通道依次穿过狭缝、待测溶液比色皿、反射镜和衍射光栅。

VANET中基于时变线性的加速强化学习边缘缓存方法 1066     

 0

本发明公开了一种VANET中基于时变线性的加速强化学习边缘缓存方法，首先，构建动态的时变线性预测模型，通过考虑每个文件的动态老化，并根据历史内容请求来预测未来的内容请求；然后，构建文件缓存替换函数，并对该函数进行调整；最后，优化缓存策略函数，通过合成假设样本来增加每个时隙的样本数，以达到Q函数的快速收敛，并相应地替换缓存的内容，最大化总的缓存效益。本发明具有更高的缓存命中率和长期效益；通过线性时变预测模型，可以对车辆请求进行实时预测，同时实时的替换边缘服务器中的缓存文件，保证缓存文件的有效性。

牛奶中多重抗生素残留的比色检测方法 1166     

 0

一种牛奶中多重抗生素残留(氧四环素和卡那霉素)的比色检测方法，属于分析化学技术领域。本发明首先将抗生素适体(APT)与生物素标记的探针CP退火杂交形成双链DNA修饰在链霉亲和素偶联磁珠(SDB)表面；探针SP和HP修饰在金纳米颗粒(AuNPs)表面。在抗生素存在时，抗生素与APT的特异性结合并使APT脱离SDB，紧接着CP则与AuNPs修饰的HP_KNA杂交形成SDB‑AuNPs体系；AuNPs表面修饰的SP结合SAv‑HRP后可催化SAv‑HRP后催化TMB‑H₂O₂或OPD‑H₂O₂溶液变色，利用370nm或450nm处紫外吸光度的变化与抗生素浓度的关系，绘制标准曲线，通过测量待测样品的紫外吸光度，即可实现抗生素含量的灵敏检测。该方法具有高灵敏度，低成本，易操作等特点，可实现样品中多重抗生素的灵敏测定。

基于溯源区块链的危险化学品供应链溯源方法 1196     

 0

本发明提供一种基于溯源区块链的危险化学品供应链溯源方法，该方法包括：溯源数据生成，使用探针和传感器来实时监控用户的交互活动，收集和记录用户对数据的每项操作，从而生成溯源数据；溯源数据上链，在区块链中以区块的形式存储所有散列的数据操作记录；用户身份隐藏，对用户的ID进行哈希处理，以便区块链网络和溯源审核员确定用户身份和数据操作；验证溯源数据，溯源审核员通过使用包含区块和交易信息的区块链收据，从区块链网络中检索交易来验证溯源数据。本方法提供了一个去中心化的高效、高性价比、高安全性、高透明度的供应链溯源机制体系，实现从危化品的生产、仓储和运输等环节上资源的高效利用，提高溯源平台的可靠与安全。

化学洗涤塔内的填料承托装置 1073     

 0

本实用新型属于污泥处理技术领域，尤其为一种化学洗涤塔内的填料承托装置，包括塔体，所述塔体的内壁固定设有支撑架，两个所述支撑架上设有托盘，所述托盘的顶部固定设有两个栏板，所述托盘内设有安装腔，所述托盘的顶部内壁和底部内壁上均开设有通风孔，所述安装腔内设有刮壁结构，所述塔体的一侧设有控制器，所述托盘的正面设有两个检修门，所述刮壁结构包括两个安装板，两个所述安装板分别和安装腔的两侧内壁固定连接，两个所述安装板相靠近的一侧固定设有两个滑杆，本实用新型操作简单、使用方便，通过设置刮壁结构，能够在通风处发生堵塞的情况下，对过滤网来回刮动，保证废气能够顺畅通过。

卡那霉素残留的检测方法 1178     

 0

一种基于适体引发的核酸外切酶III(Exo?III)循环酶切的卡那霉素残留的检测方法及其应用，属于分析化学技术领域。本发明主要是利用巯基自组装的方式，将与卡那霉素适配体(K-aptamer)互补的单链DNA(ssDNA)修饰于金电极表面，加入少量K-aptamer与其配对形成少量双链DNA(dsDNA)。随后加入Exo?III，利用可特异性的酶切dsDNA中的ssDNA使得剩余的适配体释放，重新与ssDNA结合形成dsDNA，引发再次酶切，若干循环后使得修饰ssDNA酶切完全。体系存在卡那霉素，通过与适配体的结合抑制循环酶切使ssDNA得以保留，且保留量与卡那霉素的浓度相关。利用电分析方法对ssDNA可静电吸附电信号分子六氨合钌(RuHex)进行定量实现卡那霉素残留的检测。该方法具有较高灵敏度，可实现牛奶中卡那霉素残留的灵敏测定。

基于多智能体强化学习的无人机集群协同学习方法 858     

 0

本发明公开一种基于多智能体强化学习的无人机集群协同学习方法，构造基于空气动力学的环境模拟器；每个无人机获取并维护本机的局部观测值；作为student，每个无人机获取并维护来自队友的建议观测值；作为teacher，为其他无人机给出指导值；基于本机局部观测值与从队友获取的建议观测值执行动作策略，获取奖励并转移到下一状态；基于MADDPG思想进行训练，直到值网络与策略网络收敛；执行阶段以分布式的方式进行，即每个无人机基于局部观测值和队友提供的建议观测值，通过动作策略执行。本发明可以在成本较低的前提下实现无人机集群之间观测值的互补，实现无人机单独自主决策，解决“主从”结构带来的通信问题。

基于多智能体强化学习的无人机集群高效通信方法 1078     

 0

本发明公开一种基于多智能体强化学习的无人机集群高效通信方法，构建无人机飞行环境模拟器；随机选取一架无人机作为队长并标记；每架无人机获取并维护本机的局部观测值，将自身观测值进行编码并发送给队长；队长根据每架无人机的自身观测值，分别对全局观测值进行attention注意力机制处理，根据信息的重要程度来决定信息的权重，继而将计算好的观测值发送给每个队友，作为队友的全局观测值；训练阶段以全局观测值作为训练数据，直到策略网络收敛；执行阶段以分布式的方式进行；对队长的存活给一个额外的奖励。本发明可以在通信开销较小的条件下解决无人机集群集中式信息交互的问题，给予无人机自主决策权。

基于深度强化学习的全景视频边缘协作缓存替换方法 740     

 0

本发明公开了一种基于深度强化学习的全景视频边缘协作缓存替换方法，通过利用边缘缓存在应对VR全景视频流传输挑战方面的优势以及深度强化学习DRL适用于解决复杂问题的特性，在优化缓存效率的基础上，综合提升VR全景视频流传输的各方面性能。本发明充分考虑了多种视频编码版本、可能存在的对全景视频用户视场FoV的预测错误以及面向多用户的长期收益，对传输过程中的成本、视频内容质量不匹配水平以及响应时延进行联合优化，使得用户获得高质量、低成本的全景视频流。

苯系物污染土壤的原位化学氧化修复方法 864     

 0

本发明涉及一种苯系物污染土壤的原位化学氧化修复方法，包括土壤修复剂的注入、抽提后异位处置及定期监测，注入的土壤修复剂在地下水径流、渗透及水力梯度的作用下，与污染土层中吸附在土壤颗粒上的污染物充分接触后，利用土壤修复剂的较高氧化还原电位，将其降解成低分子的简单的有机物类，实现对苯系物污染土壤的原位化学氧化修复方法。

基于深度强化学习的自动驾驶行为一体化决策方法 781     

 0

本发明公开了一种基于深度强化学习的自动驾驶行为一体化决策方法，从两种基本驾驶行为，即换道和跟驰行为的优先级和逻辑出发，首先采用上下两层深度强化学习模型处理大规模混合状态空间并保证换道决策和跟驰决策的复合动作输出，在上层模型中使用D3QN算法来区分环境的潜在价值和换道决策的价值，在下层模型采用DDPG算法处理跟驰决策从而输出连续的车速控制。选取混合标准驾驶工况对两种算法进行耦合训练之后，在利用NGSIM数据重建的高度复杂的驾驶场景中对模型进行测试。本发明提出的集成驾驶决策模型提高了跟驰与换道决策的协同性，并将车道优势函数与危险动作屏蔽机制整合到决策模型中，显著提升了行驶速度，优于其他的智能驾驶决策模型。

基于深度强化学习的风电机组电网惯量支撑方法 1110     

 0

本发明公开了基于深度强化学习的风电机组电网惯量支撑方法，包括以下步骤：(1)获取风机转速、电网频率数据；(2)基于DDPG算法设计改进的风机一次调频控制策略；(3)在训练风速下对DDPG智能体进行训练；(4)利用步骤(3)训练好的智能体，在测试风速下根据风机转速和电网频率在线输出惯量支撑功率，实现风机对电网的惯量支撑。本发明的技术方案在风电机组RSC控制基础上，通过深度确定性策略梯度强化学习算法获得风电机组惯量支撑功率。与传统风机固定系数的一次调频控制相比，本发明提出的方法综合考虑风机稳定与惯量支撑效果，使风机在维持自身稳定运行的前提下充分利用转子动能为电网提供惯量支撑。

基于深度强化学习的机器人自适应抓取方法 1122     

 0

本发明提供了一种基于深度强化学习的机器人自适应抓取方法，步骤包括：在距离待抓取目标一定距离时，机器人通过前部的摄像头获取目标的照片，再根据照片利用双目测距方法计算出目标的位置信息，并将计算出的位置信息用于机器人导航；当目标进入机械手臂抓范围内时，再通过前部的摄像头拍摄目标的照片，并利用预先训练过的基于DDPG的深度强化学习网络对照片进行数据降维特征提取；根据特征提取结果得出机器人的控制策略，机器人利用控制策略来控制运动路径和机械手臂的位姿，从而实现目标的自适应抓取。该抓取方法能够对大小形状不同、位置不固定的物体实现自适应抓取，具有良好的市场应用前景。

基于深度强化学习的六足机器人实时步态规划方法 812     

 0

本发明提供了一种基于深度强化学习的六足机器人实时步态规划方法，步骤包括：由六足机器人获取环境路况信息并制定整体的运动轨迹；通过摄像头获取环境的照片，再根据照片利用双目测距方法计算出目标轨迹的路况信息，并将计算出的轨迹路况信息用于机器人质心运动轨迹导航；在机器人腿的足端摆动空间范围内，拍摄路况环境的照片，并通过预先训练过的基于深度确定性策略梯度(DDPG)的深度强化学习网络对照片进行数据降维和特征提取；根据特征提取结果得出六足机器人的控制策略，六足机器人根据控制策略来控制机器人的落足，实现六足机器人的实时行走。该步态规划的方法能够对路况复杂的非结构环境进行实时规划，对提高六足机器人的环境适应能力具有重要意义。

化学品船液货舱智能监控装置 769     

 0

本实用新型公开一种化学品船液货舱智能监控装置，包括设置在船舶监控室的船舶智能监控计算机以及船舶内的若干液货舱；每一所述的液货舱内均安装有可拆卸更换的雷达测深传感器、压力传感器以及氧气溶度测量仪；并且每一液货舱内的雷达测深传感、压力传感器以及氧气溶度测量仪均与船舶监控室内的智能监控计算机相连。本装置中在舱体内同时安装雷达测深传感器监测液位和温度，安装压力传感器监测舱体内压力，安装氧气溶度传感器监测舱体内氧气溶度；通过对比压力是否与液位成正比、温度是否与压力成正比、氧气溶度是否随着液位变化，多项数据相互对比，交互处理后可准确判断舱体内真实情况，具有随时监控，智能计算，安全性高的特点。

双链核酸分子包被微孔板检测转录因子蛋白 807     

 0

转录因子是生物蛋白质组中一类负责基因表达调控的重要蛋白质,是基因表达调控通路及网络的枢纽,是功能基因组和蛋白质组研究的重要对象;许多疾病都与转录因子的异常表达及活化存在密切的关系,成为转录治疗和药物研究的重要靶点。转录因子表达及活化程度的检测分析是研究其功能的主要手段。本发明“双链核酸分子包被微孔板检测转录因子蛋白”提出了一种检测转录因子表达和活化水平的新方法。运用该方法分析转录因子表达和活化水平包括如下步骤:(a)准备核酸分子;(b)将核酸分子连接固定到微孔板孔内;(c)含转录因子的细胞或组织抽提物与微孔板孵育;(d)转录因子抗体与微孔板孵育;(e)化学标记转录因子二抗与微孔板孵育;(f)对化学标记检测分析。