CN116419290B - 基于跨层设计联合深度q网络的水声通信能量优化方法 - Google Patents

基于跨层设计联合深度q网络的水声通信能量优化方法 Download PDF

Info

Publication number
CN116419290B
CN116419290B CN202310504832.6A CN202310504832A CN116419290B CN 116419290 B CN116419290 B CN 116419290B CN 202310504832 A CN202310504832 A CN 202310504832A CN 116419290 B CN116419290 B CN 116419290B
Authority
CN
China
Prior art keywords
network
layer
energy
energy optimization
parameters
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202310504832.6A
Other languages
English (en)
Other versions
CN116419290A (zh
Inventor
刘帅
王渝
郁泽慧
曹润琪
王猛
矫禄禄
刘钊
王景景
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qingdao University of Science and Technology
Original Assignee
Qingdao University of Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qingdao University of Science and Technology filed Critical Qingdao University of Science and Technology
Priority to CN202310504832.6A priority Critical patent/CN116419290B/zh
Publication of CN116419290A publication Critical patent/CN116419290A/zh
Application granted granted Critical
Publication of CN116419290B publication Critical patent/CN116419290B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W24/00Supervisory, monitoring or testing arrangements
    • H04W24/02Arrangements for optimising operational condition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B13/00Transmission systems characterised by the medium used for transmission, not provided for in groups H04B3/00 - H04B11/00
    • H04B13/02Transmission systems in which the medium consists of the earth or a large mass of water thereon, e.g. earth telegraphy
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W16/00Network planning, e.g. coverage or traffic planning tools; Network deployment, e.g. resource partitioning or cells structures
    • H04W16/22Traffic simulation tools or models
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W52/00Power management, e.g. TPC [Transmission Power Control], power saving or power classes
    • H04W52/04TPC
    • H04W52/18TPC being performed according to specific parameters
    • H04W52/24TPC being performed according to specific parameters using SIR [Signal to Interference Ratio] or other wireless path parameters
    • H04W52/241TPC being performed according to specific parameters using SIR [Signal to Interference Ratio] or other wireless path parameters taking into account channel quality metrics, e.g. SIR, SNR, CIR, Eb/lo
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W52/00Power management, e.g. TPC [Transmission Power Control], power saving or power classes
    • H04W52/04TPC
    • H04W52/18TPC being performed according to specific parameters
    • H04W52/26TPC being performed according to specific parameters using transmission rate or quality of service QoS [Quality of Service]
    • H04W52/267TPC being performed according to specific parameters using transmission rate or quality of service QoS [Quality of Service] taking into account the information rate
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W84/00Network topologies
    • H04W84/18Self-organising networks, e.g. ad-hoc networks or sensor networks
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00Reducing energy consumption in communication networks
    • Y02D30/70Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Quality & Reliability (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

本发明公开了一种基于跨层设计联合深度Q网络的水声通信能量优化方法。本发明首先水下布设水声传感网,在考虑能量的基础上建立水下网络物理层传输功率约束、MAC层的信道访问速率约束、路由层的数据包吞吐量约束;然后基于以上约束,对网络进行跨层设计,建立跨三层的能量优化模型;最后采用深度Q网络进行能量优化模型参数的求解,迭代更新跨层能量优化模型参数,直到输出网络能量优化的最佳参数。本发明能够有效应对水下声学传感器网络通信时能量受限的环境,降低网络通信的能量消耗。

Description

基于跨层设计联合深度Q网络的水声通信能量优化方法
技术领域
本发明属于水声通信和海洋信息技术领域,具体地说,涉及一种基于跨层设计联合深度Q网络的水声通信能量优化方法。
背景技术
水下通信网络在海洋灾害预警、水下军事作战、海上石油勘探等领域有着广泛的应用。
由于水下传感器节点电池能量有限,且在水下很难充电,所以水下传感器网络面临着能源效率的挑战。水下网络和陆地网络不同,水下协议栈大多数分为三层,即物理层、数据链路(MAC)层、路由层。以上各层之间原则上独立运行,不会产生信息交互,然而协议栈中每层的信息参数都会对网络能耗产生很大影响,且层与层之间信息相互耦合,其他层信息的变动会对本层产生影响,如果仅对单层协议栈进行能量优化,不考虑其他层的信息影响,则很难实现网络能量的低功耗运行。
综上所述,以往的方法虽然可以在一定程度上降低水声通信网络的能耗,但是优化问题往往仅考虑单层的信息设计,没有充分联合网络中各子层的信息进行能量优化。
发明内容
本发明的目的是提出一种基于跨层设计联合深度Q网络的水声通信能量优化方法,以弥补现有技术的不足。
为实现上述发明目的,本发明采用下述技术方案予以实现:
一种基于跨层设计联合深度Q网络的水声通信能量优化方法,包括以下步骤:
S1:布设水声传感网,建立水下网络物理层传输功率约束、MAC层的信道访问速率约束、路由层的数据包吞吐量约束;
S2:基于S1的各层网络约束,对所述水声传感网进行跨层设计,建立跨层能量优化模型;
S3:使用DQN进行所述跨层能量优化模型参数的求解,迭代更新该模型参数;
S4:将S3得到的模型参数进行验证,如果得到的能耗值大于阈值,则返回S3继续迭代更新参数后的跨层能量优化模型;如果能耗值小于阈值,则输出当前跨层能量优化模型的最佳参数。
进一步的,所述S1具体如下:
S1-1:建立物理层传输功率约束:
水下布设传感网,规定距离水面基站为且具有物理层容量为/>的节点在传输数据包时所需的功率为/>,用/>来表示两次连续传输之间的功耗,对传输功率约束模型建立为:
其中,表示物理层比特容量随距离的衰减指数,/>表示物理层比特容量的波动系数,两者的计算公式为:
其中,表示/>的折扣因子,其满足/>,/>表示/>的折扣因子,其满足/>
S1-2:建立MAC层的信道访问速率约束:
首先建立MAC层的信道利用率模型,/>的计算公式为:
其中,表示MAC层流量传输成功的概率,/>表示流量传输失败等待的时间,则最大信道访问速率约束公式为:
其中,为MAC层传输流量的数量大小;
S1-3:建立路由层的数据包吞吐量约束:
假设路由层数据包的传输概率为,则由传输概率/>表示的网络数据包总吞吐量/>为:
其中,表示路由层数据包传输的次数,/>表示路由层数据包传输成功的概率;对网络数据包总吞吐量/>求导得到最佳传输概率/>为:
代入网络数据包总吞吐量/>的计算公式中,并考虑节点剩余能量与吞吐量的关系,得到最优路由层数据包吞吐量约束/>为:
其中,表示路由层数据包传输的次数,/>表示路由层数据包传输成功的概率。
进一步的,所述S2中,建立跨层能量优化模型:
基于S1的各层网络约束,建立跨三层的能量优化模型:
其中,表示第/>个节点的能耗,跨层能量优化的目标就是最小化网络中所有节点的能耗,/>表示网络最大吞吐量,/>表示最大信道访问速率,/>表示信道带宽,/>表示信噪比,/>表示网络运行时间。
进一步的,所述S3具体如下:
S3-1:建立Q值迭代函数模型:
将能量优化问题建立为三元组(, />, />)的参数求解问题,通过已有能量优化数据训练网络,得到Q值最大的一组参数,更新Q值迭代函数的公式为:
其中,表示执行动作/>转移到状态/>的概率,/>表示折扣因子,/>是执行动作所获得的奖励,/>表示在状态/>的所有动作中,执行/>所获得的最大Q值;
S3-2:建立深度Q网络模型奖励策略:
在水声传感器网中,传感器节点的能量是有限的,为了使节点间均衡的消耗能量,DQN模型奖励策略考虑了节点的能量,深度Q网络模型奖励函数计算公式为:
其中, 表示网络中节点的剩余能量;
S3-3:求解能量优化模型参数:
通过已有能量优化数据训练网络,得到Q值最大的一组参数,将该参数与理想参数做均方误差求出损失值,通过不断调整参数降低损失值来求解出能量优化模型的最佳参数,损失函数的求解公式为:
其中,代表权重,/>代表理想参数,其计算公式为:
其中,是执行动作所获得的奖励,/>表示折扣因子,/>表示在状态/>的所有动作中,在权重为/>时,执行/>所获得的最大Q值。
进一步的,所述S4中,迭代输出能量优化的最佳参数:
将得到的模型参数带入测试集验证,计算其能耗值,网络能耗值计算公式为:
其中,表示网络运行时间,/>表示第/>个节点的信道容量,/>表示第/>个节点数据包传输成功的概率;如果得到的能耗值大于阈值,则返回S3继续迭代更新参数后的能量优化模型如果能耗值小于阈值,则输出当前能量优化模型的最佳参数。
本发明的优点和技术效果如下:
本发明首先在考虑能量的基础上建立水下网络物理层传输功率约束、MAC层的信道访问速率约束、路由层的数据包吞吐量约束,有效设立了三层协议栈之间的约束关系;然后基于以上约束,进行跨层设计,建立跨层能量优化模型,打破了层与层之间的限制,实现了各层间的信息交互;最后采用深度Q网络进行能量优化模型参数的求解,迭代更新跨层能量优化模型参数,直到输出网络能量优化的最佳参数,得到了网络能量优化的最佳值。
经过验证,本发明能够有效应对水剩传感器网能量受限的特殊环境,减少整体能耗,降低网络中节点的死亡速度。
附图说明
图1是本发明的一种实施例的整体流程图。
图2是本发明的一种实施例的深度Q网络模型结构图。
图3是本发明的一种实施例的本发明与现有方法关于能量消耗随节点密度变化的仿真结果对比图。
图4是本发明的一种实施例的本发明与现有方法关于存活节点数量随时间变化的仿真结果对比图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下将结合附图和实施例,对本发明作进一步详细说明。
实施例1:
水下部署传感网,由于传感器节点电池容量有限,且供电电池无法更换,考虑单层协议栈优化很难达到低功耗网络的需求,本实施例通过跨层优化的方式充分利用层与层之间信息交互,来消除对等层间存在冗余的通信开销。如何有效应对水声传感器网能量受限的特殊环境,减少网络的整体能耗,降低网络中节点的死亡速度,是本实施例所要解决的技术问题。
本实施例提出了一种基于跨层设计联合深度Q网络的水声通信能量优化方法,其整体流程图如图1所示,包括以下步骤:
S1:水下布设传感网,在考虑能量的基础上建立水下网络物理层传输功率约束、MAC层的信道访问速率约束、路由层的数据包吞吐量约束,具体步骤如下:
S1-1:建立水下网络物理层传输功率约束:
水下布设水声传感网,规定距离水面基站为且具有物理层容量为/>的节点在传输数据包时所需的功率为/>,用/>来表示两次连续传输之间的功耗,对传输功率约束模型建立为:
其中,表示物理层比特容量随距离的衰减指数,/>表示物理层比特容量的波动系数,计算公式为:
其中,表示/>的折扣因子,其满足/>,/>表示/>的折扣因子,其满足/>
S1-2:建立水下网络MAC层的信道访问速率约束:
首先建立MAC层的信道利用率模型,/>的计算公式为:
其中,表示MAC层流量传输成功的概率,/>表示流量传输失败等待的时间,则最大信道访问速率约束公式为:
其中,为MAC层传输流量的数量大小。
S1-3:建立路由层的数据包吞吐量约束:
假设路由层数据包的传输概率为,则由传输概率/>表示的网络数据包总吞吐量/>为:
其中,表示路由层数据包传输的次数,/>表示路由层数据包传输成功的概率。对网络数据包总吞吐量/>求导得到最佳传输概率/>为:
代入网络数据包总吞吐量/>的计算公式中,并考虑节点剩余能量与吞吐量的关系,得到最优路由层数据包吞吐量约束/>为:
其中,表示路由层数据包传输的次数,/>表示路由层数据包传输成功的概率。
S2:基于S1的各层网络约束,对网络进行跨层设计,建立跨三层的能量优化模型,具体步骤如下:
S2-1:建立跨三层的能量优化模型:
基于S1的各层网络约束,对网络进行跨层设计,建立跨三层的能量优化模型:
其中,表示第/>个节点的能耗,跨层能量优化的目标就是最小化网络中所有节点的能耗,/>表示网络最大吞吐量,/>表示最大信道访问速率,/>表示信道带宽,/>表示信噪比,/>表示网络运行时间。
S3:使用深度Q网络(DQN)进行S2中能量优化模型参数的求解,迭代更新跨层能量优化模型参数,具体步骤如下:
S3-1:建立网络Q值迭代函数模型:
将能量优化问题建立为三元组(, />, />)的参数求解问题,通过已有能量优化数据训练网络,得到Q值最大的一组参数,更新Q值迭代函数的公式为:
其中,表示执行动作/>转移到状态/>的概率,/>表示折扣因子,/>是执行动作所获得的奖励。/>表示在状态/>的所有动作中,执行/>所获得的最大Q值。
S3-2:建立深度Q网络模型奖励策略:
在水声传感网中,传感器节点的能量是有限的,为了使节点间均衡的消耗能量,DQN模型奖励策略考虑了节点的能量,深度Q网络模型奖励函数计算公式为:
其中, 表示网络中节点的剩余能量。
S3-3:求解能量优化模型参数:
通过已有能量优化数据训练网络,得到Q值最大的一组参数,将该参数与理想参数做均方误差求出损失值,通过不断调整参数降低损失值来求解出能量优化模型的最佳参数,损失函数的求解公式为:
其中,代表权重,/>代表理想参数,其计算公式为:
其中,是执行动作所获得的奖励,/>表示折扣因子,/>表示在状态/>的所有动作中,在权重为/>时,执行/>所获得的最大Q值。
本发明实施例所使用的深度Q网络模型结构图如图2所示。网络根据环境约束信息在考虑能量的情况下给予深度Q网络模型奖励,参数估计网络选取卷积神经网络模型(CNN),输入是网络各层参数,输出是Q值最大的最佳能量优化模型,根据测试集网络模型不断迭代更新网络,直到输出最佳能量优化参数。
S4:将得到的模型参数带入测试集验证,如果得到的能耗值大于阈值,则返回S3继续迭代更新参数后的能量优化模型。如果能耗值小于阈值,则输出当前能量优化模型的最佳参数,具体步骤如下:
S4-1:迭代输出能量优化的最佳参数:
将得到的模型参数带入测试集验证,计算其能耗值,网络能耗值计算公式为:
其中,表示第/>个节点的信道容量,/>表示第/>个节点数据包传输成功的概率。如果得到的能耗值大于阈值,则返回S3继续迭代更新参数后的能量优化模型。如果能耗值小于阈值,则输出当前能量优化模型的最佳参数。
实施例2:
针对实施例1提出的方法进行仿真实验验证:
使用实施例提供的方法和使用现有单层能量优化的方法网络能量消耗随节点密度变化的仿真结果对比如图3所示。在Aqua-Sim-NG(基于NS-3的水下传感器网络模拟器)中完成仿真模拟,本实施例中所有仿真的具体参数如表1所示。
表1 仿真参数
仿真参数 数值
网络的大小 1200×1200×1200m3
声信号速度 1.5Km/s
节点数量 100-600
数据包大小 5Kb
节点通信范围 50m
节点初始能量 800J
节点的数据传输速率 4kbps
节点数据传输消耗 0.3J/s
从图3的仿真结果可以看出,随着节点数量的增多,水下传感网的能耗不断降低,当节点数量达到600时,本发明方法比单层能量优化方法节省了约340焦耳的能量。
使用本发明和现有单层能量优化的方法网络中存活节点数量随时间变化的仿真结果对比如图4所示。从图4的仿真结果可以看出,当水下网络运行了10小时的时候。本发明节点存活数量为360个左右,而单层能量优化方法节点存活数量为180个左右。
综上所述,本发明能够有效的降低网络能耗,且有效的平衡能量消耗,降低传感器节点死亡的速度。
以上实施例仅用以说明本发明的技术方案,而非对其进行限制;尽管参照前述实施例对本发明进行了详细的说明,对于本领域的普通技术人员来说,依然可以对前述实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或替换,并不使相应技术方案的本质脱离本发明所要求保护的技术方案的精神和范围。

Claims (4)

1.一种基于跨层设计联合深度Q网络的水声通信能量优化方法,其特征在于,该方法包括以下步骤:
S1:布设水声传感网,建立水下网络物理层传输功率约束、MAC层的信道访问速率约束、路由层的数据包吞吐量约束;
S2:基于S1的各层网络约束,对所述水声传感网进行跨层设计,建立跨层能量优化模型:
其中,Ei(Rag_al,λmax)表示第i个节点的能耗,T表示网络最大吞吐量,λmax表示最大信道访问速率,B表示信道带宽,SNR表示信噪比,t表示网络运行时间,Rag_al表示最优路由层数据包吞吐量,Pt(l,C)表示距离水面基站为l且具有物理层容量为C的节点在传输数据包时所需的功率;
S3:使用DQN进行所述跨层能量优化模型参数的求解,迭代更新该模型参数;
S4:将S3得到的模型参数进行验证,如果得到的能耗值大于阈值,则返回S3继续迭代更新参数后的跨层能量优化模型;如果能耗值小于阈值,则输出当前跨层能量优化模型的最佳参数。
2.如权利要求1所述的水声通信能量优化方法,其特征在于,所述S1具体如下:
S1-1:建立物理层传输功率约束:
水下布设传感网,规定距离水面基站为l且具有物理层容量为C的节点在传输数据包时所需的功率为Pt(l,C),用Ps来表示两次连续传输之间的功耗,对传输功率约束模型建立为:
其中,a1(C)表示物理层比特容量随距离的衰减指数,a2(C)表示物理层比特容量的波动系数,两者的计算公式为:
a2(C)=β3210log10C+β1(10log10(C+1))2
其中,表示a1(C)的折扣因子,其满足/>β1,β2,β3表示a2(C)的折扣因子,其满足β123=1;
S1-2:建立MAC层的信道访问速率约束:
建立MAC层的信道利用率模型U(λ),U(λ)的计算公式为:
其中,e-2Nλ表示MAC层流量传输成功的概率,1/λ表示流量传输失败等待的时间,则最大信道访问速率约束公式为:
其中,N为MAC层传输流量的数量大小;
S1-3:建立路由层的数据包吞吐量约束:
假设路由层数据包的传输概率为p,则由传输概率p表示的网络数据包总吞吐量Rag_al(p)为:
Rag_al(p)=(n-1)q(1-q)n-2(1-P)+p(1-q)n-1
其中,n表示路由层数据包传输的次数,q表示路由层数据包传输成功的概率;对网络数据包总吞吐量Rag_al(p)求导得到最佳传输概率p为:
将p代入网络数据包总吞吐量Rag_al(p)的计算公式中,得到最优路由层数据包吞吐量约束Rag_al为:
其中,n表示路由层数据包传输的次数,q表示路由层数据包传输成功的概率。
3.如权利要求1所述的水声通信能量优化方法,其特征在于,所述S3具体如下:
S3-1:建立Q值迭代函数模型:
通过已有能量优化数据训练网络,得到Q值最大的一组参数,更新Q值迭代函数的公式为:
其中,P(St+1|st,at)表示执行动作at转移到状态St+1的概率,γ表示折扣因子,rt是执行动作所获得的奖励,表示在状态St+1的所有动作中,执行a′所获得的最大Q值;
S3-2:建立深度Q网络模型奖励策略:
深度Q网络模型奖励函数rt计算公式为:
其中,Eres表示网络中节点的剩余能量;
S3-3:求解能量优化模型参数:
损失函数的求解公式为:
L(ω)=[y(st+1,rt)-Q(st,at;ω)]2
其中,ω代表权重,y(st+1,rt)代表理想参数,其计算公式为:
其中,rt是执行动作所获得的奖励,γ表示折扣因子,表示在状态St+1的所有动作中,在权重为ω时,执行a′所获得的最大Q值。
4.如权利要求1所述的水声通信能量优化方法,其特征在于,所述S4中,迭代输出能量优化的最佳参数:将得到的模型参数进行验证,计算其能耗值,网络能耗值Ei(Rag_al,λmax)计算公式为:
其中,t表示网络运行时间,Ci表示第i个节点的信道容量,表示第i个节点数据包传输成功的概率;如果得到的能耗值大于阈值,则返回S3继续迭代更新参数后的能量优化模型如果能耗值小于阈值,则输出当前能量优化模型的最佳参数。
CN202310504832.6A 2023-05-08 2023-05-08 基于跨层设计联合深度q网络的水声通信能量优化方法 Active CN116419290B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310504832.6A CN116419290B (zh) 2023-05-08 2023-05-08 基于跨层设计联合深度q网络的水声通信能量优化方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310504832.6A CN116419290B (zh) 2023-05-08 2023-05-08 基于跨层设计联合深度q网络的水声通信能量优化方法

Publications (2)

Publication Number Publication Date
CN116419290A CN116419290A (zh) 2023-07-11
CN116419290B true CN116419290B (zh) 2023-10-27

Family

ID=87057934

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310504832.6A Active CN116419290B (zh) 2023-05-08 2023-05-08 基于跨层设计联合深度q网络的水声通信能量优化方法

Country Status (1)

Country Link
CN (1) CN116419290B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117560093B (zh) * 2024-01-11 2024-04-02 汉江国家实验室 分布式水声网络多址接入方法、装置、设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106788782A (zh) * 2016-12-06 2017-05-31 哈尔滨工程大学 水声通信网络ofdm链路物理层与mac层跨层通信方法
CN114390469A (zh) * 2022-03-23 2022-04-22 青岛科技大学 基于跨层协作的三维柱状水声传感器网络的寿命延长方法
CN114980178A (zh) * 2022-06-06 2022-08-30 厦门大学马来西亚分校 一种基于强化学习的分布式pd-noma水声网络通信方法及***
CN115987886A (zh) * 2022-12-22 2023-04-18 厦门大学 一种基于元学习参数优化的水声网络q学习路由方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050251725A1 (en) * 2004-05-06 2005-11-10 Genieview Inc. Signal processing methods and systems

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106788782A (zh) * 2016-12-06 2017-05-31 哈尔滨工程大学 水声通信网络ofdm链路物理层与mac层跨层通信方法
CN114390469A (zh) * 2022-03-23 2022-04-22 青岛科技大学 基于跨层协作的三维柱状水声传感器网络的寿命延长方法
CN114980178A (zh) * 2022-06-06 2022-08-30 厦门大学马来西亚分校 一种基于强化学习的分布式pd-noma水声网络通信方法及***
CN115987886A (zh) * 2022-12-22 2023-04-18 厦门大学 一种基于元学习参数优化的水声网络q学习路由方法

Non-Patent Citations (6)

* Cited by examiner, † Cited by third party
Title
仲崇显 ; 李春国 ; 杨绿溪 ; .多业务MIMO-OFDMA/SDMA***跨层调度与动态资源分配.通信学报.2010,(第09期),全文. *
多业务MIMO-OFDMA/SDMA***跨层调度与动态资源分配;仲崇显;李春国;杨绿溪;;通信学报(第09期);全文 *
水声网络中的跨层设计研究;许肖梅;邹哲光;;声学技术(第03期);全文 *
移动性无线传感器网络吞吐量跨层优化;丁凡;周永明;;电子技术应用(第02期);全文 *
能量受限的水下无线传感器网络设计研究;杨鸿宇;中国优秀硕士学位论文全文数据库;正文第2-4章 *
许肖梅 ; 邹哲光 ; .水声网络中的跨层设计研究.声学技术.2012,(第03期),全文. *

Also Published As

Publication number Publication date
CN116419290A (zh) 2023-07-11

Similar Documents

Publication Publication Date Title
US11748628B2 (en) Method for optimizing reservoir operation for multiple objectives based on graph convolutional neural network and NSGA-II algorithm
CN116419290B (zh) 基于跨层设计联合深度q网络的水声通信能量优化方法
Chen et al. QMCR: A Q-learning-based multi-hop cooperative routing protocol for underwater acoustic sensor networks
CN109803291B (zh) 基于水声传感器网络的健壮拓扑生成方法
Liu et al. AUV-aided hybrid data collection scheme based on value of information for Internet of Underwater Things
CN111132200B (zh) 基于势博弈与刚性子图的三维水下网络拓扑控制方法
Fei et al. Energy-efficient clustering algorithm in underwater sensor networks based on fuzzy C means and Moth-flame optimization method
Wang et al. Node energy consumption balanced multi-hop transmission for underwater acoustic sensor networks based on clustering algorithm
CN111065107A (zh) 基于量子遗传算法的水下无线传感器网络安全路由控制方法
CN109362048B (zh) 基于无线传感器网络的地下管廊检测方法
CN115866735A (zh) 一种基于超模博弈水下传感网络跨层拓扑控制方法
CN111526555A (zh) 基于遗传算法的多跳路由路径选择方法
Song et al. [Retracted] A Dynamic Hierarchical Clustering Data Gathering Algorithm Based on Multiple Criteria Decision Making for 3D Underwater Sensor Networks
CN113923123B (zh) 一种基于深度强化学习的水下无线传感器网络拓扑控制方法
CN103701647B (zh) 一种无线网络拓扑优化生成方法
CN108650030B (zh) 水下无线传感器网络的水面多个汇聚结点部署方法
Chen et al. An underwater layered protocol based on cooperative communication for underwater sensor network
CN115987886B (zh) 一种基于元学习参数优化的水声网络q学习路由方法
CN110391851B (zh) 基于复杂网络理论的水声传感器网络信任模型更新方法
CN115843083A (zh) 基于多智能体强化学习的水下无线传感器网络路由方法
CN114139459B (zh) 一种基于约束多目标优化算法的无线传感器配置优化方法
CN113938978B (zh) 一种基于强化学习的异构无线传感器寻路方法
Zhu et al. A Q-Learning and Data Priority-Based Routing Protocol with Dynamic Computing Cluster Head for Underwater Acoustic Sensor Networks
Fang et al. Heterogeneous multi-AUV aided green internet of underwater things
CN102882727B (zh) 一种层次化监测网络的监测区域划分方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant