-
题名基于全局状态预测与公平经验重放的交通信号控制算法
- 1
-
-
作者
缪孜珺
罗飞
丁炜超
董文波
-
机构
华东理工大学信息科学与工程学院
-
出处
《计算机应用》
北大核心
2025年第1期337-344,共8页
-
基金
国家自然科学基金面上项目(62276097)
上海市自然科学基金资助项目(22ZR1416500,23ZR1414900)
上海市基础研究特区计划项目(22TQ1400100-16)。
-
文摘
为了应对交通拥堵而设计的高效交通信号控制算法能提升现有交通网络下的车辆通行效率。尽管深度强化学习算法在单路口交通信号控制问题上已展现出卓越的性能,然而这些算法在多路口环境下的应用仍然面临着重大的挑战——多智能体强化学习(MARL)算法产生的时间和空间的部分可观测性引发的非平稳性问题会导致这些算法无法稳定的收敛。因此,提出一种基于全局状态预测与公平经验重放的多路口交通信号控制算法IS-DQN。一方面,基于不同车道的车流历史信息预测多路口的全局状态,从而扩展IS-DQN的状态空间,以避免算法产生空间部分可观测性而带来非平稳性问题;另一方面,为应对传统经验重放策略的时间部分可观测性,采用蓄水池抽样算法来保证经验重放池的公正性,进而避免其中的非平稳性问题。在复杂的多路口环境下应用IS-DQN算法进行3种不同的交通压力仿真实验的结果表明:在不同交通流情况下,尤其是在中低交通流量下,相较于独立的深度强化学习算法,ISDQN算法能得到更短的车辆平均行驶时间,并表现出了更优的收敛性能与收敛稳定性。
-
关键词
深度强化学习
交通信号控制
时序预测
蓄水池抽样算法
长短期记忆
-
Keywords
deep reinforcement learning
traffic signal control
time series prediction
reservoir sampling algorithm
Long Short-Term Memory(LSTM)
-
分类号
TP181
[自动化与计算机技术—控制理论与控制工程]
-
-
题名直扩水声通信机的码同步技术研究
被引量：1
- 2
-
-
作者
赵文龙
吴承安
王景景
牛秋娜
-
机构
青岛科技大学信息科学技术学院
-
出处
《青岛科技大学学报（自然科学版）》
CAS
2024年第1期129-137,共9页
-
基金
国家自然科学基金重点项目(U1806201)
山东省自然科学基金重大基础研究项目(ZR2021ZD12).
-
文摘
为了降低扩频码同步技术对硬件的依赖,提高水声通信机的性能,对传统直接序列扩频码同步技术进行了一些改进。扩频码同步技术包括码捕获和码跟踪两个阶段,在码捕获阶段,采用双倍补零法扩展接收信号与接收机本地扩频码序列,使两者满足基二快速傅里叶变换运算的要求;在控制逻辑部分采用蓄水池抽样算法来确定范围内载波频偏值的计算顺序,无需按照固定顺序遍历范围内的载波频偏值,从而减少了计算量。在码跟踪阶段,采用了全时间超前-滞后非相干相关同步跟踪回路,采用双Δ值延迟锁相环的设计,扩大了跟踪范围,降低了失锁概率。最后基于DSP平台实现了直接序列扩频水声通信系统,该系统通过了水箱实验环境的测试。
-
关键词
直接序列扩频
伪码同步技术
蓄水池抽样算法
DSP
-
Keywords
DSSS
PN code synchronization technology
reservoir sampling algorithm
DSP
-
分类号
TN929.3
[电子电信—通信与信息系统]
-
