个人简介

现于哈尔滨工业大学(深圳)控制科学与工程专业攻读硕士学位,研究方向为机器人强化学习算法。本科就读于哈尔滨工业大学(深圳)自动化专业,专业排名前 3%。作为 RLG实验室 成员,长期关注强化学习、模仿学习、机器人控制与运动规划等方向,已发表 IROS-2025 会议论文一篇,并获 RoboMaster 高校人工智能挑战赛全国一等奖。完整简历见 CV

教育背景

  • 工学硕士,控制科学与工程 哈尔滨工业大学(深圳) RLG实验室,2024.09 - 2027.03
    • 核心课程:非线性与自适应控制(96)、最优估计(94)、凸优化与最优控制(91)、矩阵分析(95)
    • 奖励荣誉:IROS-2025(一作)RoboMaster 高校人工智能挑战赛(全国一等奖)
  • 工学学士,自动化 哈尔滨工业大学(深圳) 2020.09 - 2024.06
    • 平均绩点:91.84;专业排名:8/237;英语水平:CET-6
    • 核心课程:自动控制理论A(100)、自动控制理论B(94)、信号分析与处理(94)、概率论(97)
    • 奖励荣誉:全国大学生智能汽车竞赛(全国一等奖)、星闪杯高校应用挑战赛总决赛(全国第二名)、学业奖学金(3次)、北大核心期刊(1篇)、软件著作权(1项

实习经历

京东科技集团

具身智能算法 - 金刚项目组 | 2026.05 - 至今

项目描述:基于强化学习实现轮足机器人长距离无图导航,融合语义感知提升复杂环境下的通行与交互决策能力。

  • 网络架构设计:采用 RegNet-FPN 分别编码深度图与语义特征,引入 Cross-Attention 融合视觉特征、本体状态和目标信息,并接入 SRU 增强长距离导航中的空间记忆能力;
  • 鲁棒策略训练:设计异常目标点鲁棒性策略,建立深度图噪声模型,设计域随机化策略,提升模型在真实复杂环境下的泛化与容错能力;
  • 语义决策设计:基于行人、设施状态和道路区域语义设计奖励与引导策略,实现主动让行、设施关闭等待、区域通行优先级选择及环境自适应调速。

项目成果:模型实机上线,相较 MPPI 方法导航效率提升 50%,支持行人主动让行、设施关闭等待、语义区域选路及环境自适应调速,显著减少复杂交互场景中的人工接管。


大疆创新科技有限公司

AI模型算法 - 飞行系统部 | 2025.04 - 2025.09

项目一:基于强化学习的涵道穿越机刹车姿态控制

项目描述:针对涵道穿越机刹车跑姿态问题,采用强化学习方法降低刹车阶段跑姿态概率。

  • 空气动力学建模:基于实机飞行数据训练残差动力学模型;提出单桨叶残差网络架构,大幅提升数据利用效率与模型泛化性;成功在仿真中复现刹车跑姿态现象;
  • 强化学习训练:基于 rsl 库设计刹车场景的观测空间、奖励函数与课程学习机制完成策略训练,采用扫频频谱辨识域随机化数据回放方法实现 Sim2Real 迁移。

项目成果:实测RL较传统方法降低跑姿态概率50%以上,并实现不同风速下刹车速度的自适应调节。

项目二:基于可微仿真的无人机智能跟拍算法

项目描述:构建基于可微物理仿真的训练框架,解决 PPO 训练难收敛问题,实现无人机智能避障跟拍。

  • 仿真器开发:基于 PyTorch 构建可微无人机模型,采用 CUDA 算子实现高效距离场计算 (10000+ FPS),实现单卡20分钟内收敛;
  • 网络设计:搭建 CNN+GRU+多头MLP 架构,融合语义深度图、本体状态及用户指令等;多头解耦输出虚拟指令、行人预测速度与 Jerk 轨迹;
  • Loss与决策:设计语义避障 Loss 和轨迹一致性 Loss,提高轨迹平滑性与避障能力;针对遮挡工况引入虚拟指令 Loss,驱动策略网络实现跟拍模态自主切换。

项目成果:打通完整训练Pipeline并完成实机验证;实现智能避障、跟拍自动降高与切尾随等功能。

研究经历

基于强化学习的无人机被动容错控制算法研究

负责人 | 2024.01 – 2025.01 项目描述:基于强化学习方法实现无人机在任意单个旋翼失效任意程度下仍能保持有效的位置控制。

  • 架构设计:提出 Selector-Controller 网络架构,实现“故障感知-容错控制”一体化框架;
  • 仿真搭建:构建旋翼故障模型,基于 OpenMP 与 Pybind 实现底层并行加速与 Python 接口封装;
  • 策略训练:设计状态观测空间、奖励函数及针对性故障场景,采用强化学习行为克隆联合训练;
  • 实机验证:完成模型参数辨识,采用域随机化实现 Sim2Real,将策略成功部署至 PX4 飞控实测。

项目成果IROS-2025J. Chen, K. Zhao, Z. Liu, Y. Li and Y. Lou, “Learning-Based Passive Fault-Tolerant Control of a Quadrotor with Rotor Failure,” 2025 IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS), Hangzhou, China, 2025, pp. 1876-1883, doi: 10.1109/IROS60139.2025.11245951.


基于MPCC的狭窄空间多机器人运动规划

负责人 | 2023.10 – 2024.01 项目描述:采用模型预测轮廓控制(MPCC)实现多机器人时空动态避障

  • 规划模块:采用 MPCC 将时空两个维度同时引入优化问题中,实现多机器人的动态避障
  • 控制模块:采用 MPC 提高控制频率使算法满足实时性要求。

项目成果:将方法在实际机器人上进行验证,并发表中文核心期刊一篇。

项目经历

基于强化学习的无人机端到端高速导航

竞赛,队长 | 2026.03 - 2026.06

项目描述:构建可微预训练+强化学习端到端训练框架,实现复杂赛道中的高速避障飞行。

  • 仿真器开发:基于 CUDA 搭建赛道环境,通过扫频实验辨识无人机惯量、延时等关键参数,并基于 PyTorch 构建并行可微的质点模型与完整动力学模型;
  • 训练框架:针对高维视觉输入下强化学习难收敛问题,提出可微仿真预训练+强化学习两阶段训练流程,兼顾可微方法收敛快与强化学习奖励设计灵活的优势;
  • 策略设计:设计状态观测、奖励函数与课程学习机制,引入 SRU 时序网络增强策略空间记忆能力,提升视野受限场景下的高速避障与自主减速能力。

项目成果RoboMaster 高校人工智能挑战赛(全国第六名)。

基于鱼眼相机的全景环视拼接

核心成员 | 2023.11 – 2024.01

项目内容:基于车辆前后左右方向的四个鱼眼摄像头实现鸟瞰图拼接,主要方法包括: 去畸变、定位与投影、图形拼接、亮度平衡和多线程加速.

成果:星闪杯高校应用挑战赛总决赛 (全国第二名)


永磁同步电机模拟负载系统

负责人 | 2022.04 – 2023.04

项目内容:使用永磁同步电机(PMSM)模拟可调阻尼、弹簧、随机扰动等负载情况。

  • 电路硬件设计: 设计系统电路原理图,主要包含主控芯片、电源转换、外设接口、功率放大和信号采集部分;设计PCB并进行打板,焊接,测试实物电路板。
  • 软件算法设计: 实现对电机电磁力矩的控制以及获取电机角速度速角加速度,主要包括电机参数的辨识、电机矢量控制算法、滑模反电动势观测器拓展卡尔曼滤波器的设计与实现。在Matlab仿真和STM32实物平台上验证算法。

成果:软件著作权一项


基于深度学习的FPGA目标物体识别系统

负责人 | 2022.09 – 2022.11

项目内容:使用FPGA纯硬件语言实现手写数字识别,结合FPGA并行构架特点对网络模型进行加速,设计多级流水线,在资源受限的FPGA平台上实现500Hz的处理频率。


基于深度学习的电磁循迹小车

竞赛,核心成员 | 2021.01 - 2021.08

项目描述:对小车的软硬件进行设计,控制小车对电磁轨迹赛道进行跟踪,并以最快的速度完成比赛。

  • 硬件设计:设计与制作小车的单片机主控电路板、电机驱动电路板和信号采集整流放大电路板;
  • 控制模块:结合神经网络对不同的方案进行探索并验证(特征分类或行为克隆)。

项目成果:第十六届全国大学生智能汽车竞赛(全国一等奖)。


技术能力

  • 掌握常见的机器人学习算法(强化学习、模仿学习等)、控制算法(PID、MPC、LQR、INDI、滑模、反步等)、感知算法(卡尔曼滤波、粒子滤波等)、规划算法(A*、RRT、MinimumSnap、MPCC 等)
  • 掌握机器人技术栈(Isaac Lab、Pytorch、Tensorflow、OpenCV、Gazebo、ROS、CMake、Docker 等)
  • 熟练使用 C、C++、Python、Matlab 等编程语言;掌握 Linux 开发、单片机开发、电路设计及 PCB 制作。

社团经历

南工绝影智能车战队

副队长 | 2021.09 - 2023.09

负责战队招新、培训、日常周会等事宜;协助组织第16届全国大学生智能汽车竞赛广东省赛,协助组织第17届全国大学生智能汽车竞赛华南赛区区域赛,带队参加第17届全国大学生智能汽车全国总决赛。