工作职责:
1、 负责各个产品线的水下机器人(ROBOLAB、ROBO-ROV、ROBO-FISH 等)的视觉子系统设计和图像增强、目标识别等视觉算法研发工作;
2、 负责基于全局视觉的仿生金龙鱼定位和姿态识别算法研发工作;
3、 负责水下三维重建和水下全景视频拼接技术的研发工作。
主要项目经历:
1. 水下机器人视觉子系统和相关视觉算法研发项目
项目介绍: 水下机器人包括有缆控制的 ROV 和无缆自主运动的 AUV 两大系列,主要完成水下观测和作业等任务。其中视觉子系统是水下机器人的重要组成部件,它的性能在很大程度上影响着水下机器人能否正常完成任务。
主要工作: 负责水下机器人视觉子系统所使用的摄像头的选型、标定、测试、优化等工作。并针对具体应用需求,研发相应的视觉算法,如导航线检测,海洋生物(海参、扇贝等)识别,图像滤波矫正,图像去雾增强,双目深度估计,RTSP 流媒体处理等。视觉算法主要基于 OpenCV 库和 Tensorflow 框架开发,C++和 Python 实现,在 x64、Jetson TX2、Jetson Nano 等平台上进行部署。
2. 仿生金龙鱼定位和姿态识别项目
项目介绍: 通过全局视觉对仿生金龙鱼进行定位和姿态识别,实现对其远程运动控制功能。
主要工作: 采集真实的金龙鱼运动图像,提取其运动姿态得到鱼体波运动方程,作为仿生鱼运动控制参数;采用全局视觉对仿生金龙鱼进行定位并识别其姿态,根据预设目标点进行路径规划后计算得到运动控制指令,通过射频模块发送控制指令给仿生金龙鱼,实现控制仿生金龙鱼沿预设目标航线巡游的效果。