工作描述: 就职于阿里云IoT事业部,从事java后端服务开发,熟悉物联网、视频监控、网络通信、分布式架构、消息队列、多线程等领域及技

术,以下是具体参与和独立开发的产品

1、三维城市交通仿真系统

使用Unity独立开发了三维城市交通仿真系统,用于模拟车辆在城市中前往目的地时,通过泊位调度算法对车辆进行泊位引导、路线

规划;

2、智能停车调度平台,数据接入边缘应用开发

智能停车调度平台是基于城市全域、片区的车位数据,对车辆进行停车泊位调度引导。其中我负责开发场库停车系统的数据对接边缘

应用,获取场库内车位数据并同步到云端调度平台;

3、智能语音对话平台

独立开发了智能语音对话平台,实现语音对话、知识问答、多端联动、语义理解、场景识别等功能;

实时数据通信模块:采用netty开发的rtc实时音频通信模块作为智能语音对话的通信层,实现端侧和服务端之间的实时语音传输通

道;

语音转义ASR模块:采用达摩院的ASR算法服务作为智能语音对话平台的语音转文本的算法层,实现端侧传输到服务端的用户音频转

成文本;

语义理解NLU模块:采用开源深度学习框架Rasa构建了NLU语义理解算法服务,实现对转义后的文本进行语义分析、实体提取、文

本分类;

对话管理模块:基于状态机开发了对话管理模块,用于管理会话状态流转、会话管理、算法服务调用;

音频合成TTS模块:采用达摩院TTS算法服务作为音频合成层,将用户端和对话平台会话结果通过TTS合成音频实时传输到端侧播

放,实现语音对话功能;

衍生的服务模块:通过对执法仪的执法视频的音视频分离,对音频进行ASR转义生成文本作为视频的字幕;同时对转义后的文本,按

语句进行NLU分析实现文本分类,从而实现对执法过程的不同场景进行识别和快速溯源定位;基于实时数据通信模块实现集群环境

下,多端通过扫码进入同一通信房间,实现多端之间的互相即时通信,发送控制命令进行多端联动;

4、视频汇聚平台

独立开发了视频汇聚平台服务端,实现对GB28181、OnVif、rtsp、rtmp协议的大规模视频设备的接入管理、设备控制、直播、转

码、语音广播、语音对讲、录像回放、录像下载、按需抓图、定时任务抓图等功能;

多协议接入网关:通过开发GB28181协议sip服务器,实现对国标监控设备的接入、控制、管理、级联等功能;通过开发OnVif功能,

实现对OnVif协议的设备发现、设备探测、设备能力集获取、设备媒体Profiles的获取,从而实现OnVif设备接入管理能力;对于rts

p、rtmp流协议设备,通过ffmpeg拉流转发实现设备的接入能力;

流媒体网关:基于开源流媒体服务作为媒体网关,实现对直播流、录像回放流、音频流的接入、转发能力;同时对流进行管理,实现

流复用能力;使用ffmpeg gpu加速,实现对音视频流的转码服务;

应用域:在应用域实现对quartz定时任务的管理、设备状态监测、视频流转存任务的管理、ffmpeg子进程的管理等;

Web服务层:通过web服务层对外提供rest api服务;

工作描述: 1.在上海电气中央研究院期间,参与上海电气自有品牌SCADA工业组态软件的开发,主要负责组态软件与工业设备间的通信驱动开发

和scada控件开发。熟悉modbus通信协议,电力规约IEC101、IEC103,tcp/ip网络通信和wpf,并且搭建了该组态软件的多种控制器

组成的测试平台,熟悉西门子plc及工控行业;

2.后期负责采用unity3d引擎做工业领域的虚拟仿真软件,并使用unity3d引擎完成了一个轨道交通方面的仿真软件开发,主要功能模块

包括采用用ngui制作UI,场景模型的逻辑控制、车辆模型的无人自动驾驶功能实现、modbus通信接口以及对软件的性能优化。对uni

ty引擎有较深的认识,c#基础较好,熟悉3dmax和maya建模软件,能制作基本的模型;

3.使用unity做了一个虚拟泵站的项目,实现和Scada系统的联动,实现了在unity中接入rtsp视频流并显示出来,在unity中实现了tile

Map地图功能;

4.参与上海地铁9号线3期的视频监控项目,负责视频监控客户端的开发,使用java开发了CCTV视频监控客户端软件,实现了目前主

流CCTV客户端的功能。

5.2017年8月份去美国田纳西州河流域管理局参加了openhistorian实时数据库开发培训;

6.使用unity开发hololens应用,实现语音交互、手势交互功能,并使用vuforia实现物体识别功能;