主要职责:
1.AIOT相关硬件产品化,包括技术方案制定,供应商导入或自研,测试与验证,量产与维护等;
2.与项目经理,产品经理,商务,供应链等协调,结合系统与算法,落实全套软硬件解决方案;
3.专注于视觉相关产品的技术实现,开发各类相机模组(单目,红外双目,3D结构光等),从Lens,Sensor,ISP,到接口,外设的全套技术方案构建,同时兼顾图像调优与测试;
4.AI算法联调落地,根据产品实际情况,确认算力需求,选择算法的植入方式,如端侧算法或是云端算法等,对应视觉算法,语音算法,或大模型等,测试并推进产品从demo到产品化转变;
5.建立硬件相关产品标准,产品迭代与性能优化;
6.创新产品的预研与探索;
主要设及产品线:
1.模组产品线:包括单目/双目相机模组,3D结构光模组,语音模组等;
2.IPC与面板机产品线:包括各类IP camera,各类刷脸面板机,各类人证核验机等;
3.边缘计算盒子:包括各类有线/无线边缘算力盒子;
4.其他创新产品,如智能鼠标,数字人等;
主要能力:
1. Camera专家,精通图像处理全套流程,lens,sensor,ISP,编解码,无线/有线通信全套技术栈;
2. 多个AIOT产品与系统从零到一的实现及算法落地经验;
3. 硬件测试/开发/项目管理/产品管理等均可胜任;
4. PMP/NPDP;
典型项目:红外双目相机模组/3D结构光模组
多种相机模组应用于各种行业(如金融,安防等),应用于整机产品(如面板机,刷脸支付等),结合云从人脸识别算法组成系统;
1.技术方案制定,包括lens(视角,焦距,光圈,接口,工艺,结构,清晰度,成像孔径,CRA等等),sensor(像素,尺寸,阵列,帧率,接口,动态范围,工艺,灵敏度,光谱响应等),ISP(处理能力评估,如与sensor是否匹配,坏点矫正,Demosaic,色彩矫正,Gamma矫正,3A,降噪,HDR,输出分辨率与帧率等),视频流输出(YUV,MJPEG,H264/H265等),接口(MIPI,USB等),外设(补光,电机,滤光片等等),并导入供应商;
2.详细硬件电路设计跟进,出Demo样机,初步图像调试,同时制定产品标准,测试验证功能/性能/可靠性/稳定性等;
3.结合系统与整机做联调,配合整机软/硬件与算法,调优性能,如活体检测,人脸检测,人脸比对等,结合算法质量要求与通用硬件功能/性能等质量要求,持续优化产品性能;
4.推进Demo样机到量产,期间会再有1-2次技术方案调整与迭代;
5.最终推向市场,如放在支付PAD,刷脸面板机,人证核验等;
最近的项目:无人售货柜
一个完全创新的项目与产品,市场上没有任何先例可以参考,通过两年的摸索,产品逐步走向成熟,主要包括:
1. 导入全套无人货柜智能套件,包括商品识别相机模组,算力与控制单元,锁,称重,刷脸支付与显示等,并组成系统:
a. 硬件技术方案制定:
i. 商品识别相机方案的制定:镜头,sensor,ISP选型,接口确定,根据算法需求,确认关键技术指标;
ii. 算力盒子方案制定,基于视频与算法的处理能力,芯片方案选型,操作系统确认,外设与接口的设计需求,对外通信与传输方式等;
iii. 其他外设,如锁,称重,刷脸模组,显示等等对应接口定义与接入;
b. 系统硬件详细设计,并与供应商确认初步方案,并制定测试计划;
c. 算法联调:包括端侧算力方案与云端算力方案,针对商品检测场景配合算法持续调优,提升算法检出率(如算法结算占比达到50%+),降低误识率(如误识率<1%等),形成可商业化的运营需求;
d. 测试与迭代,单个产品测试与系统测试,以确保产品功能/性能/可靠性/稳定性符合要求;
e. 系统试运营与数据分析,修复主要问题,导入量产计划,产品初步发布等;
2. 产品迭代与降本:
a. 与整机厂商合作,发布完整无人货柜产品的整机联调测试;
b. 套件的降本:在不影响算法质量的前提下,对主控,相机,锁等硬件单元持续将本并迭代;
c. 套件的迭代:如新增重力模块以提升算法检出率;新增客流统计算法以提升产品的附加价值;移除刷脸屏以降低不必要的系统成本,调整相机的安装位置以更好的适应算法,接入温控器以便于控制货柜,调整主控的接口,以适应双门柜的新需求等等各种技术方案的设计与验证;
3. 产品性能的提升与问题修复:
a. 相机图像质量提升,调优图像并提升算法的准确率;
b. 网络传输速率的优化,包括编解码调优,天线优化等等;
c. 各种运营过程的问题分析与修复,如锁控逻辑完善,EMI相关问题分析与优化等;
d. 各模块组件的固件版本发布与维护;