人脸识别及大数据采集 devOps
2018.7~2018.12,负责卡中心人脸识别项目,使用 SpringBoot 进行开发微服务应用,白天和晚上分别调用人行联网核查和公安查询中心接口,使用 ftp 服务器作为本地缓存,最后调用总行人脸比对接口,进行判断是否为同一人。
2019.1~至今,主要负责大数据采集开发运营,新旧核心切换,外围流量数据写入 GoldenDB,数据采集器从 GoldenDB 采集 DDL 日志(canal 采集 mysql 的 binlog,并写入 kafka,strom 从kafka 读取消息并进行加工再写到 hbase 和 es),如若遇到采集出问题,根据监控查出对应出问题环节并进行排查,并进行恢复。
人脸识别系统
在 Keras 框架(Tensorflow 后端)中利用 CNN 算法做出人脸识别系统,CNN 算法中采用三层卷积
和池化层,用relu 等激活函数保留图像特征,dropout 层用于防止过拟合,使用softmax 层进行分类。在 keras 框架下进行模型训练,Opencv 进行人脸检测,调用训练好的模型进行识别分类