关键职责&任务:
1、负责前端视频、图像采集设备和各类业务系统数据的接入、治理方案 包含元数据、数据标准、数据质量、数据安全等、的制定、并完成落地实施;
2、负责现场提升数据质量、建立数据质量业务规则、提出数据质量改进计划、根据业务需要为数据仓库的实现提供支持;
3、负责部分数据应用的数据接口配置及数据问题发现、排查和解决;
核心技能:
1、精通ETL相关数据工具实现海量数据的接入、加工处理;
2、熟练掌握Linux常规命令与工具;
3、熟练掌握至少两种大数据组件的原理和使用、包括Hbase、kudu、Kafka、Hive、MapReduce等;
4、了解数据治理体系架构、对数据标准、数据质量、信息模型、元数据管理、SQL解析、数据血缘等方法有基础研究;
5、至少一年及以上数据相关工作经验;
关键素质:
1、责任心
2、严谨细致
3、信息收集
4、洞察力
5、学习能力