工作职责:
1.负责公司数据湖仓一体平台的架构设计、开发;
2.负责业务数据建模、数据处理和分析的开发和实现;
3.负责AI融合数据处理的实现;
任职要求:
1 具有大数据平台的开发经验,包括但不限于元数据管理,数据采集,作业调度,数据清洗、转换、脱敏,数据质量管理和驾驶舱开发。
2 熟悉Iceberg或Hudi,Atlas,SeaTunnel或Nifi或Kettle,Flink CDC或Debezium,DolphinScheduler,Spark,Flink,FineBI或Superset至少几种以上技术。
3 熟悉SpringBoot微服务技术体系,熟悉java技术开发。
4 有BERT/BI/Elasticsearch经验更佳。