岗位职责:
1、负责公司海量数据的存储规划,大数据标签平台搭建;
2、负责数据工具(数据采集、处理、可视化等)的后台架构设计和核心代码开发;
3、为业务提供高性能、稳定的数据产品服务;
4、负责数据建模、清洗算法设计、数据维护等
任职要求:
1、5年以上大数据相关系统研发和性能优化经验,有大数据平台框架搭建经验;
2、熟练使用大数据相关技术:hdfs、Spark、Flink、Hive、Kafka、HSql、clickhouse、sqoop等;
3、熟悉多种数据存储引擎和中间件:Mysql、Hbase、TIDB、Redis、ElasticSearch等;
4、具有丰富的数据架构、数据ETL、大数据技术栈优化开发经验(5年以上)
5、具备大数据开发能力,熟悉至少一门大数据开发语言,如:Java、python