岗位要求:
1. 统计学、应用数学、计算机科学或相关专业本科及以上。
2. 有3年及以上数据分析相关的工作经验,有实时数据处理经验。
3. 熟悉主流数据库,如Oracle,Mysql等
4. 熟悉Hadoop全家桶以及各自之间的关系,如hive,sqoop,Hbase,hdfs,yarn等
5. 熟悉主流数据处理框架,如Saprk,flink,HSql等
6.熟悉至少一种实时流工具,如FlinkCDC、Debezium、Flume等
7. 熟悉实时数据计算引擎,如Spark Streaming,flink等
工作职责:
1.参与对接业务报表需求,负责日常数据处理和报表开发、数据验证、报表维护。
2.不断总结,优化数据收集策略,适应业务发展的变化。