岗位职责
1、基于阿里集团大数据技术体系,负责大数据技术体系的规划建设,应用数据仓库技术解决业务痛点;
2、跟踪和调研大数据处理和分析的新技术,推动大数据平台技术持续演进;
3、构建大数据质量体系,持续提升数据质量;
4、促进跨业务线的数据融合,通过技术和业务场景的紧密结合,让数据发挥最大业务价值。
岗位要求
1、3年以上大数据处理研发经验;
2、扎实的SQL开发能力;
3、熟练使用数据库同步、日志采集工具;
4、熟悉hadoop、HDFS、Hbase、Hive等技术;
5、熟悉flink、storm或spark streaming等流式或流批一体处理框架中的一种或多种;
6、熟练掌握数据仓库建模和ETL设计方法论;
7、有基于数据分析推动业务提升或优化的实际案例;
8、有数据挖掘、机器学习经验者优先考虑;
9、有大型电商系统大数据分析经验者优先考虑。