岗位职责
1、参与公司广告平台大数据模块开发,建设面向业务的广告大数据平台;
2、负责广告大数据平台相关的数据管理和开发工作,如设计埋点采集方案、数据清洗、业务逻辑还原、海量数据即席或实时计算、数据安全和使用权限规范的制定,并推动实施落地 ;
3、负责来自业务团队及数据分析团队数据需求的研发支撑。
职位要求
1、从事数据仓库领域工作至少3年以上,熟悉数据仓库模型设计方法论,并有实际模型设计及ETL开发经验;
2、掌握离线和实时大数据开发技术,如Hive、Spark、flink等技术,灵活运用SQL实现海量数据ETL加工处理;
3、熟悉数据仓库领域知识和管理技能,包括但不局限于:元数据管理、数据质量、性能调优等
4、有从事分布式数据存储与计算平台应用开发经验,熟悉Hadoop生态相关技术并有相关实践经验者优先;
5、掌握一门或多门编程语言优先,如Java、Python、shell等;
6、熟悉常用的实时数据处理技术者优先,如Flink、Storm、Spark Streaming等;
7、良好的语言沟通与表达能力和自我驱动动力。