岗位职责
•5~8年在大数据平台上开发可扩展数据湖/数据仓库的经验。
•对Spark SQL/Hive SQL语言有深入的了解和经验，对Presto或其他MPP数据库有很好的了解。
•对Airflow或其他数据仓库调度工具有良好的经验。
•有良好的数据仓库建模经验。
任职要求
•熟悉AWS S3、EMR、lambda和AWS组件或其他云上的类似技术栈
•有实时数据处理、流数据处理经验者优先
•有Python编程经验
•在产品和工程领域建立积极关系的强大技能。
•能够快速掌握新的编程语言、技术和框架。