大数据开发

大数据架构师方向、离线开发方向、实时开发方向都欢迎投递!!!

职位描述:

参与公司大数据平台的设计与开发,保证平台正常运行,确保数据的高效流通和价值挖掘。

根据业务需求,负责设计和开发高效、可扩展的大数据解决方案,包括数据采集、清洗、转换、存储、分析等全流程。

与业务和产品团队紧密合作,深入理解数据需求,提供数据支持及技术保障,确保数据驱动的决策和产品优化。

持续研究大数据领域的前沿技术,推动新技术的落地应用,提升数据架构的整体效率。

任职要求:

计算机相关专业,本科及以上学历,具备2-7年大数据开发经验。

精通 Java 或 Scala 开发,熟悉Python、Shell等脚本语言。

熟悉主流大数据离线技术,具备Hadoop、Hive、Spark等开发和调优经验,了解底层原理,能够处理常见离线问题。

熟练掌握 SQL,有丰富的ETL开发经验,熟悉数据仓库建模等知识。

至少具备ClickHouse、StarRocks、Drios等一项OLAP存储引擎使用经验。

具备较强的沟通能力、团队合作精神及自我驱动能力,能够快速适应和解决复杂技术问题。

了解Flink等实时计算框架和Spring等常见技术。

具备CDH集群管理经验者优先。

公司地点:北京海淀区泰兴大厦(花园东路)泰兴大厦4层

公司简介:

职位发布者:廖女士

北京短剧快照科技有限公司

融资阶段:

公司规模:

相似职位: