大数据工程师

岗位职责:

1、设计并开发高效的数据仓库系统,支持数据分析与报表需求

2、搭建、运维并优化大数据平台(Hadoop、HBase、Hive、Spark 等)

3、使用 Java 语言开发和维护数据处理服务与后台业务系统

4、构建并维护结构化和非结构化数据的采集与处理流程(ETL/ELT)

5、优化数据存储和查询性能,提升系统稳定性与可扩展性

6、与数据分析、区块链开发团队协作,支持 Web3 项目的数据需求

7、编写相关技术文档,维护架构图、数据流程文档等

任职要求:

1、计算机、软件工程或相关专业本科及以上学历

2、至少 3 年以上数据仓库开发与大数据平台运维经验

3、熟悉 Hadoop 生态系统(HDFS、YARN、HBase、Hive、Spark 等)

4、扎实的 Java 编程能力,能独立开发后端系统

5、熟悉常用 SQL 和数据建模设计(HiveQL等)

6、了解 Web3 基础知识优先,如智能合约、代币、链上数据结构等

7、熟练使用 Linux 系统及 Shell 脚本,有良好的系统排障能力

公司地点:深圳南山区卓越前海壹号B座111

公司简介:

职位发布者:毛先生

深圳星晨大海科技有限公司

融资阶段:

公司规模:

相似职位: