岗位职责:
1、设计并开发高效的数据仓库系统,支持数据分析与报表需求
2、搭建、运维并优化大数据平台(Hadoop、HBase、Hive、Spark 等)
3、使用 Java 语言开发和维护数据处理服务与后台业务系统
4、构建并维护结构化和非结构化数据的采集与处理流程(ETL/ELT)
5、优化数据存储和查询性能,提升系统稳定性与可扩展性
6、与数据分析、区块链开发团队协作,支持 Web3 项目的数据需求
7、编写相关技术文档,维护架构图、数据流程文档等
任职要求:
1、计算机、软件工程或相关专业本科及以上学历
2、至少 3 年以上数据仓库开发与大数据平台运维经验
3、熟悉 Hadoop 生态系统(HDFS、YARN、HBase、Hive、Spark 等)
4、扎实的 Java 编程能力,能独立开发后端系统
5、熟悉常用 SQL 和数据建模设计(HiveQL等)
6、了解 Web3 基础知识优先,如智能合约、代币、链上数据结构等
7、熟练使用 Linux 系统及 Shell 脚本,有良好的系统排障能力