职位描述
•Java
•Spark
•Flink
•计算机相关专业
•大数据开发经验
•数仓建设经验
岗位职责:
1. 专利数据加工生产,日常维护更新,数据问题修改处理
2. 数据仓库的构建和维护,框架看护,架构升级
3. 参与专利数据治理,工具开发等
任职要求:
1. 有6-10年数据生产经验,丰富的数据处理理论知识,数据建模,数仓相关建设经验
2. Java能力突出,熟练掌握Java主流应用框架,微服务框架,分布式应用框架等,良好的python处理能力
3.熟练掌握Spark,Flink, Kafka等Hadoop生态的大数据套件,并有一定调优经验
4.熟悉mongodb,DynamoDb, mysql, Hbase等数据库,精通其中的一个或多个数据库的操作,良好的SQL能力,熟悉TIDB者优先
5.熟悉AWS,腾讯云,阿里云生产环境之一,对云原生了解者优先
6. 熟练掌握docker容器技术,熟悉K8S,具备CICD等工程部署能力
7. 掌握数据挖掘理论算法,了解数据分析常有的工具
8. 良好的英语听说能力
9. 良好的沟通能力,需求分析能力,抗压能力
10. 熟悉目前市场主流的大语言模型,了解或者接触过模型训练者优先考虑
未选择文件