高级大数据开发工程师

主要岗位职责:

1、配合产品规划、完善数据产品功能、服务、业务流程。

2、负责数据仓库规划、设计、开发及各业务数据采集、清洗、整合、调度、优化等工作;

3、参与内部数据治理工作,包括元数据管理、数据质量管理、数据权限管理、制定数据开发规范等;

4、负责内部数据应用和工具的设计、开发、维护工作;

5、负责解决大数据集群和线上数据服务实际问题,保障大数据集群及应用安全、高效、稳定运行;

6、关注大数据前沿技术,规划大数据平台类产品架构,将大数据能力服务化输出,推动相应数据产品的研发和落地;

任职资格要求:

1、专业要求:计算机类、通信类、信息系统、数学等相关专业。

2、专业技能

(1)熟悉Java、Scala、Python一种或者多种语言的开发;

(2)熟悉基于Hadoop生态圈组件的工程开发,精通Hadoop、Spark、Hive、HBase、Flink、Kafka、ElasticSearch等主流的大数据技术,具有Java和Scala语言项目开发经验,熟悉python者优先;

(3)对于海量数据的数仓建设(离线数仓、实时数仓)如架构设计、模型设计、数据服务、数据治理等有一定的认知和理解,具备大型数据仓库实施、数据中台开发经验;

(4)熟悉掌握Mysql、Redis、Hive、Hbase等数据库调优手段;

(5)具备良好的学习能力、沟通能力和团队合作精神。

加分项:

1、有PB级数据治理经验;

2、有个性化推荐引擎的设计开发实践经验,熟悉sparkmllib开发;

工作经验:

8年以上相关工作经验,统招全日制硕士及以上学历。

中国联通软件研究院是联通集团互联网化运营转型的重要战略部署,2015年7月成立,本部位于北京,设有济南,哈尔滨,西安,广州和南京五个分院,现有人员队伍规模近2000人。

1、技术能力:自主研发、技术架构一流的cB系统,全球同业规模最大,承接联通3亿+用户;自主研发的eSIM平台,是中国联通eSIM产业联盟创新发展的核心动力,获得GSMA全球移动创新突破大奖;在最新技术领域,打造了全行业最领先的集IaaS资源与IPaaS能力于一体的“天宫云化架构平台”,敏捷开发、持续集成、Devops的“天梯研发管理平台”,面向感知及业务的全数字、自动化、智能化“天眼运营监控平台”。

2、业务生态:在云计算、大数据、AI等领域,与阿里、百度、腾讯等知名企业深度合作并成立联合实验室,mesosphere中国区唯一设计合作伙伴。

公司地点:广州黄埔区中国联通软件研究院广州分院一号楼

公司简介:

职位发布者:傅经理

中国联合网络通信有限公司广州软件研究院

融资阶段:

公司规模:

相似职位: