主要就是需要熟悉sparkcore,具备Java/scala的开发能力,flink是加分项,纯SQL的不行!!!!!!
(荣耀项目)
工作职责:
负责互联网业务搜推领域数据相关的设计与开发工作,主要包括离线/实时平台的数据仓库和数据服务的设计与开发;
任职要求:
1、本科及以上学历,2年以上工作经验;
2、软件基础理论知识扎实,具有良好的数据结构、算法功底,有良好的编程开发能力,精通SQL、精通Java/scala/python中任意开发语言。
3、熟悉Hadoop生态圈技术栈,熟悉Hive、Spark的离线SQL开发和问题定位、熟悉Spark、Flink的实时开发和问题定位;
4、熟悉Kafka、HBase、Redis等组件并有实际开发使用经验优先;
5、具备大型分布式、高并发、高负载、高可用系统开发及调优经验,有大数据平台的软件开发和部署经验者优先;
6、了解搜推业务,有实际开发经验者优先;