岗位职责:
1、负责各类数据的采集、爬取、接口调用接入,清洗、转换、融合入库以及数据处理性能调优等工作;
2、根据业务、产品和项目相关需求,负责数据验证、数据管理、数据服务接口、数据分析等功能的开发维护工作;
3、根据产品和项目需求,负责Python Web开发维护工作;
岗位要求:
1、计算机相关专业本科及以上学历,2年以上相关工作经验;
2、熟悉linux平台,熟练掌握Python、SQL、ETL数据处理开发工作;
3、能够熟练使用Redis、MySQL、Mongo、ES等数据库工具进行数据处理开发和维护工作;
4、熟练掌握数据处理性能调优,数据清洗、转换、整合等数据管理和维护工作;
5、熟练掌握爬虫采集技术及架构设计;
6、熟练掌握并使用过 Tornado/Django/Flask 等 Web 框架中的一种,能够基于该框架快速实现相关管理和分析应用;