Spark要比较熟悉，最好有一些优化经验
岗位职责：
1、负责公司内部数据采集、ETL建模和定制化数据分析任务；
2、负责数据仓库架构设计、模型设计和开发；
3、负责数据仓库ETL流程开发和优化，并解决ETL相关技术问题；
4、配合数据仓库架构师完成数据仓库/数据集市ETL设计开发；
5、负责设计、开发、优化ETL任务调度系统；
任职要求：
1、统招专科及以上学历，计算机相关专业，五年以上相关工作经历；
2、5年以上ETL开发经验，3年以上大数据体系ETL开发经验；
3、熟悉Spark、kafka、Hive、Flink、impala、等大数据组件，具有相关系统的调优、运维、开发经验；
4、精通SQL开发，熟悉hive、starrocks等分析型数据库
5、熟悉linux开发环境；熟练掌握python、shell中的一种；
6、熟练掌握kettle,datastage等调度工具中的一种；
7、有物流/电商领域海量数据处理优先。
亿达信息技术有限公司（简称YIDATEC）创建于2006年，是中国领先、国际化的IT服务及数字化运营专家，致力于在数字化时代助力企业实现数据驱动的产品和服务。通过创新的技术和专业的解决方案，将企业IT系统和资产、业务流程与数据资产相结合，在企业运营、客户管理、产品提升等方面，满足企业的数字化、智能化需求，帮助客户创造、提升价值，与客户共同成长。目前，亿达信息已有超8000名员工分布在中国国内主要城市及亚太地区，形成为全球客户在亚太地区提供数字化运营服务的跨区域体系。
应对IT产业向数字化运营服务转型的趋势，YIDATEC通过专业技术和数字化服务整合，实现资源优化重组和价值递增，帮助客户建立数字化运营模式，持续实现商业价值。基于不断提升IT运维服务水平，加强RPA、BPR、大数据运用，打造AI数据平台等，实现企业IT\BP\DT的整合，全方位提升企业数字化运营能力。YIDATEC面向医药、互联网、ICT、金融保险、数字农业等行业，提供全面的数字化运营解决方案，并投资建立了中国东北地区的数据中心。YIDATEC先后与富士施乐、SOFTBANK、UNISYS、日本乐天、SONY、阪急阪神、腾讯、阿里巴巴、华为、阿斯利康、先正达、赛诺菲、武田制药、美的、顺丰、唯品会、华夏人寿、天安人寿等全球知名企业建立长期稳定的合作关系，持续为全球50余家客户在9个国家的20万名企业用户提供专业的数字化运营服务。