一、岗位描述
1、参与大数据平台数据仓库规划、架构及研发,包括离线、实时的数据模型规划,建设PB级的数据集市和数据平台。
2、数据仓库模型的ETL实施,ETL性能优化、技术攻关等。
3、参与全链路数据开发,包括日志埋点、数据采集、数据同步、数据清洗与标准化、数据模型设计、离线数据和实时数据开发和数据治理等工作。
4、负责业务条线按主题模块的数据仓库基础平台的建设和维护。
二、岗位要求
1、全日制本科及以上学历,大数据、数据科学、计算机等相关专业优先;
2、熟悉 Oracle、MySQL、sqlserver等数据库,熟练编写sql,有优化sql能力者优先;
3、熟悉大数据相关技术组件,例如 Hadoop/Hive/Spark/HBase/kafka/Flume/ OLAP引擎等;具备较强的编码能力,熟练掌握java,scala或python等至少其中一门语言;有Shell编写能力,能综合用Java,Python等语言解决问题;
4、能够积极主动贴近业务,有良好的沟通协调能力,数据敏感度高,能够快速理解业务模型及数据模型。