岗位职责:

1、负责数据采集、数据仓库的指标模型设计与开发,支持业务需要。基于领域业务知识,结合公司业务发展需要,设计合理的、有前瞻性的、体系化的数据模型,从而全面、快速支持公司各方的数据需求。

2、设计合适的数据接口,据此从上游各业务系统抽取稳定的明细数据。基于Hive、Spark等数据平台,对数据进行清洗加工、转换和汇总,形成数据仓库的各层数据(包括明细、客户画像、OLAP多维度数据),支持公司各部门的公共数据需要;并作针对性的优化,确保数据准确一致、高效、稳定、及时。

3、数据工具产品设计&数据治理。向平台方提出需求,引导平台方提供好用的数据平台功能,高效支持数据开发、数据传输和治理;基于数据平台,对数据仓库的指标进行管理,包括但不限于:数据指标定义、计算公式、数据依赖关系、血缘分析等。


任职要求:

1、国家承认全日制本科学历。

2、深入理解DW/BI相关的知识,如ETL、数据仓库、OLAP、多维数据模型等;

3、熟练掌握SQL,熟悉hive,并对SQL优化有一定的实践经验者优先;;

4、 熟练掌握 Java,python,shell 中至少一种编程语言;

5、了解spark,storm等开源系统;

6、数据敏感,逻辑清晰、严谨,能够独立分析、决策;

7、有ETL、日志采集、海量数据处理、BI、数据仓库建模、数据挖掘等相关工作经验者优先;
8、有较好的沟通交流能力,善于主动思考和行动,乐于解决具有挑战性的问题,有强烈的开发兴趣与学习欲望。