1、负责离线与实时数据仓库构建;
2、负责数据模型的设计,ETL实施,ETL性能优化,ETL数据监控以及相关技术问题的解决;
3、深入业务,理解并合理抽象业务需求,发挥数据价值,与业务团队紧密合作;
4、参与大数据应用规划,为数据产品、挖掘团队提供应用指导;
5、 参与数据治理工作,提升数据易用性及数据质量。
。熟悉数据仓库实施方法论、深入了解数据仓库体系,并支撑过实际业务场景;
。熟悉hadoop,hive,spark,flink,clickhouse等大数据框架,有大规模数据处理经验;
。熟悉Java、Scala、Python、SQL等编程语言,具备较强的编码能力;
。对数据敏感,认真细致,善于从数据中发现疑点,具备优秀的技术与业务结合能力。
。有5年以上相关经验