工作职责:
岗位职责
1、负责基于业务数据建设和维护数据仓库；
2、打通数据上下游，深入理解数据维度和业务场景；
3、负责数据采集、清洗、转换、建模等工作，保障数据处理流程的及时准确一致；
4、挖掘数据中的问题和价值，构建指标体系；
5、参与数据、业务平台相关的功能接口、数据接口开发，实现业务功能，保障平台的顺利演进；
6、参与大数据应用规划，为数据业务和数据挖掘提供建议；
7、参与数据资产建设，提升数据资产质量。
任职资格:
任职资格：
1、本科及以上学历，3-5年以上大数据开发或实施经验；
2、熟悉flume、kafka、spark、flink、iceberg、hudi等各类大数据开源工具；
3、熟练掌握hive-sql或spark-sql使用方法；
4、有较强的数仓建模能力，考虑效率、兼容性、扩展性、成本等；
5、具有丰富的数据仓库/数据湖构建经验；
6、熟练使用Java、scala、python、shell等编程语言中的一种或以上，并熟悉Linux系统；
7、善于沟通，对业务敏感，能快速理解业务背景，具有优秀的技术与业务结合能力；
8、具有较强的学习能力，有团队观念，能独立解决问题
9、具有以下经验者优先：
1）有海量数据存储处理项目经验者；
2）具有数理统计、机器学习、自然语言处理背景知识及算法者。
3）熟练掌握K8S集群、Docker的原理和使用者。