工作职责:1.技术开发:负责大数据存储、计算平台搭建和开发;负责数据仓库建设,数据抽取、清洗、转化等数据处理程序开发。2.技术选型:负责根据具体应用场景进行技术选型,提出解决方案;3.体系建设:负责数据治理体系建设,能够从零搭建数据治理产品,包括但不限于数据存储体系建设、ETL、数据血缘、数据安全、数据分类分级等。4.团队协作:参与进行客户业务需求、数据分析需求的调研、收集与分析。5.技术预研:负责新技术调研、测试和落地应用,对初中级数据工程师开展带教。任职资格:1.技术技能:精通大数据开发相关技术以及Hadoop/HBae/Hive等开发框架;精通Doris、Flink、Hive、Hbase、ES、Clickhouse等大数据常用技术,熟悉数据提取Flume、Syslog等技术并有实际使用经验;熟悉国内外大数据安全、网络安全行业发展,具备大型数据仓库架构设计、模型设计、存储设计能力;对数据建模及业务抽象有深入的理解,有海量分布式数据库系统的需求分析、架构设计经验;具备扎实的java技术基础,精通Spring生态体系,熟练掌握SpringBoot/SpringCloud微服务研发体系。2.工作经验:计算机相关专业本科及以上学历,5年以上分布式系统、大数据系统开发工作经验,有一定项目管理/团队管理经验。3.通用能力:优秀的沟通和协作能力,能够与团队成员有效沟通;能提出创新的技术解决方案,推动技术进步;快速学习新技术和新工具的能力。4.优先条件:熟悉数据分类分级、数据脱敏、数据水印等技术;研究过前沿数据安全技术,如同态加密、数据脱敏、数据鉴权等;有海量数据实践经验,阅读过源码。