【岗位职责】1、负责大数据产品研发,数据处理、ETL等平台的设计和实现;2、负责大数据平台数据资产管理,通过数据质量,数据血缘等方式进行数据治理;3、负责大数据集群搭建调优、维护和升级等工作,保证平台的稳定性;4、通过团队协作和业务部门沟通协作,完成产品开发、数据要求;5、探索前沿大数据组件和架构,将合适的技术方案适时引入业务场景。【任职要求】1、计算机相关专业,本科或本科以上学历;2、熟悉大数据相关组件,如:Hadoop、Hive、HBase、Flink、Kafka等;3、熟悉开源调度组件,如Dolphinscheduler、Airflow等;4、熟悉Java开发,熟悉Spring、SpringMvc、Mybatis、SpringBoot等常用开源框架技术;5、熟悉Sql开发调优,熟悉Mysql、Doris、Clickhouse等关系型数据库和常用Nosql关系型数据库Redis、Mongodb等;6、熟悉Linux系统常用命令,具备shell、python等脚本开发能力;7、逻辑清晰,良好的沟通协作能力,具备良好的团队合作精神和主动意识。