岗位职责
1、负责大数据平台、数据集市、数据库模型、ETL mapping的设计；
2、负责数据平台及应用系统开发、大数据相关规划及应用方案设计；
3、根据需求计划，负责数据清洗、数据处理、数据校验等相关开发及调试工作；
4、执行ETL日常巡检任务，收集错误日志，及时分析处理问题，确保ETL调度平台安全稳定运行；
5、负责大数据平台的开发、维护工作

任职要求
1、本科以上学历，5年及以上ETL开发经验，计算机相关专业；
2、熟悉MySQL、Oracle、kettle、Airflow、linux系统等；
3、熟悉Kettle 等ETL工具的使用、开发、开发流程，了解kettle常用组件的使用；
4、熟悉主流调度工具的使用与优化，如airflow、Azkaban等；
5、精通SQL，有较好SQL性能调优经验，熟悉HBase/hive/druid/mysql/至少一种数据库系统。