岗位职责1、参与核心产品的架构设计,负责大数据平台和数据仓库相关架构开发和核心架构模块实现;2、依据公司的大数据技术发展路线,负责基于Hadoop生态系统和MPP数据库的大规模数据平台的研发及数据仓库的架构来访,提供可靠的数据存储和访问能力;3、负责公司大数据平台和数据仓库的搭建、开发、管理、监控和性能调优,保证集群高效稳定运行;4、规划与开发离线数据平台系统,处理海量数据,优化存储和计算架构的性能;5、负责数据平台技术难点攻关、技术选型评估,参与开发流程的讨论与优化;6、参与公司数据治理策略等的制订和实施;7、负责协助产品经理进行数据仓库相关的需求分析、建模、宽表设计等工作;8、完成上级领导安排的其他工作。任职资格1、硕士及以上学历,有过大型的大数据项目的开发与实践经验;2、有基于多租户体系的大型分布式系统设计经验,负责过海量数据平台上高可用、高性能分布式系统的架构设计;3、熟悉大数据开发框架,熟悉hadoop, flink,spark,等及业界主流流处理平台如,如flink,sparkstreaming等之一;4、熟悉Greenplum、ClickHouse等数据仓库技术,并有广泛的实践经验,具备维护和解决生产问题的能力;5、熟悉掌握分布式存储和NoSQL数据库技术(如MonogoDB、Redis等),有实际生产项目应用经验;6、熟练掌握java,python,scalar中的至少一种编程语言,掌握常见的数据结构,算法,了解软件工程、敏捷开发等知识,熟悉常用设计模式;7、理解SOA,微服务,中间件等PAAS相关的关键理念与技术,并对其有广泛的实践与应用经验,乐于分享;8、有大数据项目、调度、风控等系统设计和从业经验者优先;9、有良好的沟通能力,工作细致,能承受工作压力,踏实肯干,富有团队精神。