岗位职责:1.规划及建设大数据平台。2.负责大数据储存系统、分布式计算机、挖局算法等设计研发及维护工作、优化工作。3.参与项目的系统设计和核心代码开发。4.整理和提交技术文档,负责核心功能板块的代码编写和测试工作。知识技能要求:1.具有扎实的Java基础,熟悉Shell,Python语言。2.算法技术扎实,熟悉常见的数据结构,了解分布式算法和分布式系统的技术原理。3.熟悉MapReduce设计方法或Spark计算框架,对NoSQL,Hadoop,Hbase,Spark,Hive,flink,kafka等主流运计算,大数据相关软件的充分了解。