职责描述:
1、大数据平台的基础技术规划,编制相关规范文档
2、大数据平台的数据采集、处理、存储以及挖掘分析的架构实现
3、大数据平台的实际规划建设,包括环境和框架的规划搭建以及部分核心编码工作
4、参与业务需求调研,根据需求及行业特点设计大数据解决方案并跟进具体实施项目.
任职要求:
1、本科或以上学历,3年以上大数据架构设计经验
2、熟悉大数据解决方案包括Hadoop、Spark、Storm、Kafka
3、深刻理解大数据处理(流计算、分布式计算、分布式文件系统、分布式存储等相关技术和实现方法,有架构和设计实践经验
4、熟练使用Python/Go/Java等语言之一进行开发处理,可以进行数据模型的设计、开发;