工作内容:负责公司大数据项目中的Hadoop平台架构设计和开发工作,包括但不限于:- 负责大数据处理平台的设计和开发,熟悉Hadoop生态系统,能独立完成数据仓库和数据湖等大数据应用的架构和实现;- 负责开发和维护大数据处理系统的核心组件,包括Hadoop分布式文件系统(HDFS)、MapReduce编程模型等;- 参与大数据项目的前期需求分析和方案设计,并能够提供专业的意见和建议;- 负责大数据处理平台的部署和维护,确保系统的稳定性和可靠性;- 负责团队技能指导和培训,提高团队整体技术水平。主要职责:- 具备扎实的计算机专业背景,熟悉Linux系统,了解TCP/IP协议;- 熟悉Hadoop生态系统,了解MapReduce编程模型、Hive、Pig等大数据处理技术;- 熟练掌握SQL语言,了解数据仓库和数据湖等技术,熟悉大数据处理算法;- 熟悉Linux系统,了解TCP/IP协议;- 具备良好的沟通能力和团队合作精神,能够胜任工作中的压力。职位要求:- 熟悉大数据处理平台架构,了解MapReduce编程模型、Hive、Pig等大数据处理技术;- 熟悉SQL语言,了解数据仓库和数据湖等技术,熟悉大数据处理算法;