学历要求硕士研究生及以上专业要求 计算机科学与技术软件工程网络安全岗位职责 1.负责根据公司发展阶段及业务需求,进行大数据平台数据采集、处理、存储以及分析挖掘的架构优化与实现。2.负责大数据开发治理平台后端架构设计和技术实现,在企业内部有大数据平台从0-1搭建经验或者了解云上大数据平台产品优先。3.负责大数据相关技术发展方向的预研及落地;4.制定大数据数据治理框架,架构数据中台、数据质量、数据标准、数据应用等方案,并根据使用需求对已有中台进行二次开发建设。应聘资格要求 1.硕士及以上学历,计算机、软件工程、通信类、数学等相关专业。2.了解Hadoop生态体系技术,包括但不限于HDFS、 MR、Yarn、Hive、HBase、ZK、Kafka、Hue、 Starrocks。3.了解Flink流处理框架,掌握Flink任务的开发、优化、部署。4.了解大数据生态中其他开源技术栈,如ElasticSeach、 Redis、ClickHouse等。5.熟悉数据服务架构和设计,能够基于业务设计合理、高耦合、低内聚、可扩展、易维护的数据。6.了解常用的大数据调度框架。如Airflow、Azkaban、 Dolphinscheduler等;熟练掌握离线和实时数据仓库的建模,能够开发易维护、可扩展的ETL代码。