一、岗位职责1、负责大规模数据集的收集、整理、清洗和预处理工作,确保数据的质量和准确性;2、运用数据分析工具和技术,对大数据进行深入分析,挖掘潜在的模式、趋势和关联,为业务决策提供数据支持;3、设计和开发数据可视化工具,以直观的方式展示数据分析结果,帮助业务团队更好地理解数据;4、撰写相关的技术文档、业务接入文档。二、岗位要求1、教育背景 计算机科学、数据科学、数学等相关专业本科及以上学历。2、技术能力(1)熟练掌握至少一种编程语言,如 Python、Java 等,具备扎实的编程基础和代码调试能力;(2)熟悉大数据Hadoop、Hive、Spark、Scala、Flink等技术;(3)掌握数据处理流程、ETL开发、元数据管理、数据监控等技术;(4)具备数据库知识,熟悉 SQL 和 NoSQL 数据库,如 MySQL、ElasticSearch 等。3、团队合作能力(1)具备良好的团队合作精神和沟通能力;(2)有较强的学习能力和自我驱动力,能够快速掌握新的技术和知识。4、其他(1)有大数据相关落地的项目经验优先。