岗位职责:数据采集系统设计与实施、数据清洗与预处理、数据存储架构搭建、数据建模与分析、API接口开发与维护、数据安全与合规性管理任职要求:1、教育背景与专业技能: 计算机科学、统计学、信息技术或相关专业本科及以上学历,具备扎实的数据结构、算法和数据库基础知识。2、工作经验与技能要求: 至少有2年以上数据开发经验,熟悉大数据处理框架如Hadoop、Spark,以及数据流处理工具如Flink、Kafka等。3、数据采集与处理能力: 熟悉物联网设备数据采集方式,能够对海量传感器数据进行高效处理与整合,了解常见数据清洗和预处理方法。4、数据库知识与实践: 精通至少一种关系型数据库(如MySQL、PostgreSQL)和一种非关系型数据库(如MongoDB、Redis),并具有良好的SQL编写能力。5、数据建模与分析: 具备良好的数据建模能力,使用Python、R或其他语言进行数据分析和挖掘,理解机器学习基础原理,能与算法工程师紧密合作。6、编程能力与工具使用: 熟练掌握Python/Java/Scala中的一种或多种编程语言,熟悉Elasticsearch、Hive、HBase等大数据处理工具和技术栈。7、团队协作与沟通: 良好的团队合作精神,能与硬件开发、嵌入式开发、前端开发及算法工程师有效沟通,协同完成项目任务。8、持续学习与创新: 关注行业前沿动态,具备快速学习新技术的能力,根据业务发展不断创新和完善数据解决方案。