岗位职责：
参与城市大脑项目大数据的开发工作：
1. 负责数据分析、加工、清理、处理程序的开发。
2. 从事海量数据分析、挖掘相关工作。
3. 负责数据仓库的搭建、开发、维护、优化。
4. 参与数据平台的开发、维护、部署和优化。
任职要求：
1、本科及以上学历，计算机或数学及其相关专业，3年以上相关经验。
2、熟悉数据仓库各类知识，如数据汇聚，元数据管理，数据治理，数据质量，数据标准等。可根据业务设计数据模型。
3、熟悉Linux命令，熟悉Python、shell语言，具备一定Java开发和调试能力，有可视化工具使用经验。
4、熟练掌握MySql、MongoDB等主流数据库，了解Clickhouse, Starrocks等MPP数据库。
5、熟悉Hadoop生态技术（hdfs、hive、hbase、spark等）。
6、 熟悉市场主流的调度系统以及其工作原理。
7、了解Kafka,RabbitMQ等消息中间件，了解Flink、Spark Streaming等流式处理框架。
8、具有较强的学习能力，有独立分析和解决问题的能力，有良好的沟通能力和团队协作精神。
9、有大型互联网电子商务系统或者其他大型企业应用数据分析相关经验优先。
加分项：熟悉数据中台国产化生态，了解主流国产化中间件原理优先。