职位名称:数据架构师(Data Architect) 工作地点:上海 职位类型:全职职位描述作为数据架构师,您将负责设计和优化企业级数据架构,确保数据的高效存储、处理和分析,支持业务决策和数字化转型。您需要与数据工程师、分析师、业务团队紧密合作,构建可扩展、安全且高性能的数据生态系统。主要职责 1. 数据架构设计与规划 设计企业级数据架构,包括数据仓库、数据湖、实时数据流等解决方案。 制定数据建模、存储、集成和治理的标准与规范。 确保架构支持业务需求,如数据分析、机器学习、BI可视化等。 2. 数据治理与标准化 建立数据质量管理框架,定义数据生命周期管理策略。 推动元数据管理、数据血缘追踪和数据安全策略(如权限控制、脱敏)。 3. 技术选型与实施 评估并引入大数据技术栈(如Hadoop、Spark、Flink、Kafka等)及云平台(AWS、Azure、GCP)。 优化ETL/ELT流程,设计高性能数据管道。 4. 跨部门协作 与业务团队沟通,将需求转化为技术方案。 指导数据工程师和开发团队实现架构目标,确保技术落地。 5. 性能优化与创新 监控数据系统性能,解决瓶颈问题,提升处理效率。 探索新技术趋势(如AI驱动的数据分析、实时处理、湖仓一体等)。 任职资格必需条件:学历:计算机科学、信息技术或相关专业本科及以上学历。 经验:5年以上数据领域经验,3年以上数据架构设计经验,主导过大型数据项目。 技术能力: 精通关系型数据库(如MySQL、PostgreSQL)和NoSQL(如MongoDB、Cassandra)。 熟悉数据建模工具(ERWin、PowerDesigner)和ETL工具(Informatica、Talend)。 熟悉大数据生态(Hadoop、Spark、Hive、Kafka)及云数据服务(Redshift、BigQuery等)。 掌握至少一门编程语言(Python、Java、Scala)。 软技能: 优秀的逻辑思维、问题解决能力及沟通能力。 能够平衡技术可行性与业务需求。 加分项: 拥有云平台认证(AWS/Azure/GCP数据专家)。 熟悉数据隐私法规(如GDPR、CCPA)。 有金融、电商、物联网等领域的行业经验。