岗位职责- 开发,维护,测试和评估大规模数据处理解决方案。- 在开发数据平台解决方案方面提供专业知识和实际支持。- 负责数据管道的开发和维护,包括数据的来源、提取、清理、转换和验证。- 识别、设计和实现内部流程改进:自动化手动流程和优化数据交付。- 监控性能并实施任何必要的优化更改和要求。- 支持业务定义和更新数据保留策略。- 支持数据架构师和数据科学家进行数据集成和转换工作。岗位要求- Snowflake熟练度:对Snowflake有很强的熟练度和实践经验,包括它的特性、功能,以及数据仓库和分析。- SQL专业知识:至少3年SQL数据库和/或数据仓库的实践经验,包括复杂查询编写,性能优化和故障排除(在Snowflake环境中优先考虑)。- Snowflake管理:熟悉Snowflake管理任务,如用户和角色管理、安全配置、资源监控和查询优化。- 报告经验:熟练掌握Tableau或Power BI,可以根据Snowflake数据创建视觉上引人注目的交互式报告和仪表板。- 云体验:在至少一个主流云平台上使用Snowflake的经验,例如亚马逊网络服务(AWS)、微软Azure或谷歌云平台(GCP)。- 云架构和服务:了解所选云平台提供的云架构和服务,包括存储选项、计算资源、网络和安全特性。- 数据仓库概念:熟练掌握数据仓库概念,包括数据建模、模式设计、ETL/ELT流程和数据加载策略。在编写和配置存储过程、函数和触发器方面有丰富的经验。暴露于大型、复杂的数据环境中;大数据环境非常理想。- 数据治理和安全:了解Snowflake平台中的数据治理原则、数据隐私法规和安全实践,包括数据加密、访问控制和数据屏蔽。- 性能优化、故障排除和问题解决:能够识别和解决性能瓶颈、优化查询执行计划和微调Snowflake配置,以确保高效的数据处理。具有较强的分析和解决问题的能力,能够诊断和解决与数据相关的问题,找出根本原因,并在Snowflake生态系统中提出有效的解决方案。- 沟通与协作:出色的沟通技巧,可以有效地与涉众协作,理解业务需求,并使用Snowflake将其转化为技术解决方案。能够与业务用户一起收集报告需求,并通过Tableau或Power BI提供可操作的见解。- 其他技能(可取):具有matilion和/或Azure数据工厂(ADF)数据集成和ETL流程的经验。- 面试挑战:在3个日历日内成功完成所附的面试挑战,展示与Snowflake、SQL和数据仓库概念相关的实际技能和解决问题的能力。非常感谢您对怡和集团感兴趣。在向我们提交工作申请之前,请您仔细阅读《中国员工和求职者隐私通知》(“通知”)(通过[link]访问),并同意我们可按照通知收集、使用、传输、披露和处理您的个人信息(可能含有敏感个人信息),并单独同意我们可将您的个人信息传输至位于中国境内外的相关接收方(包括但不限于怡和集团的境外关联机构)。工作申请一经提交,您将被视为已给予相关同意。如果您不愿给予任何相关同意,请不要向我们提交任何工作申请。