职位描述1.协助团队进行数据的预处理,包含:数据清洗,数据检查,包括离线和实时数据处理,海量数据处理。建立一套自动化的,标准的企业数据预处理流程。2.数据治理,与业务部门一起,梳理企业的数据资产,和企业数据闭环。实施数据资产及数据闭环的建设,如协助公司的数据平台的设计,开发等。3.和各业务部门进行沟通、梳理业务痛点,将业务痛点转换为数据理解.设计、开发和优化ETL流程,确保数据的高效、可靠流入数据仓库,利用SQL、Python等工具,处理不同格式和结构的数据(如JSON、CSV、数据库等)4.负责基于Power BI的报告和仪表板开发,满足不同业务部门的需求,设计并实施交互式报告和仪表板,帮助业务团队进行数据分析和决策支持5.在数据工程和B端App业务中应用大模型技术,自动化地提取数据洞察、生成定制化的分析报告或进行自然语言生成职位要求1. 硕士以上学历,计算机科学、数学、车辆工程等理工科专业2.1-3年数据工程师、数据分析师或相关岗位的工作经验,会使用主流大数据工具,具备ETL开发(Python,SQL)和Power BI开发经验3.熟悉Azure等云平台的服务(如Azure Data Factory,Azure Openai等)。4.了解大模型在垂直业务领域落地的技术方案和相关经验5、有较强的沟通能力及团队协作能力 加分项:具有Scrum、Agile等敏捷开发经验。具有大模型应用的项目经验,尤其是在自动化数据分析、报告自动化生成、自然语言查询等领域的应用经验。具有大数据处理相关经验(如Hadoop、Spark等)。