岗位职责：
1、数据仓库搭建与维护：设计并实施企业级数据仓库分层架构（ODS/DWD/DWS），优化存储与查询性能；选择合适的技术栈（如阿里云MaxCompute、Snowflake、Hive等），部署分区、索引及数据安全策略
2、多源数据整合与ETL开发：独立对接第三方ERP系统（领星/易仓等）、海外仓平台（易可达、易达云等）、电商平台接口（Temu、amazon、walmart等）
3、开发核心ETL流程，处理多源异构数据、实时/批量同步、缓慢变化维（SCD）等场景
4、使用Python（Scrapy/Requests）抓取外部平台数据，设计反爬策略与数据解析逻辑，将爬取数据整合至数据仓库，确保与ERP系统数据的关联一致
5、根据业务需求开发基础Quick BI可视化报表

岗位要求：
1、熟练使用Python（Pandas/SQLAlchemy）和SQL（复杂查询、性能优化），掌握ETL开发工具（如Airflow、DataStage）；
2、熟悉MySQL/PostgreSQL和分布式存储（HDFS/OSS）；
3、具备数据仓库的实际项目经验；
4、能快速学习Quick BI等可视化工具，独立完成报表开发。
5、有ERP系统、海外仓、平台订单对接经验（接口协议如RESTful API、SFTP）
6、熟悉爬虫框架（Scrapy/Selenium）及反爬破解；
7、了解云原生数据仓库（如Redshift/BigQuery）或实时计算（Flink/Kafka）
8、逻辑清晰，能独立将业务需求拆解为技术方案；