1、负责日常采集任务更新和维护；
2、参与新的采集项目技术调研和采集方案设计；
3、参与采集公共库编写和采集通用架构设计；
4、参与采集数据的预处理及ETL工作。

任岗要求：
1、计算机相关专业，本科及以上学历；
2、精通Python，熟悉TCP/UDP/HTTP等基础网络协议，1年以上的Python爬虫经验；
3、熟悉关系型数据库（SQL Server、MySQL或PostgreSQL）和非关系型数据库（MongoDB、HBase），熟练各种基本SQL语句和NoSQL的操作，有OLAP或者OLTP或者HATP经验者优先；
4、熟悉Flask，FastApi等基于Python的Web框架；
5、具备MapReduce和Spark经验优先；
8、熟悉Linux系统，具备Linux系统编程经验优先；
9、责任心强、学习能力强，能承受一定工作压力，具有良好的沟通能力和团队合作精神；