岗位职责:1、负责搭建以及维护爬虫系统的设计和核心模块的实现2、负责爬虫技术难点的攻克3、项目管理和人员指导4、试用期有考核要求工作任职要求:1、熟悉Python开发语言,2年及以上爬虫开发经验。2、熟悉Redis、Mysql、MongoDB等常用的数据库。3、具有爬虫分布式系统设计和开发经验,有大规模和实时爬虫的经历。4、精通爬取的各类实现方式和技术细节,包含网络协议分析、JS逆向、APP逆向等。5、熟悉网页自动化软件selenium,手机自动化软件的流程编写。6、能对目前主流APP数据进行抓取,有抖音,头条,小红书爬虫经验者优先。7、熟悉安卓app逆向8、善于沟通,要有团队合作精神,能承受一定强度的工作压力。9、熟悉软件工程,具有项目管理经验,有带过团队经验的优先。