职位详情

登录

python工程师(爬虫)
1.6-2.2万
人 · 本科 · 5年及以上工作经验 · 性别不限2024/08/28发布
五险一金补充医疗保险交通补贴专业培训绩效奖金定期体检通讯补贴餐饮补贴

润慧科技园-D栋1-2层赛博威

公司信息
苏州百捷信息科技有限公司

民营/150-500人

该公司所有职位
职位描述
双休+六险一金+餐补
弹性上下班
上班 : 8:30-10:00
下班 : 17:30-19:00

硬性要求:做过电商信息爬取,优先淘宝(任意端)、拼多多APP、京东(任意端)、美团APP 这四个平台任意一个即可,且***是最近实现过的

【工作职责】:
1、负责分布式网络爬虫系统及数据库的设计与开发;
2、研究及破解电商及自媒体app反爬策略,保证爬取的稳定性;
3、维护和优化已有的爬虫服务;
4、负责爬虫核心算法的策略优化研究,设计爬虫策略和防屏蔽规则,充分利用资源,提升网页抓取的效率和质量;
5、负责数据平台建设,数据清洗、处理,提供数据服务以及数据管理;
6、分析、理解大数据业务需求,设计技术方案并落地实施;
7、处理各个业务在使用数据平台过程中的各种问题,分析并给出优化方案;
8、可以独立跟进需求项目开发进度。

【任职要求】:
1、计算机相关专业,5年以上Python爬虫工作经验;
2、熟悉爬虫原理及常用的反扒技术,包括但不限于JS防护、混淆、逆向分析、加密、App破解、防逆向、加固、代理等技能,具备较好的前端分析技能;
2、熟悉各类HOOK框架包括单不限于frida、xposed;
3、有天猫、京东、抖音等国内主流平台任意一个平台的项目经验,有App端数据采集经验;
4、熟悉网络爬虫开发原理,对互联网各种类型数据交互模式熟悉,知道如何处理需登录网站、动态网页等各种情况下的数据采集方法;
5、熟悉selenium、Appnium、Airtest、Scrapy、pyspider等爬虫相关框架;
6、熟悉常用数据库(MySQL/Oracle/SQLSever/Redis)?,熟悉索引技术和SQL优化,了解RabbitMQ、InfluxDB。

相关职位
爬虫工程师20-30万/年
查看所有职位
51米多多提醒你:在招聘、录用期间要求你支付费用的行为都必须提高警惕。 以招聘为名的培训、招生,许诺推荐其他工作机会,甚至提供培训贷款,或者支付体检 、服装、押金和培训等费用后才能录用工作的,都属于违法行为,应当提高警惕。一经发现,请立即举报,并向当地公安机关报案。

举报

招聘信息 > 广州招聘 > 后端开发招聘 > 广州爬虫工程师招聘

收藏

热门职位热门城市周边城市