回答

收藏

深圳福田急聘|Python爬虫工程师|20K-30K

招聘求职 招聘求职 1050 人阅读 | 0 人回复 | 2022-07-23

薪资待遇:
20K-30K(能力突出者另议)

岗位职责:
1、负责设计、开发、维护分布式Python爬虫项目,提供稳定可靠的服务;
2、负责各类国内外电商平台的数据爬取工作,如国内PDD,国外Amazon等;
3、负责各类国内外社交媒体平台的数据爬虫工作,如国内某音,国外Facebook等;
4、负责技术攻关和创新技术的引用,解决产品开发过程中高性能、高并发、安全性等问题,负责机器学习算法和系统的开发;
5、协助爬虫可视化系统的后台监控、报警模块的开发。

加分项:
1、实践过PDD、Amazon、某音、Facebook平台爬虫项目;
2、有个人技术博客,地址请附上;
3、熟悉Python爬虫,Scrapy,scrapy-redis框架;
4、熟练使用git;
5、有大数据平台(Hadoop、Hive、Kafka等)相关组件使用经验者优先;
6、对前沿技术有一定的了解,能独立完成新技术的预研,如openstack,容器,数据分析;

岗位要求:
1、2年以上Python开发经验,2年以上爬虫系统开发经验;
2、实践过国内外电商平台或国内外社交媒体平台爬虫项目;
3、实践过反反爬策略,JS防护、混淆、逆向分析;
4、实践过代理池、cookie池搭建和使用以及账号登录认证;
5、了解常见的App及Web反爬策略,能解决IP封禁、参数加密、字体反爬、验证码、账号封禁等问题;
6、熟练使用各类抓包工具,如Charles、Fiddler、Wireshark、Mitmproxy等;
7、熟悉Python爬虫,Scrapy,scrapy-redis框架;
8、熟悉Linux环境、Shell编程,有一定运维排查、自动化监控能力;
9、有耐心有责任心,具备良好的学习能力、沟通能力以及团队意识。

微信:autumoooon
加微信请注明夜幕社区


分享到:
回复

使用道具 举报