招聘:爬虫 30-40K
来源:https://www.zhipin.com/job_detail/fa3ed8ffa64a08ff1nB-29W1FldS.html
职位描述岗位职责:
1. 负责分布式网络爬虫系统的开发与优化;
2. 负责破解各类反爬机制,攻克技术难点;
3. 负责需求分析及设计文档、部分代码的编写;
4. 负责通用化模块化设计,不断提升数据抓取系统的自动化水平;
5. 负责分布式爬虫体系架构搭建,负责架构性能持续优化。
任职要求:
1. 精通Python语言特点及运行机制,计算机、网络安全专业本科以上学历;
2. 具有国家企业信用信息公示系统反爬破解及采集开发经验;
2. 熟悉常见反爬机制,验证码识别,IP代理、headers认证和cookie等;
3. 熟练掌握应用Selenium+Chrome/Scrapy-Splash 实施动态HTML抓取,熟悉前端知识;
4. 能承受一定的工作压力,有责任心、上进心、擅长解决问题。
5. 熟练掌握正则表达式、XPath、CSS等网页信息抽取技术;
6. 熟悉 mysql/mongodb、redis 等数据库;
8. 具备以下情况优先考虑:
开发过爬虫任务管理系统者优先;多年针对爬虫反爬斗争经验者优先;主导框架性能优化者优先;主流App逆向经验优先。
大佬我招聘反爬虫~ 来聊聊啊 吼吼~ 说夜幕论坛过来的我就知道啦 给我个邮箱啊 [email protected] 我也来; https://www.zhipin.com/job_detail/7f820f0171955aad1nN-0t60GFpW.html?ka=comp_joblist_7 https://bbs.nightteam.cn/attach-download-1233.htm 地址看不了了。。。。。
页:
[1]