1回答

0收藏

招聘爬虫--成都 (已结束)

招聘求职 招聘求职 985 人阅读 | 1 人回复 | 2021-05-19

本帖最后由 buging 于 2023-11-30 10:44 编辑



岗位描述:

1、分布式网络爬虫系统的设计及开发

2、互联网站、网页、链接的特征挖掘,进行网页抓取、数据提取、清洗、入库

3、负责爬虫核心算法的策略优化研究,充分利用资源,避免限制

4、优化搜索、匹配、抓取等关键程序的性能及效率

任职要求:

1、3年以上爬虫开发经验,熟练应用多线程技术

2、熟练使用正则表达式、css path、xpath等,能够从结构化的和非结构化的数据中获取信息

3、熟练使用MongoDB,Mysql,Redis数据库

4、精通一种开源爬虫框架,如scrapy、scrapy-redis、requests、selenium、puppeteer等

5、熟练使用docker,会部署容器化爬虫

6、熟悉至少一种消息队列




工作地点:成都

待遇:12-16K

有意者联系微信:15988413323(烦请备注“爬虫面试“)






分享到:
回复

使用道具 举报

回答|共 1 个

heawercher

发表于 2021-5-24 04:20:03 | 显示全部楼层

三年这个薪资 怕是有点低哦
回复

使用道具 举报