急招爬虫工程师

ksher

【岗位职责】
1.负责开发和维护多平台数据源（WEB/APP/H5/小程序等）信息的采集、解析和存储；
2.搭建分布式网络爬虫系统
【岗位要求】
1.计算机、软件工程等相关专业本科及以上学历
2.熟悉Linux基本命令，熟练运用es，mysql，redis等数据库操作；
3.熟练运用python/c++/go/php等开发语言，并有相关的爬虫开发经验，了解网页爬取机制，能够从结构化和非结构化的数据中获取信息
4.了解不同端的抓包分析方法，能够对各种网络协议进行深入分析
5.熟悉常见的反爬策略
6.能独立解决实际开发过程碰到的各类问题


【薪资】15-30k



【坐标】北京


【联系方式】[email protected]