急招爬虫工程师
【岗位职责】1.负责开发和维护多平台数据源(WEB/APP/H5/小程序等)信息的采集、解析和存储;
2.搭建分布式网络爬虫系统
【岗位要求】
1.计算机、软件工程等相关专业本科及以上学历
2.熟悉Linux基本命令,熟练运用es,mysql,redis等数据库操作;
3.熟练运用python/c++/go/php等开发语言,并有相关的爬虫开发经验,了解网页爬取机制,能够从结构化和非结构化的数据中获取信息
4.了解不同端的抓包分析方法,能够对各种网络协议进行深入分析
5.熟悉常见的反爬策略
6.能独立解决实际开发过程碰到的各类问题
【薪资】15-30k
【坐标】北京
【联系方式】[email protected]
页:
[1]