2回答

0收藏

坐标广州珠江新城,诚招爬虫工程师。

招聘求职 招聘求职 1791 人阅读 | 2 人回复 | 2021-01-07




公司信息:

广东中思拓大数据研究院有限公司

房产金融·计算机软件·大数据

地址:珠江新城临江大道中和广场八楼




岗位薪资:18-35k(14薪)





任职要求:
1、全日制本科及以上学历,计算机相关专业;
2、4年及以上自动采集相关工作经验,具备丰富的海量数据自动采集工作经验;
3、具有代码逆向(如app逆向、js逆向等),通过模型(重点是机器学习算法)破解验证码经验者优先考虑;
4、良好的代码能力,扎实的数据结构和算法功底,有快速迭代、逐步优化的工程项目经验;
5、精通自动采集和反自动采集技术,精通http底层协议;精通深度抓取、动态网页技术抓取、浏览器模拟抓取技术等,从结构化的和非结构化的数据中获取信息;
6、精通分布式系统、多线程、云服务,精通一种以上开源框架,熟悉scrapy、 requests、pyspider等其中一个或多个自动采集框架以及原理,有开发自动采集框架经验;
7、对主流自动采集架构有深入研究,具有成熟的自动采集工具开发经验、及Linux 、Windows云服务器的运维经验;
8、有很强的学习能力和技术钻研能力,积极主动,思维灵活开放,有良好的沟通能力、团队合作精神。

岗位职责:
1、技术团队的日常管理,与团队交流、分享技术经验;
2、负责分布自动采集和数据采集系统的架构设计和开发;
3、熟悉各类反反自动采集策略,负责反反自动采集技术难点攻坚,并有丰富的反反自动采集实战经验;
4、深刻理解自动采集系统架构,能对系统架构提出自己的见解和优化方案,提升数据抓取的效率,保证数据的质量和及时更新;
5、实现数据提取、清洗、结构化、入库、统计分析等需求;
6、建立自动采集监测体系,及时分析及解决自动采集脚本在运行过程中出现的问题;
7、负责带领团队,把握网络自动采集核心技术研究方向,研究优化算法,提升自动采集系统的效率及稳定性、可扩展性;
8、忠诚于公司的事业。




面试联系方式:

简历发送至:[email protected]或者直接添加微信:aoriel666,说明【面试】即可
分享到:
回复

使用道具 举报

回答|共 2 个

spiderman

发表于 2021-1-7 16:36:11 | 显示全部楼层

待遇不错
回复

使用道具 举报

小李广

发表于 2021-1-9 17:14:38 | 显示全部楼层

11
回复

使用道具 举报