急聘中高级python爬虫 坐标金台路地铁站 待遇面谈

招聘python爬虫

职位描述：

1.负责网络爬虫程序设计，开发及维护，对目标网站进行数据爬虫分析，找到最优化的爬取策略。

2.负责爬虫系统的架构设计和研发，独立进行抓取和清洗操作。

3.负责技术难点的攻克。

4.负责大规模数据爬虫的系统搭建以及性能优化工作。

任职要求：

1.本科以上学历，5年以上爬虫工作经验者优先；

2.熟悉app抓取原理技术，熟练从结构优化和非结构优化数据中获取信息；

3.有逆向工程经验，尤其在Android、ios、js的逆向工程经验者优先；

4.精通常见的爬虫框架，scrapy 等分布式爬虫，熟悉常见的反爬虫策略以及大规模分布式爬虫部署方案。

5.熟悉fiddler ，charles，mitmproxy 等抓包工具。

6 熟悉liunx服务器部署和使用。

7 熟悉数据清洗、过滤及优化，需熟悉异步和队列。

8.熟悉mysql，mongdb，redis 等。

9 熟悉多进程、多线程、协程的原理以及使用。

10.熟悉python性能调优先考虑

WX：Fairy895057120

kirinshy

1111

Maybey

1

confunk

1111