2回答

0收藏

关于需要账号登录抓取一段时间之后不返回数据的网站反爬问题

问答交流 问答交流 1181 人阅读 | 2 人回复 | 2021-03-03


大佬们有没有遇到过需要账号登录的网站,然后抓取一段时间之后需要的信息不返回的情况?这类反爬一般是怎么反爬的。




一开始试过requests直接发送请求,登录携带cookies去请求抓数据一段时间之后不返回需要的数据了;

再试过用selenium模拟登录获取数据,也是一样的再次登录该账号就不再返回数据了;

有什么办法再不损害账号的情况下知道该网站的风控和反爬措施吗?

[网站](https://www.partslink24.com.cn/partslink24/user/login.do)
分享到:
回复

使用道具 举报

回答|共 2 个

nejo

发表于 2021-3-3 20:28:44 | 显示全部楼层

顶顶
回复

使用道具 举报

蔷薇

发表于 2021-5-24 11:18:34 | 显示全部楼层

遇到同行了, 车型数据
回复

使用道具 举报