1回答

0收藏

C#爬金融网站数据

问答交流 问答交流 476 人阅读 | 1 人回复 | 2023-08-17

东方财富可以直接用C#爬,但其它网站如雪球网就不行,创建HttpWeb请求就返回错误,这显然是反爬虫机制的结果。我百度只找到Python的代码,原理是先访问网站主页并把cookies保存下来,再访问个股网页,然后抓个股票数据前设定好cookies值以伪装自己是用户操作。按此方法,我确实可以创建HttpWeb请求(我理解是可以访问个股网页了),但关键第二步request.GetResponse()获取网页数据还是不可以。遗憾的是关于C#爬虫的知识很少,更不要说如何反制网站反爬虫的相关内容,希望社区的前辈指点一下,或者推荐相关书籍。非常感谢!!!
分享到:
回复

使用道具 举报

回答|共 1 个

杨小弟IT服务1号

发表于 2023-8-18 08:57:12 | 显示全部楼层

提示: 作者被禁止或删除 内容自动屏蔽
回复

使用道具 举报