回答

收藏

有偿求国外外卖网站Grubhub稳定获取店铺和菜单数据的方法

悬赏求解 悬赏求解 78 人阅读 | 0 人回复 | 2024-07-08

本帖最后由 Sherwin 于 2024-7-8 16:03 编辑

店铺列表数据和店铺菜单数据都可以在该网站的请求接口中直接找到,遇到的问题是在访问这些接口的时候,会遇到大量的403和462响应,直至获取不到数据,影响数据获取的效率。

现在有偿寻求稳定获取数据的解决方案,要求在scrapy框架下,单个爬虫的速度能稳定在300页每分钟。
提供有效的爬虫代理商或者代码均可接受, 暂不接受自动化方案(如:selenium, playwright等)。
预算千元,可协商。
联系方式,微:  wxnichijou,加好友请备注(夜幕论坛)

更多平台信息
美国外卖网站,需要魔法上网, 主页为: https://www.grubhub.com
店铺列表接口为:
  1. https://api-gtm.grubhub.com/restaurants/search/search_listing?orderMethod={topic_id}&pageSize=36&location=POINT({lon}%20{lat})&sorts=distance&sponsoredSize=3&pageNum=1
复制代码
店铺菜单接口为:
  1. https://api-gtm.grubhub.com/restaurants/' + id_outlet + '?hideChoiceCategories=false&version=4
复制代码



分享到:
回复

使用道具 举报