立即登录 免费注册
夜幕爬虫安全论坛|爬虫论坛»论坛 › 常来看看 › 问答交流 › 爬虫接口并发耗时问题

赞

1回答

0收藏

爬虫接口并发耗时问题

问答交流 问答交流 2272 人阅读 | 1 人回复 | 2019-11-26

大佬们，用tornado封装的爬虫接口有 10% 的请求响应耗时 63s，而且还都是 63s，左右差不了 1s。

剩下 90% 的都在 5s 内，这个怎么解释？

总共 6 台机器跑，有负载均衡，100 线程并发请求接口的。
分享到：
回复

使用道具 举报

回答|共 1 个

daemon

发表于 2019-11-26 11:53:39 | 显示全部楼层

缺少细节，建议使用性能监测工具，查找瓶颈
回复

使用道具 举报

返回列表
avatar
10 积分
1 主题
Powered by Discuz! X3.4 Copyright © 2001-2020, Tencent Cloud.
粤ICP备19119266号-1