欢迎来到帮助中心

  • 期待为您提供最优质的服务
帮助说明 常见问题

爬虫使用代理ip时并发越大越好?

更新时间:2022-07-04 09:58:13 阅读量:632
爬虫一般工作任务比较大,所以工作人员往往会用分布式、多线程进行爬虫工作,这样的情况就要求代理ip支持高并发,但是,代理ip的并发请求是不是越高越好呢?

很多用户在选择代理产品时,都来问小编,是否支持高并发。其实很多都是支持高并发的,但是请求越大,访问的速度会月满,有时候还会超时,严重的还会让代理服务器不稳定,无法连接,这是因为代理服务器的资源是有限的。
单个人使用独享池还是可以的,这样影响的只有自己,如果用的是共享池的话,一个人无限的去请求,是可能会影响到代理ip池里其他的用户的,特别是同业务的用户,相互之间影响会更明显。独享ip虽说可以不限制并发使用,但是比较贵,
且ip量比共享池要少。所以不管是共享池,还是独享池,想要更好的使用代理ip,还是有限制去请求会更高效

logo

欢迎注册小象代理

已阅读并同意《网络安全协议》
已经有账户了?

找回密码

已经有账户了?