请选择 进入手机版 | 继续访问电脑版

528站长之家

 找回密码
 立即注册
查看: 23|回复: 0

爬虫在哪些时候不需要使用代理IP?

[复制链接]

88

主题

88

帖子

101

积分

新手上路

Rank: 1

积分
101
发表于 2021-1-4 16:02:29 | 显示全部楼层 |阅读模式
  很多人都有这样的误解:爬虫工作一定需要代理IP才能进行下去。其实并不是,今天番茄加速https://www.fanqieip.net/带你来看看爬虫在哪些时候不需要使用代理IP。
  一、业务量很小
  业务量很小的爬虫工作,有时候并不需要使用代理IP就可以完成,比如爬取几百篇文章,用个其他软件就轻松完成了;或者对工作效率没有太大的要求,可以模拟人工正常访问速度慢慢的爬。
  二、反爬策略弱
  有些网站没有反爬虫策略,那么就不需要使用代理IP也可以正常的进行爬虫工作,不过建议还是不要太猛烈了,以免造成网站服务器崩溃;有的网站反爬虫策略非常薄弱,可能不需要代理IP也可以正常的进行爬虫工作。
  其实,不管需不需要代理IP进行爬虫工作,都需要遵守规范,不给他人添麻烦,也是不给自己添麻烦,大家好才是真的好。

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

本平台源码教学视频均通过网络等公开合法渠道获取,仅作为交流使用,其版权归原作者或版权方所有

本平台不对涉及的版权问题负法律责任。若版权方认为侵犯到您的权益,请联系我们删除

小黑屋|528站长之家 ( 沪ICP备11253786号-3 )

GMT+8, 2021-3-2 16:21 , Processed in 0.058187 second(s), 26 queries .

Powered by Discuz! X3.4

© 2001-2017 Comsenz Inc.

快速回复 返回顶部 返回列表