为了保证工作的顺利进行，爬虫工作者需要根据情况来制定访问虫策略。不同的网站有不同的访问虫策略，访问虫的具体表现有哪些呢？
1.不返回网页或延迟返回时间
传统的访问虫方法是不返回网页，即当爬虫的请求发送到目标网站之后，网站会返回404页面，以此来表示目标网站无法提供信息。或者就是目标网站长时间不响应，不能及时返回数据。也意味着爬虫已经被判断IP属性，无法高效采集公开数据。
2.返回的网页不是目标网页
还有的情况是当请求发送之后，返回的页面并不是目标页面。也就是说，网站返回虚全球住宅IP，高效采集公开数据，爬下来的信息并不是真实的信息。
3.增加访问难度。
还有可能会增加获取数据的难度来防止爬虫。一般来说，可以通过登录查看数据并设置验证码。而网站为了允许访问公开数据爬虫，无论是否是真正的用户，网站都可能会要求登录并输入验证码。
这三种情况在爬虫行业很常见。想要了解更多的资讯，欢迎访问IPIDEA。
上一篇：代理IP是怎么分类的？
下一篇：代理IP与爬虫效率有关吗？
*ipidea提供的服务必须在境外网络环境下使用
