你有没有想过网站是依据什么来判断现在有爬虫正在抓取自己网站信息?那么网站的反爬虫机制是以什么为基准来建立的呢。下面来介绍4中最常见的方式。
1、锁IP检测
即会检测到用户锁IP访问浏览的速度，假如访问速度达到设置的阈值，便会开启限制，封锁IP，让爬虫中止了脚步，不能够重复获取信息。针对锁IP检测，可以用代理IP软件更改大量IP地址，都可以很好的攻克限制。
2、请求头检测
爬虫并不是用户，在访问浏览时，如果没有其他的特征，网站是可以依据检测爬虫的请求头来检测对方到底是用户或者爬虫。
3、验证码检测
设置登陆验证码限制，另外还有过快访问设置验证码限制等，若是没有输入正确的验证码，将不可以再获取到信息。由于爬虫是可以借助其他的工具识别验证码，故网站不断的加深验证码的难度，从普通的纯数据研验证码到混合验证码，或者滑动验证码，图片验证码等。
4.cookie检测
浏览器是会保存cookie的，这样网站会依据检测cookie来识别你是否是真实的用户，若是爬虫没有伪装好，将会触发被限制访问浏览。
同样网站是可以依据这些途径去监测是否有爬虫，爬虫工作者也都可以依照这个原理去攻克。例如是利用IP检测的，我们就可以用代理IP来进行换IP处理。
