那些网站是如何监测到被爬虫的？

主要有四部分：

1、封锁IP检测：就是检测用户IP访问的速度，如果访问速度达到设置的阈值，就会开启限制封锁IP，让爬虫终止无法继续获取数据。

2、请求头检测：爬虫不是用户，在访问时没有其他特征，网站可以通过检测爬虫的请求头来检测对方到底是用户还是爬虫。

3、验证码检测：登陆验证码限制设置，若是没有输入正确的验证码，将不能再获取到信息。由于爬虫可以借用其他的工具识别验证码，故网站不断的加深验证码的难度，从普通的纯数据研验证码到混合验证码，还是滑动验证码，图片验证码等。

4.cookie检测：浏览器会保存cookie，因此网站会通过检测cookie来识别你是否是真实的用户，若是爬虫没有伪装好，将会触发被限制访问。