这个爬虫和反爬没有绝对的方法。目前一部分WAF（WEB应用防火墙）可以通过一些技术手段实现反爬的功能，比如：1、通过单IP的请求数量判断；2、因为爬虫访问的页面相对固定，所以可以判断某个IP的请求集中度也可以判断；3、在判断某个IP可能为爬虫时，可发出挑战机制(发出一段需要渲染的ja...