电信运营商网络爬虫

返回sprewellkobe的回答

sprewellkobesprewellkobe专有云TX

爬虫首先我们定义它就是获取信息的bot(非人),当然了人也可以起到爬虫的效果,这个就不在这讨论了。

既然是bot,那么按照合规性来说,分为:

  • 合规的bot,比如正规搜索引擎的bot,内容合作方的bot等等
  • 恶意的bot,即未经授权就抓取的bot,按照危害程度可以分为:
    1,高频爬虫,大量抓取,甚至导致服务不稳定的
    2,低频爬虫,少量持续抓取,不会导致服务不稳定,但会导致数据流失

从保护数据的角度来讲,无论是高频爬虫还是低频爬虫,都是非常有害的

互联网服务 · 2017-08-17
浏览1914

回答者

sprewellkobe
专有云TX
擅长领域: 云计算安全网络

sprewellkobe 最近回答过的问题

回答状态

  • 发布时间:2017-08-17
  • 关注会员:2 人
  • 回答浏览:1914
  • X社区推广