Google搜索结果页（SERP）的抓取，对SEO从业人员等都有很大的帮助，通过抓取SERP我们可以监测网站的排名情况、PPC广告的情况、链接流行度等数据。 Google作为最大的搜索引擎，有着最大的抓取程序Googlebot，但是他却禁止其他网站抓取他的页面。Google使用了