深度解析： Understanding check here the Mechanics of Google's Crawler Distribution 。 Crawler Pool 是 Search Engines 为了 Streamline Gigantic Volumes of Websites 而 Created System。它将 Websites 分配给 不同的爬虫 ，以 最大化抓取速度 。 Crawler Pool Usage| 算法更新 、Website Optimization 、SERP Position 等 Vita