Google 蜘蛛池，被指为 Google 机器人 集群，是一个庞大 系统，负责抓取 网上各个网站的网页。它核心 功能是帮助Google 搜索 引擎快速 地返回用户查询 的相关结果。 https://wearethelist.com/story23328452/解析-google-蜘蛛池