Google 已更新其图标搜索开发者文档,删除了图标用户代理部分,并明确说明您需要允许 Googlebot 和 Googlebot-Image 用户代理,以便 Google 索引您的图标并将其显示在 Google 搜索中。
Google 的声明。 “在 favicon 文档中明确指出,favicon 文件和网站主页必须分别允许 Googlebot-Image 和 Googlebot 抓取。此外,我们还删除了整个文档中有关 Google Favicon HTTP 用户代理字符串的信息,因为该字符串不再使用。删除 HTTP 用户代理字符串对网站所有者而言没有任何变化。Google Favicon 依赖于 Googlebot-Image 和 Googlebot robots.txt 用户代理令牌,这些令牌仍受支持。”Google写道。
Favicon 用户代理。Google删除了该文档中有关 Favicon 用户代理的部分,以下是 Google 删除该部分之前的屏幕截图:

允许 Googlebot。Google表示,如果您想确保 Google 能够发现您网站的图标,您需要允许 Googlebot 和 Googlebot-Image 用户代理抓取您的网站。Google 更新了文档,内容为:“图标文件必须可被 Googlebot-Image 抓取,主页必须可被 Googlebot 抓取;它们不能被阻止抓取。” 之前,文档只写道:“图标文件和主页都必须可被 Google 抓取(即,它们不能被 Google 阻止)。”
我们为什么关心。如果您在 Google 搜索结果中显示您网站的图标时遇到问题,请务必查看有关此主题的新开发人员文档。另外,请确保您没有在 robots.txt 指令中禁止 Googlebot 和 Googlebot-Image。