我想阻止谷歌抓取我的整个网站 - 除了站点 Map ，我可以用来告诉谷歌优先级和最后更改等等 . 这是一个坏主意吗？我如何在robots.txt中执行此操作？
如果您在Google Crawler中关闭整个广告，那么Google也不会抓取Sitemap.xml .
谢谢
1 回答
如果您在Google Crawler中关闭整个广告，那么Google也不会抓取Sitemap.xml .
谢谢