问:输入我网站的URL时,我获得了URL,但添加了查询字符串。我尝试将robots.txt文件禁止为“禁止”:/ *?并收到一条消息,指出:“由于该网站的robots.txt –无法获得对此结果的描述-了解更多信息”。请为我建议避免URL上查询字符串的可靠方法。提前致谢。
答:robots.txt的角色定义为,如果您想阻止站点,请使用Disallow:/,但是Google仍然可以访问您的站点信息。
我对您尝试过的解决方案感到困惑,因为您的解决方案导致了此问题。
在这里,您说的是,您尝试将robots.txt文件禁止为Disallow:/,如果这样做,显然您的网站将被robots.txt文件和查询字符串“由于以下原因而无法提供对此结果的描述”阻止该网站的robots.txt “将在SERP中可见。
为避免这种情况,请允许您的网站的所有漫游器都具有:
用户代理: *
不允许:
由于搜索引擎需要几天的时间,具体取决于网站的内容频率,因此最好在Google搜索控制台中尝试“以Google身份获取”请求。
如果这还是行不通,并且您的站点使用的是WP CMS,请检查“阻止搜索引擎”设置,并从那里进行设置。