时间戳

首页 > 解决方案 > 关于 robots.txt 禁止参数 URL

html - 关于 robots.txt 禁止参数 URL

问题描述

我有以 search?=keyword 结尾的页面，我希望 Google 阻止抓取这些页面。示例页面如下。我想知道我是否在 robots.txt 中添加了 Disallow: /search，这样可以吗？

示例网址：

http://www.website.com/search?=neymar
http://www.website.com/search?=ronaldo
http://www.website.com/search?=kobe

所以基本上，我不希望 Google 抓取所有以 /search?=keyword 结尾的 URL。谢谢你。

标签： htmlwordpressseorobots.txt

解决方案

您可以简单地使用“Disallow: /”标签和 URL。这将起作用

推荐阅读