如何隐藏搜索引擎中的特定网站页面URL？

Question

1. 我的项目是一个电子商务网站，它包含许多静态和动态页面。 我想只隐藏搜索引擎中的一个页面。 如果任何一个搜索该文本，那么它不需要在搜索引擎上显示，如“谷歌”，“雅虎”等。

http://www.mysitename.com/users/download/id

以上网址需要隐藏在搜索引擎中。

如果任何人搜索我的mysitename然后上面的链接也显示在谷歌搜索中。 我能为此做些什么？

Answer 1

在您的网站根目录中添加文件robots.txt ，其中包含以下内容：

User-agent: *
Disallow: /users/download/id

这种方法基本上告诉搜索引擎不要索引/users/download/id 。

这并不意味着每个搜索引擎都会这样做，但大多数现代搜索引擎都会考虑该文件。

Answer 2

你可以使用Seo技术......

您可以在HTML中添加代码，以防止机器人抓取您的网页。 此代码以元标记的形式放在网页的标题中（意思是和标记之间）（您认为元标记仅用于关键字）。

以下是此代码的外观的四个示例;

<meta name="robots" content="index,follow">
<meta name="robots" content="noindex,follow">
<meta name="robots" content="index,nofollow">
<meta name="robots" content="noindex,nofollow">

Answer 3

    <meta name="googlebot" content="noindex,nofollow,noarchive,nosnippet,noodp" />
    <meta name="robots" content="noindex,nofollow,noarchive,nosnippet,noodp" />