Google的Robots.txt錯誤

Question

我的Google網站管理員工具中出現此錯誤，無法添加我的sitemap.xml

網址受robots.txt限制

在我的robots.txt中，我有：

User-agent: *
Allow: /$
Disallow: /

它僅用於索引我的主頁，而不是所有網站。

Answer 1

你為什么在那里有$ 。 以及為什么Disallow: / ：

User-agent: *
Allow: /$
Disallow: /

只需將其更改為：

User-agent: *
Allow: /

但是，如果只希望它索引實際的索引頁，則將其更改為：

User-agent: *
Allow: /index.php
Disallow: /

也許這樣做會改變指令的順序：

User-agent: *
Disallow: /
Allow: /index.php
Allow: /$

最后一個示例結合了robots.txt項目，但也對其進行了重新排序。 因此它應該可以按您的意願工作； 只是索引頁而已。