[ad_1]
Google通過Search Console向網站管理員發送電子郵件，告知他們從robots.txt文件中刪除noindex語句。
電子郵件內容為：
「Google已確定您網站的robots.txt文件包含不受支持的規則」noindex「。此規則從未得到Google的正式支持，並且在2019年9月1日它將停止工作。請訪問我們的幫助中心，了解如何屏蔽Google索引中的網頁。「
這些通知發布在Google之後幾周 正式取消 支持noindex規則。
目前，Googlebot仍然遵守noindex指令，並將繼續這樣做，直到9月1日。然後，網站所有者需要使用替代方案。
從技術上講，正如電子郵件中所述，谷歌從未有義務首先支持noindex指令。當谷歌開始被網站所有者廣泛使用時，這是一個非正式的規則。
robots.txt缺乏一套標準化的規則本身就是另一個問題 – 谷歌面臨的一個問題 堅定不移地努力解決。
在確定標準規則列表之前，最好不要僅僅依賴非官方規則。
以下是阻止頁面編入索引的其他一些選項：
- 直接在頁面的HTML代碼中使用noindex元標記
- 404和410 HTTP狀態代碼
- 密碼保護
- 在robots.txt中禁用
- 搜索控制台刪除URL工具