並非所有擁有WordPress網站的用戶都希望在Google的第1頁上展示該功能。事實上，許多用戶寧願他們的網站根本沒有出現在谷歌或任何搜索引擎上。
如果情況確實如此，那麼當前的WordPress版本允許您通過從WordPress儀錶板設置>閱讀中選中「阻止搜索引擎索引此站點」選項來執行此操作。
但是，它下面有一個小的免責聲明：
搜索引擎可以遵守此請求。
因此，雖然到目前為止這是阻止搜索引擎抓取您的網站的簡單方法，但您的網站始終可能會在搜索結果中結束。
WordPress 5.3將解決這個問題
新的WordPress版本將改變它阻止搜索引擎索引網站的方式。版本5.3將刪除robots.txt方法並添加更新的漫遊器元標記，以防止您的網站在搜索引擎上列出：
當然，這個新的元標記是一種更明確的方式，可以防止您的網站被編入索引或抓取。
robo.txt方法中的當前問題由Jono Alderson在trac票證上以及他提出的解決方案進行了很好的總結：
閱讀設置推斷它旨在阻止搜索引擎索引內容，而不是抓取內容。但是，機器人禁止規則的存在會阻止搜索引擎發現noindex指令，因此它們可能會索引「片段」（頁面被索引而沒有內容）。
谷歌最近宣布，他們正在努力防止碎片索引。但是，直到存在（並且我不確定它會存在;它有時仍然是必要/正確的解決方案），我們應該解決當前的行為。我們刪除robots.txt禁止規則，並允許Google（和其他人）抓取該網站。
希望這個新的元標記可以更好地保持您的開發站點（或個人站點）不會出現在搜索引擎中。
你認為這對WordPress 5.3來說是一個受歡迎的補充嗎？請在下面的評論部分告訴我們，我們可以詳細討論！
WordPress 5.3的帖子：用於更好的搜索引擎爬行預防的機器人元標記首先出現在WPblog上。