在我的WordPress網站上新增robots.txt檔案
搜索引擎(如Google,Yahoo!及Bing)會使用漫遊器抓取您網站的頁面及媒體檔案,以便為這些內容建立索引,以便在搜尋結果中顯示這些內容。如果您的網站上有robots.txt檔案,則可以設定不同的指令,允許或拒絕網站特定區段的檢索。防止自動爬蟲抓取不太重要的頁面及檔案可幫助減輕伺服器負載。這也可以防止漫遊器在有機會瀏覽重要網頁之前達到每個網站的檢索配額。
- 登入 WordPress。
- 安裝並啟用Yoast SEO外掛程式。
- 點選左方選單內的「Yoast SEO」 ,然後點選「工具」。
- 選擇「檔案編輯器」 。
- 點選robots.txt之下的建立robots.txt檔案。系統會載入新的程式碼頁面,這是Yoast為進階疑難排解建立的網站開發人員視圖。您可以用瀏覽器的返回按鈕返回WordPress儀表板。請注意:如果您的網站上已有robots.txt檔案,您可以編輯檔案。
當您返回WordPress儀表板的「檔案編輯器」頁面時,您會看到新建立的robots.txt檔案。在伺服器上,檔案位於WordPress網站的根資料夾內。
相關步驟
- 如果您想在您的網站上自訂robots.txt檔案,請查閱Google文件以取得Google爬蟲的清單,以及更多關於檔案語法的資訊。
- 要從網站中移除robots.txt檔案,請使用FTP或檔案管理員連線至您的主機帳戶,找到您WordPress安裝的根目錄並刪除檔案。
更多資訊
- 如果您想了解有關Yoast SEO外掛程式的相關問題,請瀏覽外掛程式開發人員的官方文件及支援論壇。
- Yoast的robots.txt終極指南