知識庫: 虛擬主機
本月才開始,流量卻已經用了很多?
作者 iSmile Helpdesk 於 01/02/2006 11:02 AM

搜尋引擎利用蜘蛛 (Spider) 來更新其資料庫。蜘蛛常於月初訪問網站,讀取及更新其資料庫內的資料。同時也造成了相當大的流量使用。

如果要搜尋引擎的更新機器人不要再來讀取並更新 "整個網站" 或是 "某些資料夾" 內的網頁,請參考以下說明:

  1. 請建立一文字檔,檔名 robots.txt
  2. 內容請依需求放入,

    *** 不要 Spider 更新網站任何一部份 ***

    User-agent: *

    Disallow: /

    *** 不要 Spider 更新 "某些資料夾" ***

    User-agent: *

    Disallow: /[資料夾1]/

    Disallow: /[資料夾2]/

    Disallow: /[資料夾3]/

  3. 編輯完成後,儲存。
  4. 上傳至網頁根目錄 (Linux 虛擬主機:/public_html/,Windows 虛擬主機:\httpdocs\)
(1414 投票數)
有幫助
無幫助

評論 (0)
輸入您的評論
 
 
完整姓名:
電子郵件:
評論:
驗證碼 
 
請於以下空格輸入圖片中的文字(我們以此來防止惡意自動註冊)。