狠狠网/色综合久久久久综合体桃花网/日本护士三aaaaaa/久久久久久综合一区中文字幕

或者

機器人協議

作者：重慶小面 瀏覽：1252次 發布時間：2017-06-25
編輯 分享 評論 贊0

　　機器人協議(Robots.txt)不過是一個TXT文本文件，存在于你域名根目錄之下，作用是將網站的目錄結構信息告訴爬蟲和蜘蛛，并限制其對特定文件夾和內容的訪問，或者是完全將它們關在門外。


評論(0人參與，0條評論)

發布評論

最新評論

詞條統計

  • 瀏覽次數：1252次
  • 編輯次數：0次歷史版本
  • 最近更新：2017-06-26
  • 創建者：重慶小面

    • 相關詞條

    相關問答

    相關百科

    相關資訊