啦啦啦www日本高清免费观看,免费看涩涩无遮挡的漫画,精品久久久一区二区三区,无遮挡呻吟娇喘视频免费播放

首頁?>?知識?資訊?>?什么是robots協議??>?正文

什么是robots協議?

2014/12/26 0:00:00 · 稿源:傳誠信

robots協議:robots.txt是搜索引擎訪問一個網站時要訪問的第一個文件,用以來確定哪些是被允許抓取的哪些是被禁止抓取的。robots.txt必須放在網站根目錄下,且文件名要小寫。詳細的robots.txt寫法可參考http://www.robotstxt.org。

百度嚴格按照robots協議執行,另外,同樣支持網頁內容中添加的名為robots的meta標簽,index、follow、nofollow等指令。


  • 相關推薦
  • 大家在看
客戶服務
咨詢熱線

010-62199213

24小時咨詢熱線

139-1050-5354

主站蜘蛛池模板: 盘锦市| 商都县| 澜沧| 瑞安市| 南陵县| 拉孜县| 南岸区| 三河市| 闵行区| 塔河县| 普兰店市| 江达县| 桃园县| 武宁县| 依安县| 芦溪县| 黑龙江省| 罗山县| 黎城县| 克山县| 南皮县| 东乌| 河津市| 宁晋县| 固镇县| 时尚| 武川县| 高阳县| 当雄县| 遵义市| 清新县| 焦作市| 桐城市| 平湖市| 南涧| 新邵县| 靖江市| 翼城县| 连山| 革吉县| 乐昌市|