曰批免费视频播放免费,两性午夜刺激性视频,天堂v亚洲国产ⅴ第一次,日韩肉丝袜免费无码Aⅴ

robots/爬蟲協議

2013年06月06日10:14 | 中國發展門戶網 www.chinagate.cn | 給編輯寫信 字號：T|T
關鍵詞： 搜狗 搜索引擎 輸入法 抓取 robots 超級短信 微軟 隱私 用戶信息 音頻
robots協議也稱爬蟲協議，網站通過robots協議告訴搜索引擎哪些頁面可以抓取，哪些頁面不能抓取。robots協議是國際互聯網界通行的道德規范，其目的是保護網站數據和敏感信息、確保用戶個人信息和隱私不被侵犯。
返回頂部文章來源： 中國發展門戶網